떠든다.잡설./VR(버츄얼)

VMagicMirror 무료 버츄얼 프로그램이 핸드트래킹까지 된다고?

몽브르 2022. 7. 15.

 

 

VMagicMirror - 夢日記屋さん - BOOTH

VMagicMirror v2.0.6 Standard Edition 2022/07/04 VRMをキーボードとマウスだけで動かせるWindows向けソフトです。ゲームパッドにも反応します。 ゲーム画面やコーディング画面の横に置いて配信に使った

baku-dreameater.booth.pm

VMM(VMagicMirror) 사용하면 캠하나로 꽤 기능이 많은것 같아서 냅다 다운을 받았습니다.

 

 

 

어쩌다 보니 이번에도 부스에서 다운을 받았네요. 픽시브 아이디로 부스에 가입하셔서 다운 받으시면 되겠습니다. 유료 버전도 있지만 일단 무료버전으로 테스트만 해보겠습니다.

 

 

 

압축파일이 하나 받아지고 이걸 풀면 설치파일이 보입니다. VMM인스톨러를 실행해주도록 하겠습니다.

 

 

 

와.. 이놈의 윈도우 비인가 ㄷㄷㄷ 추가정보->실행을 눌러주면 설치화면이 등장합니다. 모든유저설치를 추천한다니까 위에껄 눌러서 설치했습니다.

 

 

 

영어와 일본어를 지원하는데 그나마 읽을수 있는 영어로 선택해주고 설치경로를 선택했습니다.

 

 

 

바탕화면에 단축아이콘 필요없고 설치여부에 대해 확인하니 설치가 진행되네요!!

 

 

 

설치가 완료되고 프로그램이 실행되는데... 어?? 초록색 창만 뜨고 컨트롤 창이 안나와서 한참 당황했습니다;;; 보니까 윈도우에서 차단해버렸네요 ㄱ- 엑서스 허가해주고 다시 실행하니 잘됩니다.

 

 

 

 

VRoid Studio!! 모델링 지식 없이 3D 버츄얼 캐릭터 만들기!!

VRoid Studio v1.4.2 on Steam VRoid Studio is a 3D character creation software developed for you to freely express yourself, even without 3D modeling expertise. The software is easy-to-use. Even fir..

grandvert.tistory.com

Load File on PC를 눌러서 기존에 만들어져있는 모델링(VRM)파일을 불러옵니다. 라이센스를 보여주면서 확인하라고 하는데 저는 기존에 VRoid Studio를 통해서 제가 만든거니까 대충 OK를 눌러줬습니다.

 

 

 

캐릭터마다 키가 다르다보니 키보드에 비해 너무 위에 올라가있네요... Adjust Size by VRM을 눌러주면 적절한 위치로 이동합니다. 좌측과 우측을 비교해보시면 캐릭터가 적당한 위치로 이동한걸 볼 수있습니다.

 

 

 

자 이제 Streaming탭으로 이동해서 옵션을 좀 살펴보겠습니다.(너무 길어지면 힘드니까 간단한 항목만 볼게요)

Transparent Window : 배경을 투명하게 처리해줍니다

(When Transparent)Drag character : (배경투명상태에서)캐릭터를 드래그로 이동할수있습니다

LypSync : 소리가 나면 입모양이 움직입니다.(옆에서 마이크 장치를 선택해줘야합니다)

Track Face : 캠화면을 트래킹합니다.(옆에서 캠 장치를 선택해줘야합니다)

 

 

 

Track Face에서 캠소스를 선택해주고있습니다.

저는 스마트폰+드로이드캠을 사용했고 캠과 마이크 모두 DroidCam Source를 선택했습니다.

 

 

 

핸드트래킹 사용시 우측처럼 특수효과가 생기게됩니다.

얼굴, 상반신까지가 캠화면을 인식해 이동하며, 입술은 소리를 인식해 움직이고, 눈깜빡임은 자동으로 처리되어있습니다. 손은 키보드나 마우스등을 인식해 움직이는 것이 가능하고, 핸드 트래킹도 가능했지만 손 바닥면만 인식이 가능했고 손등이나 옆으로 돌리는건 불가능했습니다. 더군다나 핸드트래킹 사용시 무료버전에서는 특수이펙트가 씌워진 상태로 보여지니 쓰기가 어렵겠네요 ㄷㄷ

 

 

 

개인적으로 캠이 없는 경우 단순히 마이크만으로도 VR캐릭터에 생동감을 주기에는 상당히 좋을것 같습니다. 또한 핸드트래킹 장비 없이도 키보드,마우스,타블렛,게임 패드등의 버튼인식 효과를 지원해줘서 꽤 실감나게 연출 되어 좋았습니다. 다만 페이스트래킹의 경우 목,상반신 정도로 제한되어있고 눈/입술등은 트래킹이 아닌 기본 모션이나 립싱크로 작동하는점과, 핸드트래킹의 경우 손바닥 방향 정도만 표현이 가능해 아쉬움이 컷습니다.

 

 

 

 

 

 

VR기기없이 핸드트래킹/풀트래킹 VSeeFace+TDPT로 해결해보자

VR없이 3D 바디 풀트래킹 하는 방법이 있다?Three D Pose Tracker 포스팅에서 프로그램 테스트 결과물을 움짤(WebP)로 여러 개 첨부해서 로딩에 상당히 시간이 걸릴 수 있습니다. 이미지가 보이지 않는다

grandvert.tistory.com

 

VR없이 3D 바디 풀트래킹 하는 방법이 있다?Three D Pose Tracker

포스팅에서 프로그램 테스트 결과물을 움짤(WebP)로 여러 개 첨부해서 로딩에 상당히 시간이 걸릴 수 있습니다. 이미지가 보이지 않는다면 잠시 기다려주시거나 새로고침 해주세요. 웹서핑을 하

grandvert.tistory.com

 

VUP과 스마트폰으로 나도 버튜버!!

VUP- VTuber & Animation & motion capture & 3D & Live2D on Steam VUP is a VTuber tool, based on real-time capture technology, low-cost, zero-based to realize animation video production and multi-per..

grandvert.tistory.com

 

 

반응형

추천 글