예전에 쓴 LIVE2D 판떼기 이용 버튜버를 직접 해보는 방법에 이어서 3D편입니다
1편 : LIVE2D 직접 해볼사람을 위한 정보글 + 모델링 구하는법
https://bbs.ruliweb.com/community/board/300143/read/52952022
(3D방송 참고용 예)
1. 준비물
- 3D방송을 할 아바타(글 내용 참조)
- 실행할 PC, 웹캠(핸드폰으로 대체 가능), 마이크
- VSeeFace(3D 트래킹 및 송출용 프로그램)OBS Studio(방송용 프로그램)
*기본적으로 무료 프로그램만 사용합니다
2. 3D 방송용 프로그램
VSeeFace
다운로드 : https://www.vseeface.icu/
얼굴 트래킹 가능, 보는 방향에 따라 상체 회전, LeapMotion장비 연동시 손 트래킹 가능
장점 : 좋은 트래킹 성능, 높은 프레임, 다양한 설정 지원
단점 : 풀 트래킹 불가, 기능은 많지만 설명이 부족해 직접 다 만져볼수밖에 없음
무료 프로그램 중 방송용으로는 쓸만한 기능은 다 가지고 있어서 추천.
3. 실행 후 설정법
설치후 첫 실행 시 튜토리얼이 나오는데 기본 조작법등은 나중에 다시볼거니 넘겨줍시다(튜토 다시보기 가능)
메인 화면으로 넘어오면 중간 아바타 선택창 / 오른쪽 카메라/마이크 설정을 해야하는데
1) 카메라/마이크 설정을 해 줍니다.
카메라 : 현재 사용중인 웹캠 또는 핸드폰 캠을 선택
카메라 세팅 : 캠 성능에 맞춰 해상도/프레임 선택
카메라 프레임/트래킹 퀼리티는 그냥 최대로 설정
마이크 : 사용할 마이크 선택
*Recommend Settings은 자체 진단 후 프레임/퀄리티를 설정해주는데 사용시 프레임 저하/렉이 있을경우 해보시는걸 추천.
2) 기본 아타바를 사용하여 테스트하거나 별도의 아바타를 직접 제작/구매/다운로드하여 추가 후 동작이 가능하다
*VSeeFace는 .VRM 파일만 사용 가능(VRChat, MMD등의 모델은 유니티를 이용 변환작업이 필요)
일단 아바타 추가 테스트용으로 다운받아 시험해보자
* 니코니코동화 3D아바타 작품 게시판
여기서 마음에 드는 VRM 모델을 하나 선택후 다운받은 후 중앙의 Add avatar를 눌러 모델을 추가해주면
이렇게 아바타가 추가되고 아바타를 클릭 Start를 누르면 바로 캠 트래킹이 시작되고 조정화면으로 넘어간다
조정화면
(우측 세팅 아래부터)
아바타 선택 - 현재 화면에서 아바타 바로 변경
헬프 - 각종 도움말(영어), 튜토리얼 다시보기
*튜토리얼을 안 봤다면 여기서 한번 봐야한다. 카메라 조작법, 포지션 리셋법 등의 내용이 있음.
리셋 포지션 - 카메라 조정 등을 했을경우 초기위치로 리셋한다. 아바타의 캠 트래킹이 틀어졌을경우 정면을 쳐다보며 누르면 맞춰짐
미러 모션 - ON/OFF가능. 거울처럼 움직임을 설정 / ON하는걸 추천
드리프트 백 - ON/OFF가능. 내가 몸을 움직일 경우 천천히 초기위치로 자동으로 이동한다 / 캠 트래킹이 계속 틀어지니 OFF추천
립모션 - 립모션 장비가 없을경우 OFF
스무싱 - 움직임의 부드러운 정도. 낮을경우 빠르게 움직여지고 높을경우 느리게 움직여진다. / 0.4~0.5 추천
무브먼트레인지 - 움직임 정도. 0은 내 움직임과 일치, 높을수록 움직임 거리가 길어진다 / 0.2~0.3 추천
우측하단 ※ -> UI숨김설정(튜토리얼 참고)
세팅 - 각종 설정(중앙 5개)
1) 립모션 세팅 - 장비없으면 패스, 있을 경우 해당 영상 참조
https://www.youtube.com/watch?v=AguLzFGQXqA
2) 이펙트 세팅 - 각종 필터 효과를 넣을수있다
3) 라이트 세팅 - 광원효과(그림자 등)를 조정할수있음
4) 익스프레션 세팅 - 아바타 제작 시 설정한 표정 셋을 조정/단축키로 설정할 수 있음
5) 제네럴 세팅 - 그냥 옵션설정
눈,눈썹,입 등의 움직임 세부조정/각종효과/그래픽세팅 등 다양하게 있으니 하나씩 만져보고 설정하자
*기본설정시 팔 위치가 이상한데 이건 Arm angle 변경으로 조정 가능하다
4. 방송 설정법
OBS를 이용한 트위치/유튜브 방송법까지 설명하려했으나 그럼 너무 내용이 길어져서 링크로 대체함
---------------------------------------------------------------------------------
- OBS 설치 및 기본 송출 설정법 : https://paengstar.tistory.com/3
- VSeeFace 화면 송출방법 : 튜토리얼 내용대로 설정([+]게임 캡쳐->새로만들기 후 설정)
* 모르겠으면 아래 이미지 설정 그대로 해보는걸 추천
- 트위치 방송 송출 설정 : https://tforest.tistory.com/61
- 유튜브 방송 송출 설정 : https://tforest.tistory.com/63
* 크로마키설정은 VSeeFace에서 자체적으로 되기에 필요없음
---------------------------------------------------------------------------------
여기까지만 해도 3D판때기방송은 충분하게 가능하다. 아래로는 기타 추가 정보들
5. Leap Motion(립모션)
맨손으로 가능한 핸드트래킹용 특수 캠. 국내기준 중고5~8만/신품13만원 정도
이런식으로 손에 캠을 대면 작동해서 손의 움직임을 따라해준다.
문제점은 캠이라서 손 또는 손가락이 가려지는 행동을 할 경우(양 손을 잡는다던가) 트래킹이 제대로 안 된다
성능이 조금 떨어지지만 가격이 싼 점과 이정도라도 움직이는것만으로도 방송에서의 차이는 크다
이런 느낌으로 방송중 손을 움직일 수 있다
구매/설치에 대한 내용은 네이버나 구글에서 LeapMotion/립모션으로 검색 참고할것
6. 기타 정보들 모음
- 아바타 구하는 곳
1) 니코니코동화(무료)
2차창작 아바타들이 많다. 그렇기 떄문에 방송은 불가능한 아바타들이 많음
2) VRoid(무료)
무료 3D아바타 제작 프로그램으로 기본 아바타들도 제공한다. 그나마 간단해서 초보도 만들 수 있다.
3) BOOTH(유료)
만들어진 아바타를 판매한다(일부 무료 배포도 존재)
수익화 가능한 방송도 가능하며 고 퀼리티 모델들이 많아 추천하지만 여기저기 사용하는 모델들이다
https://booth.pm/ko/browse/3D%20Models
4) 유니티를 이용 파일변환
일부 판매하는/배포하는 아바타들은 .VRM파일이 아니기에 유니티로 변환이 필요하다(Unity + UniVRM 필요)
* Unity Hub를 설치 후 2019.4 LTS버전 혹은 2018.4 LTS버전을 다운받을 것
https://store.unity.com/kr/download-nuo
* VSeeFace나 기타 프로그램 사용 가능하도록 VRM파일로 아바타를 변환하는 툴
https://github.com/vrm-c/UniVRM/releases/tag/v0.66.0
* 변환 방법 설명
한글 : https://www.youtube.com/watch?v=OdMGQPVxxnU
영어 : https://www.youtube.com/watch?v=bn6W81v5oU4
* MMD파일을 VRM으로 변경시 참고 영상(영어)
https://www.youtube.com/watch?v=dax5GM3PAyU
https://www.youtube.com/watch?v=ldoMXl1u9yo
*모델링 구매 및 사용 시 이용약관을 꼭 읽어볼 것(방송가능/수정가능 등등 여부 확인필요)
- VSeeFace 외 다른 방송용 프로그램들
1) Hitogata(히토가타)
얼굴 트래킹 가능, 보는 방향에 따라 상체 회전
장점 : 자체 아바타 제작기능 탑재, 단순하고 가벼움, 좋은 트래킹 기능, 포즈 등 모션기능
단점 : 낮은 프레임(3D아바타 모델링이 무거울수록 낮아짐), 업데이트 없음
다운로드 : https://sites.google.com/site/vhitogata/home
2) VirtualMotionCapture(VMC)
풀 트래킹 가능, 직접 움직이며 하는 방송에 적합함
장점 : 다양한 효과, 각종 프로그램과 연동하여 사용 가능
단점 : VR장비 필요
다운로드 : https://akira.works/VirtualMotionCapture-ko/download.html
3)Luppet
유료(제일 싼게 6천엔)이기에 설명 생략
다운로드 : https://negipoyoc.booth.pm/items/1196507
그 외에도 좋은 프로그램들이 있으니 자기에게 맞는것을 찾아보는걸 추천함.
-----------------------------------------------
LIVE2D방송에 이어 3D방송편 끝
다음번은 보이스체인저(무료) 사용법으로 오겠읍니다
관심있는사람이 있으면 방송한번 해봐..왜 유게이 버튜버는 아무도 없는거임
(IP보기클릭)118.218.***.***
그래서 작성자는 암캇타락한건가요?!
(IP보기클릭)14.52.***.***
와 이거 지우지 마라
(IP보기클릭)118.39.***.***
히히 고마워 ! 요즘 버튜버 할까 진지하게 고민중인데 나중에 버튜버할때 도움 되겠다
(IP보기클릭)223.55.***.***
이런거 광고하면 유게 부타게이들이 TS 미소녀로 양산되어버렷
(IP보기클릭)221.143.***.***
재밌어보이는데 비쌀거같애..
(IP보기클릭)39.119.***.***
유튜브 암컷타락 와드 미래의 나야 이 글을 다시 찾게 되었다는 것은 더이상 내몰릴 곳조차 없다는 것을 뜻하겠지. 부디 건투를..
(IP보기클릭)211.47.***.***
앰컷 되고 싶을 때 참고하면 되는 거로군
(IP보기클릭)121.177.***.***
(IP보기클릭)14.52.***.***
와 이거 지우지 마라
(IP보기클릭)121.177.***.***
안지워 시리즈물이야 | 21.07.26 22:02 | | |
(IP보기클릭)118.218.***.***
그래서 작성자는 암캇타락한건가요?!
(IP보기클릭)121.177.***.***
| 21.07.26 22:03 | | |
(IP보기클릭)118.39.***.***
히히 고마워 ! 요즘 버튜버 할까 진지하게 고민중인데 나중에 버튜버할때 도움 되겠다
(IP보기클릭)121.177.***.***
관심있으면 꼭 해봐 관련 글은 계속 작성할 예정 | 21.07.26 22:02 | | |
(IP보기클릭)118.39.***.***
응 ㅎㅅㅎ 땡큐 ㅊㅊㅊㅊㅊ | 21.07.26 22:12 | | |
(IP보기클릭)223.38.***.***
나도!! 고민중이였는데 고마워!! | 22.05.08 09:59 | | |
(IP보기클릭)119.198.***.***
(IP보기클릭)39.118.***.***
(IP보기클릭)223.55.***.***
이런거 광고하면 유게 부타게이들이 TS 미소녀로 양산되어버렷
(IP보기클릭)221.143.***.***
재밌어보이는데 비쌀거같애..
(IP보기클릭)121.177.***.***
아바타 빼곤 전부 무료야... | 21.07.26 22:27 | | |
(IP보기클릭)121.177.***.***
아 아니다 장비값도있지 | 21.07.26 22:28 | | |
(IP보기클릭)175.116.***.***
(IP보기클릭)223.62.***.***
(IP보기클릭)222.101.***.***
(IP보기클릭)125.182.***.***
(IP보기클릭)116.93.***.***
(IP보기클릭)220.78.***.***
(IP보기클릭)39.119.***.***
유튜브 암컷타락 와드 미래의 나야 이 글을 다시 찾게 되었다는 것은 더이상 내몰릴 곳조차 없다는 것을 뜻하겠지. 부디 건투를..
(IP보기클릭)218.238.***.***
(IP보기클릭)14.52.***.***
(IP보기클릭)59.5.***.***
(IP보기클릭)211.57.***.***
(IP보기클릭)221.157.***.***
(IP보기클릭)219.248.***.***
(IP보기클릭)211.47.***.***
앰컷 되고 싶을 때 참고하면 되는 거로군
(IP보기클릭)223.39.***.***
(IP보기클릭)211.226.***.***
(IP보기클릭)183.97.***.***
(IP보기클릭)106.101.***.***
(IP보기클릭)210.105.***.***
(IP보기클릭)220.85.***.***
(IP보기클릭)59.5.***.***
(IP보기클릭)222.232.***.***
(IP보기클릭)211.186.***.***
(IP보기클릭)119.200.***.***
(IP보기클릭)117.111.***.***
(IP보기클릭)223.62.***.***
(IP보기클릭)121.177.***.***
점심밥먹자
이번주중엔 올릴거에오 선생님..프로그램들 테스트중인데 무료로는 아무래도 한계가 좀 | 21.07.27 22:19 | | |
(IP보기클릭)121.177.***.***
점심밥먹자
성능은 무난한데 변환 후 딜레이가 0.3~0.5초정도로 크고 노이즈가 생겨서 별로네요 마구로나가 쓰는 그랄리온2에 여러가지 동시 적용으로 변환 테스트 하는중임돠.. 전부 무료고 노이즈제거+피치조정+이퀼라이저+이퀼라이저2+로우컷필터 등등 | 21.07.27 22:31 | | |
(IP보기클릭)220.83.***.***
(IP보기클릭)59.19.***.***
이나다치
손 트래킹이 됐다 안됐다 하는거면 손가락 인식이 안되거나 손 두개가 겹치면 그런증상이 있긴 함 처음 인식할때 손 하나나 두개를 인식시킨 후 해제 안되도록 사용해야하는데 이게 생각보다 까다로워서 많이 불편함 나는 평소 잡담용으로 쓸 때는 키보드 앞에 거치대 끼워서 세워두고 손 인식시킨 후 키보드 위로 손 계속 인식되도록 유지하면서 사용하는데 이렇게 하면 어지간하면 손짓하면서 계속 트래킹이 가능함. 게임이나 키보드 치면서 손 트래킹을 사용할 일 있으면 가슴에 차고하는데 이건 별도구매하거나 직접 만들어야할거임. 아래 링크처럼 사용하고있는데 이건 가끔 내 몸 움직임이나 손이 너무 내려가면 트래킹이 꼬일때가 있음 https://www.youtube.com/watch?v=AguLzFGQXqA 립모션은 저가형이라 아무래도 성능이 떨어져서 좀 그렇긴 한데 손 풀트장비는 백대가 넘어가니 어쩔수없이 적응해야함 ㅜㅜ | 21.10.14 18:11 | | |
(IP보기클릭)59.19.***.***
이나다치
뭔가 말이 길어져서 포인트가 어긋났는데 제일 중요한건 손 인식이 해제 안되도록 손이(특히 손가락이) 잘 보이는 위치에 두고 사용해야함 손등보다는 손바닥쪽으로 인식될수록 좀 더 부드럽고 자연스럽게 움직여짐 | 21.10.14 18:17 | | |
(IP보기클릭)223.39.***.***
이나다치
지금 집이 아니라 사진은 없고..키보드랑 모니터 사이 공간에 핸드폰거치대 사용해서 약 10cm정도 올려서 고정해두고 쓰고있음 포지션 높이를 기본보다 조금 더 높이고 로테이션x를 50~80정도로 설정해서 웹캠처럼 정면에서 보이게 설정해서 쓰는거임 플랫데스크는 그대로 사용 | 21.10.14 18:27 | | |
(IP보기클릭)121.146.***.***
궁금해서 그런데 버튜버는 이런 느낌의 모델링으로는 못하는건가요 ?
(IP보기클릭)223.33.***.***
이런느낌의 아바타로 활동하는 유튜버들도 있습니다 단지 리얼한 3D쪽은 주류가 아니고 트래킹이 어색하면 기괴해지기 쉽기도하고 호불호가 좀 갈림 이쪽분야는 국내나 일본쪽은 거의 못봤고 서양쪽 풀트래킹하는사람들이 일부 사용하는걸 봤습니다 관련 유튜버로는 코드미코(codemiko) 찾아보시면 될거에요 | 21.11.26 22:44 | | |
(IP보기클릭)121.146.***.***
답변 감사합니다 ! | 21.11.26 22:58 | | |
(IP보기클릭)39.112.***.***
(IP보기클릭)110.15.***.***
(IP보기클릭)39.7.***.***
(IP보기클릭)180.228.***.***
(IP보기클릭)223.62.***.***
뭐지 누가 딴데다 링크던지고갔나 댓글이 4개나 | 22.04.03 17:03 | | |
(IP보기클릭)180.228.***.***
타락한 유게이글 누가 댓글에 썻는데 세세하게 잘써있어서 와드 박고감 | 22.04.03 17:39 | | |
(IP보기클릭)223.62.***.***
와드감삼다 이거도 너무 예전자료라 조만간 업뎃좀 해야겠네 | 22.04.03 17:41 | | |
(IP보기클릭)211.189.***.***
(IP보기클릭)211.220.***.***
최근엔 Pitchproof로 바꿨습니다 개인적으론 이쪽 성능이 더 좋네요 보첸은 그냥 쓴다고 끝이 아니라서요 저기서도 추가로 목소리를 높인다던가 연기톤으로 한다던가 등의 개인적인 발성을 추가해줘야 합니다 프로그램도 보이스체인저 1개만 달랑 쓰는 경우는 없고 노이즈제거, 저음제거, 오디오인터페이스 등등 여러가지 복합세팅해줘야하는데 그렇게 해도 목소리 이쁘게 안되는 사람들은 안됩니다 보이스쪽은 재능의 영역이란게 있어서 프로그램만으론 아직까지 완전변조는 힘들어요.. | 22.10.06 14:28 | | |