버튜버) 3D버튜버 방송 직접하는방법 총정리

 

예전에 쓴 LIVE2D 판떼기 이용 버튜버를 직접 해보는 방법에 이어서 3D편입니다

1편 : LIVE2D 직접 해볼사람을 위한 정보글 + 모델링 구하는법

https://bbs.ruliweb.com/community/board/300143/read/52952022

 

 

 

 

(3D방송 참고용 예)

1. 준비물

 

- 3D방송을 할 아바타(글 내용 참조)

- 실행할 PC, 웹캠(핸드폰으로 대체 가능), 마이크

- VSeeFace(3D 트래킹 및 송출용 프로그램)OBS Studio(방송용 프로그램)

*기본적으로 무료 프로그램만 사용합니다

 

 

 

 

 

2. 3D 방송용 프로그램

 

 

VSeeFace 

다운로드 : https://www.vseeface.icu/

 

얼굴 트래킹 가능, 보는 방향에 따라 상체 회전, LeapMotion장비 연동시 손 트래킹 가능

장점 : 좋은 트래킹 성능, 높은 프레임, 다양한 설정 지원

단점 : 풀 트래킹 불가, 기능은 많지만 설명이 부족해 직접 다 만져볼수밖에 없음

무료 프로그램 중 방송용으로는 쓸만한 기능은 다 가지고 있어서 추천. 

 

 

 

 

 

3. 실행 후 설정법

 

설치후 첫 실행 시 튜토리얼이 나오는데 기본 조작법등은 나중에 다시볼거니 넘겨줍시다(튜토 다시보기 가능)

 

 

메인 화면으로 넘어오면 중간 아바타 선택창 / 오른쪽 카메라/마이크 설정을 해야하는데

 

 

1) 카메라/마이크 설정을 해 줍니다.

카메라 : 현재 사용중인 웹캠 또는 핸드폰 캠을 선택

카메라 세팅 : 캠 성능에 맞춰 해상도/프레임 선택

카메라 프레임/트래킹 퀼리티는 그냥 최대로 설정

마이크 : 사용할 마이크 선택

*Recommend Settings은 자체 진단 후 프레임/퀄리티를 설정해주는데 사용시 프레임 저하/렉이 있을경우 해보시는걸 추천.

 

 

2) 기본 아타바를 사용하여 테스트하거나 별도의 아바타를 직접 제작/구매/다운로드하여 추가 후 동작이 가능하다

*VSeeFace는 .VRM 파일만 사용 가능(VRChat, MMD등의 모델은 유니티를 이용 변환작업이 필요)

 

 

일단 아바타 추가 테스트용으로 다운받아 시험해보자

* 니코니코동화 3D아바타 작품 게시판

https://3d.nicovideo.jp/search?category=all&download_filter=all&limit=28&order=1&perfect_match=0&sort=created_at&usable_animation=&word=VRM&word_type=tag&work_type=vrm

 

 

여기서 마음에 드는 VRM 모델을 하나 선택후 다운받은 후 중앙의 Add 에이브이atar를 눌러 모델을 추가해주면

 

 

이렇게 아바타가 추가되고 아바타를 클릭 Start를 누르면 바로 캠 트래킹이 시작되고 조정화면으로 넘어간다

 

 

조정화면

 

(우측 세팅 아래부터)

아바타 선택 - 현재 화면에서 아바타 바로 변경

헬프 - 각종 도움말(영어), 튜토리얼 다시보기

*튜토리얼을 안 봤다면 여기서 한번 봐야한다. 카메라 조작법, 포지션 리셋법 등의 내용이 있음.

리셋 포지션 - 카메라 조정 등을 했을경우 초기위치로 리셋한다. 아바타의 캠 트래킹이 틀어졌을경우 정면을 쳐다보며 누르면 맞춰짐

미러 모션 - ON/OFF가능. 거울처럼 움직임을 설정 / ON하는걸 추천

드리프트 백 - ON/OFF가능. 내가 몸을 움직일 경우 천천히 초기위치로 자동으로 이동한다 / 캠 트래킹이 계속 틀어지니 OFF추천

립모션 - 립모션 장비가 없을경우 OFF

스무싱 - 움직임의 부드러운 정도. 낮을경우 빠르게 움직여지고 높을경우 느리게 움직여진다. / 0.4~0.5 추천

무브먼트레인지 - 움직임 정도. 0은 내 움직임과 일치, 높을수록 움직임 거리가 길어진다 / 0.2~0.3 추천

우측하단 ※ -> UI숨김설정(튜토리얼 참고)

 

 

 

세팅 - 각종 설정(중앙 5개)

 

1) 립모션 세팅 - 장비없으면 패스, 있을 경우 해당 영상 참조

https://www.youtube.com/watch?v=AguLzFGQXqA

 

2) 이펙트 세팅 - 각종 필터 효과를 넣을수있다

 

3) 라이트 세팅 - 광원효과(그림자 등)를 조정할수있음

 

4) 익스프레션 세팅 - 아바타 제작 시 설정한 표정 셋을 조정/단축키로 설정할 수 있음

 

5) 제네럴 세팅 - 그냥 옵션설정

눈,눈썹,입 등의 움직임 세부조정/각종효과/그래픽세팅 등 다양하게 있으니 하나씩 만져보고 설정하자

*기본설정시 팔 위치가 이상한데 이건 Arm angle 변경으로 조정 가능하다

 

 

 

 

4. 방송 설정법

 

OBS를 이용한 트위치/유튜브 방송법까지 설명하려했으나 그럼 너무 내용이 길어져서 링크로 대체함

---------------------------------------------------------------------------------

- OBS 설치 및 기본 송출 설정법 : https://paengstar.tistory.com/3

- VSeeFace 화면 송출방법 : 튜토리얼 내용대로 설정([+]게임 캡쳐->새로만들기 후 설정)

* 모르겠으면 아래 이미지 설정 그대로 해보는걸 추천

- 트위치 방송 송출 설정 : https://tforest.tistory.com/61

- 유튜브 방송 송출 설정 : https://tforest.tistory.com/63

* 크로마키설정은 VSeeFace에서 자체적으로 되기에 필요없음

---------------------------------------------------------------------------------

 

여기까지만 해도 3D판때기방송은 충분하게 가능하다. 아래로는 기타 추가 정보들

 

 

 

 

 

5. Leap Motion(립모션)

 

맨손으로 가능한 핸드트래킹용 특수 캠. 국내기준 중고5~8만/신품13만원 정도

 

 

이런식으로 손에 캠을 대면 작동해서 손의 움직임을 따라해준다.

 

문제점은 캠이라서 손 또는 손가락이 가려지는 행동을 할 경우(양 손을 잡는다던가) 트래킹이 제대로 안 된다

성능이 조금 떨어지지만 가격이 싼 점과 이정도라도 움직이는것만으로도 방송에서의 차이는 크다

 

이런 느낌으로 방송중 손을 움직일 수 있다

 

구매/설치에 대한 내용은 네이버나 구글에서 LeapMotion/립모션으로 검색 참고할것

 

 

 

 

 

 

 

6. 기타 정보들 모음

 

 

- 아바타 구하는 곳

 

1) 니코니코동화(무료)

https://3d.nicovideo.jp/search?category=all&download_filter=all&limit=28&order=1&perfect_match=0&sort=created_at&usable_animation=&word=VRM&word_type=tag&work_type=vrm

2차창작 아바타들이 많다. 그렇기 떄문에 방송은 불가능한 아바타들이 많음

2) VRoid(무료)

무료 3D아바타 제작 프로그램으로 기본 아바타들도 제공한다. 그나마 간단해서 초보도 만들 수 있다.

https://vroid.com/en/studio

 

3) BOOTH(유료)

만들어진 아바타를 판매한다(일부 무료 배포도 존재)

수익화 가능한 방송도 가능하며 고 퀼리티 모델들이 많아 추천하지만 여기저기 사용하는 모델들이다

https://booth.pm/ko/browse/3D%20Models

 

4) 유니티를 이용 파일변환

일부 판매하는/배포하는 아바타들은 .VRM파일이 아니기에 유니티로 변환이 필요하다(Unity + UniVRM 필요)

* Unity Hub를 설치 후 2019.4 LTS버전 혹은 2018.4 LTS버전을 다운받을 것

https://store.unity.com/kr/download-nuo

* VSeeFace나 기타 프로그램 사용 가능하도록 VRM파일로 아바타를 변환하는 툴

https://github.com/vrm-c/UniVRM/releases/tag/v0.66.0

* 변환 방법 설명

한글 : https://www.youtube.com/watch?v=OdMGQPVxxnU

영어 : https://www.youtube.com/watch?v=bn6W81v5oU4

* MMD파일을 VRM으로 변경시 참고 영상(영어)

https://www.youtube.com/watch?v=dax5GM3PAyU

https://www.youtube.com/watch?v=ldoMXl1u9yo

 

*모델링 구매 및 사용 시 이용약관을 꼭 읽어볼 것(방송가능/수정가능 등등 여부 확인필요)

 

 

- VSeeFace 외 다른 방송용 프로그램들

1) Hitogata(히토가타)

얼굴 트래킹 가능, 보는 방향에 따라 상체 회전

장점 : 자체 아바타 제작기능 탑재, 단순하고 가벼움, 좋은 트래킹 기능, 포즈 등 모션기능

단점 : 낮은 프레임(3D아바타 모델링이 무거울수록 낮아짐), 업데이트 없음

다운로드 : https://sites.google.com/site/vhitogata/home

 

2) VirtualMotionCapture(VMC)

풀 트래킹 가능, 직접 움직이며 하는 방송에 적합함

장점 : 다양한 효과, 각종 프로그램과 연동하여 사용 가능

단점 : VR장비 필요

다운로드 : https://akira.works/VirtualMotionCapture-ko/download.html

3)Luppet

유료(제일 싼게 6천엔)이기에 설명 생략

다운로드 : https://negipoyoc.booth.pm/items/1196507

 

그 외에도 좋은 프로그램들이 있으니 자기에게 맞는것을 찾아보는걸 추천함.

 

 

-----------------------------------------------

 

LIVE2D방송에 이어 3D방송편 끝

다음번은 보이스체인저(무료) 사용법으로 오겠읍니다

 

 

관심있는사람이 있으면 방송한번 해봐..왜 유게이 버튜버는 아무도 없는거임