초록 ▼

□ 연구개요
기존 오프라인 노래방 서비스의 공간적 한계를 가상현실(VR : Virtual Reality) 기술 개발로 해결
￭ 가상현실(VR) 사용자의 존재감(presence) 향상을 위하여 아바타에 대한 제어감과 신체 소유감을 증진하는 것이 도움을 주는데, 이를 위해 사용자가 노래하는 스스로의 얼굴과 신체 모습을 가상현실의 아바타에 투영하는 기술 개발
￭ 또한, 모션 캡쳐 등 공간을 차지하는 여러 부수적인 장치들과 동시에 사용하는 VR체험환경 보다는 개인용 VR 장비 – HMD와 콘트롤러 – 환경에 맞는 연구개발을

□ 연구개요
기존 오프라인 노래방 서비스의 공간적 한계를 가상현실(VR : Virtual Reality) 기술 개발로 해결
￭ 가상현실(VR) 사용자의 존재감(presence) 향상을 위하여 아바타에 대한 제어감과 신체 소유감을 증진하는 것이 도움을 주는데, 이를 위해 사용자가 노래하는 스스로의 얼굴과 신체 모습을 가상현실의 아바타에 투영하는 기술 개발
￭ 또한, 모션 캡쳐 등 공간을 차지하는 여러 부수적인 장치들과 동시에 사용하는 VR체험환경 보다는 개인용 VR 장비 – HMD와 콘트롤러 – 환경에 맞는 연구개발을 수행하여 대중적인 VR 체험에 적용을 지향

□ 연구 목표대비 연구결과
다음 연구목표를 기술적으로 구현을 완료하였습니다.
￭ 가상현실 가창 공간 구현 및 사용자 인터랙션 기술
: 가상 스튜디오 공간 생성 기술, 가상공간 접속자 간 인터랙션 기술
￭ 아바타 립싱크 제어 및 동기화 기술
: 음소 분류 및 입술 모양 모델링, 입술 모양 표현 및 입술과 치아의 동기화 기술 개발
￭ 음악 기반 안무 자동 생성 및 동작 제어 기술
: 음악 안무 분석 기술, 음악 안무 생성 및 매칭 기술, 안무 동작 시각화 기술개발을 통해 가상현실 내 실감형 콘텐츠 생산과 사용자 몰입감 향상 연구결과를 국내 학진등재지와 해외 SCI 저널에 투고하고 심사결과를 기다리고 있습니다.

□ 연구개발결과의 중요성
가상현실(VR) 체험 물은 현재 전시회장, 놀이동산, 방송국, VR 방 등의 공간에서 3-5분 정도의 길이로 체험되고 있고, 그 사용자들의 반응도 좋다. 체험하는 공간의 크기가 어느 정도 확보되어야하기 때문에 공공공간의 체험 물이 대다수이고, 사용자의 편의성 때문에 3-5분 정도의 길이가 대부분이다. 따라서, 가상현실 산업의 저변확대와 성장을 위해서는 개인 공간에서 비교적 장시간 사용이 가능한 체험을 도와주는 기술개발이 필요하다. 이는 VR 체험 물의 다양성과 대중성을 위해서도 필수적이다.

(출처 : 연구결과 요약문 2p)

목차 Contents

• 표지 ... 1
• 연구결과 요약문 ... 2
• 목차 ... 3
• 1. 연구개발과제의 개요 ... 4
• 2. 연구수행내용 및 연구결과 ... 7
• 2.1 시스템 개요 ... 7
• 2.2 아바타 상체 자세 추정 ... 7
• 2.3 대화형 가상 현실에서 아바타의 립싱크 ... 7
• 2.4 음악 기반 안무 자동 생성 ... 9
• 2.5 결과 ... 10
• 3. 연구개발결과의 중요성 ... 13
• 4. 참고문헌 ... 13
• 5. 연구성과 ... 15
• 대표적 연구실적 ... 16
• 끝페이지 ... 24