초록 ▼

연구개발 목표
○ 사람들이 가장 많이 사용하는 기기인 스마트 폰에 장착되어 널리 보편화 되어갈 Tango Phone 등 3D Depth Device를 가지고, 자신만의 Avatar를 각자의 개성에 맞추어 쉽고 빠르게 제작할 수 있게 하는 MRA(Mixed Reality Avatar) Platform 개발과 이를 활용한 MRA Market 및 Killer Service (VAW) 개발

연구개발 내용
○ MR Avatar Platform 구현
3D Depth Scanning 컴포넌트 구현
아바타 Cre

연구개발 목표
○ 사람들이 가장 많이 사용하는 기기인 스마트 폰에 장착되어 널리 보편화 되어갈 Tango Phone 등 3D Depth Device를 가지고, 자신만의 Avatar를 각자의 개성에 맞추어 쉽고 빠르게 제작할 수 있게 하는 MRA(Mixed Reality Avatar) Platform 개발과 이를 활용한 MRA Market 및 Killer Service (VAW) 개발

연구개발 내용
○ MR Avatar Platform 구현
3D Depth Scanning 컴포넌트 구현
아바타 Create 컴포넌트 구현
아바타 Reshape 컴포넌트 구현
Auto-Rigging / Activator 컴포넌트 구현
○ MR Avatar Repository 프로토타입 구축
MRA Market-Place, VAW 서비스용 Repository 프로토타입
○ VAW(Mall, MR World) 프로토타입 구현
VAW 서비스 기본이 되는 Community 및 Mall 기능이 포함된 App 개발
VAW의 서비스 형태인 MR world 기능과 Mall 기능이 들어간 프로토타입 구현
○ 3D 스캐닝, 리깅 엔진 구현
말, 감정표현이 가능한 Controllable face의 구현
센싱을 통한 Digital Puppeteering으로 움직이나 행동을 제어 가능한 아바타의 생성
○ AR환경 에서의 아바타 최적화 연구
스마트폰의 증강현실 배경 속, 아바타 감정 구현에 대한 최적화 연구
○ 교육분야, ARML 2D 인식 증강현실 응용 활용 기법 개발
2D 이미지 인식 기반 증강현실 서비스에서 활용 가능한 ARML 응용 기법 연구 및 개발
AR Book 등 교육분야 주요 응용시나리오 선정
2D 이미지 인식 기반 ARML 응용 기법을 활용한 교육 분야 예제 서비스 시나리오 연구 및 앱 개발
○ ARML 위치 및 공간인식 기반 증강현실 응용기법 개발
위치/공간 인식 기반 증강현실 증강현실 서비스 개발에 활용 가능한 ARML 응용 연구 및 개발
위치/공간 기반 ARML 응용 기법을 활용한 예제 서비스 시나리오 연구 및 앱 개발
○ 콘텐츠 활용 및 Interaction 기법 개발
ARML을 활용한 사용자 인터랙션을위한 연구 및 샘플 개발
3D, Audio/Video, HTML 등 ARML에서 사용가능한 다양한 콘텐츠 활용 기법 연구 및 개발
○ T-AR 2D 인식 추적 엔진 고도화 개발
T-AR 2D 인식 추적 엔진의 성능 최적화를 위한 개발
○ T-AR Browser 기능/성능 고도화 개발
T-AR Browser 엔진의 기능 및 성능 최적화를 위한 개발

연구개발성과
평가항목
MRA 아바타 생성 엔진
- 복합 스캔을 통한 얼굴 구현
목표 : 20분
달성 여부 : 달성
- 아바타 생성 소요시간
목표 : 15분
달성 여부 : 달성
- 아바타의 택스쳐 해상도
목표 : 640x480 Pixel
달성 여부 : 달성

평가항목
MRA 아바타 편집, 코디 엔진
- 아바타의 편집 부위
목표 : 2개
달성 여부 : 달성

평가항목
MRA 아바타 편집, 코디 엔진
- 코디네이션가능한 객체수
목표 : 3개
달성 여부 : 달성

평가항목
MRA 아바타 애니메이션, 리깅
- 애니메이션 및 자동 리깅
목표 : 20초
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- ARML - Geometry
목표 : 20개
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- ARML –VisualAsset
목표 : 100개
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- ARML – JavaScript
목표 : 180개
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- AR Browser Engine SDK
목표 : 80개
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- ARML 기반 서비스 기법
목표 : 3가지
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- MRA 및 T-AR 연동 기술
목표 : 1개
달성 여부 : 달성

평가항목
T-AR Browser for MRA
- T-AR Browser for MRA 메모리
목표 : 500Mb
달성 여부 : 미달성

평가항목
T-AR 2D인식 추적 엔진
- 인식 소요 시간
목표 : 500Mb
달성 여부 : 미달성

평가항목
T-AR 2D인식 추적 엔진
- 동작 인식 가능한 객체 수
목표 : 1개
달성 여부 : 달성

평가항목
T-AR 2D인식 추적 엔진
- 인식시 실시간 메모리 사용량
목표 : 50Mb
달성 여부 : 미달성

평가항목
T-AR 2D인식 추적 엔진
- 평균 인식 정확도(Mean Average Precision, mAP)
목표 : 0.6
달성 여부 : 달성

평가항목
T-AR 2D인식 추적 엔진
- 객체 추적 및 증강 속도
목표 : 30fps
달성 여부 : 달성

활용계획 및 기대효과
○ 활용 계획
■ MR Avatar를 활용한 인터넷 방송 Service 개발. 아프리카TV나 다음카카오의 TV팟과 같은 서비스인 MCN(Multi Channel Networks) 사업에 MR Avatar의 SDK를 가지고 새로운 인터넷 방송용 Platform을 제작함으로 다양한 부가가치를 창출. 특히나 방송 자키(BJ)들에게 있어 외모가 출중하지 못하거나, 개인사정상 직접 방송에 얼굴을 드러내지 못할 때, MR Avatar를 출연 시키고 표정을 Tracking하여 방송함과 Event를 추가해 시청자와의 더 많은 형태로의 소통 방식을 제공
■ 모바일이 확산되면서 1인 인터넷방송의 급격한 성장을 이루고 있는 가운데, 드라마나 예능뿐만 아니라 간단한 움직임을 만들 수 있는 MR Avatar Platform를 활용하여 웹툰 용 애니매이션을 쉽게 제작할 수 있는 서비스 제공
■ T-AR for MR Avatar와 교육 서비스 접목 형태의 서비스 개발. 증강현실과 가상현실을 MR Avatar를 활용하여 3D 체험형 교육서비스 플랫폼 개발을 목표로 하며, AR/VR 시장에 혁신을 가져다 준 HMD (기어 VR, Oculus Rift, Google Cardboard 등) 기기와 Structure Sensor나 Interaction 장비를 연동하여 사전 시뮬레이션 효과를 제공함으로 실습 교육에 있어, 막대한 비용절감 및 안정성을 확보하고, 상당한 학습 효율을 선사할 것 임. 듣고 따라하고 체험하는 교육 형태뿐만 아니라, 음성인식 엔진인 시리, 나우, 코르니타 엔진을 연동한 대화형 Smart Education Service 개발
○ 기대효과
■ 다양한 산업과 서비스 모델의 육성을 위한 제품 개발과 상품화 육성을 위한 기술적 시스템 구축을 통해 MRA 자동생성 운용기술의 선점을 통해 관련시장의 주도권을 확보
■ 실사기반 스캔 신기술로서의 희소가치의 뛰어난 고품격 실사 마케팅 도구로 활용하여 고부가가치 산업 창출
■ SNS, 커머스 및 O2O 등 신규 서비스와의 연계를 통한 비즈니스 시너지 창출 가속화를 통한 수익의 다각화
■ 자신을 스캔, 생성한 Avatar를 통해서 새로운 커뮤니티 구축과 다양한 경험을 제공하며 건전한 인터넷 문화를 형성함

목차 Contents

• 표지 ... 1
• 정보통신·방송 연구개발 (1연차) 보고서 ... 2
• 목차 ... 3
• 국문요약문 ... 4
• 기술개발사업 주요 연구 성과 ... 8
• 1. 연구개발 목표 ... 8
• 2. 연구 범위 및 연구 수행 방법 ... 11
• 3. 연구개발 목표의 달성도 및 자체 평가 ... 18
• 4. 연구개발성과(해당되는 성과만 기재) ... 22
• 5. 구매 금액이 3천만원 이상인 연구시설ㆍ장비 구축 현황 ... 24
• 6. 연구개발비 집행 실적 ... 24
• 7. 연구 수행에 따른 문제점 및 개선 방향 ... 25
• 8. 중요 연구 변경 사항 ... 25
• 9. 기타 건의 사항 ... 25
• 붙임1. 자체 보안관리 진단표 ... 26
• 붙임2. 연구실 안전조치 이행표 ... 27
• 끝페이지 ... 28