초록 ▼

연구목표
●소환현실기반 콘텐츠를 제작하기 위해 실감형 인터랙션 NUI 요소 기술을 반영한 NUI/NUX 미들웨어 프레임워크를 연구 개발하여 소환현실 응용서비스를 실제 환경에서 활용할 수 있는 선도적 기술력을 축적하고, 이론과 실무 능력을 겸비한 실감형 인터랙션 NUI 플랫폼의 글로벌 고급 인재를 양성함.
- [제1세부과제] 멀티모달 실감형 인터랙션 NUI 요소 기술 연구
- [제2세부과제] 실감형 인터랙션 NUI 미들웨어 프레임워크 기술 연구
- [제3세부과제] 실감형 인터랙션 NUI기술을 활용한 소환현실 응용

연구목표
●소환현실기반 콘텐츠를 제작하기 위해 실감형 인터랙션 NUI 요소 기술을 반영한 NUI/NUX 미들웨어 프레임워크를 연구 개발하여 소환현실 응용서비스를 실제 환경에서 활용할 수 있는 선도적 기술력을 축적하고, 이론과 실무 능력을 겸비한 실감형 인터랙션 NUI 플랫폼의 글로벌 고급 인재를 양성함.
- [제1세부과제] 멀티모달 실감형 인터랙션 NUI 요소 기술 연구
- [제2세부과제] 실감형 인터랙션 NUI 미들웨어 프레임워크 기술 연구
- [제3세부과제] 실감형 인터랙션 NUI기술을 활용한 소환현실 응용서비스 연구
- [제4세부과제] NUI/NUX 기반 공연/전시용 실감형 인터랙션 기술 개발
●경제적/사회적 파급효과가 매우 클 것으로 예상되는 전시나 게임 같은 소환현실 응용 서비스를 시범 개발함.

연구내용
●본 사업의 NUI/NUX 플랫폼 기술 개발 과제를 성공적으로 수행하고 고급 전문인력 양성이라는 목표를 달성하기 위하여, 산업체 수요를 반영한 원천 기술 연구와 특허 발굴, 학제간 융합연구, 그리고 미국 플로리다 대학교, 중국 북방 대학교, 중국 마카오 대학교, 아우구스브르크 대학교, 독일 프라운호퍼 연구소 등 유수의 해외 연구소와 대학과의 공동 교육과 공동 연구를 수행함.
●본 과제의 연구 내용을 다음과 같이 3개의 세부 과제로 나누고, 세부 과제별로 구성한 세부 연구항목을 설정하여 연구 개발을 추진함.
o 멀티모달 실감형 인터랙션 NUI 요소 기술 개발
- 중거리에서 동작하는 몸 동작 인식, 조명/표정/포즈 변화에 강인한 얼굴, 성별 및 나이 인식, 맨손 및 손가락 동작인식 기술, 중거리(10m 이상)에서 동작하는 음성인식 인터랙션 기술, 실공간 특정 객체 인식과 추적 기술 등을 연구함. 이 요소 기술들을 사용할 있는 오픈 API 플랫폼 설계 및 개발.
o 실감형 인터랙션 NUI 미들웨어 프레임워크 기술
- 실시간 다중 사용자 추적 및 센서간 연동 기술, 다중 기기간 NUI 정보 연동 및 협업 기술, 인터랙션 동적 공간의 구성 및 관리 기술, 다양한 NUI 비정형 데이터 특성을 고려한 클라우드 컴퓨팅 기반의 대용량 저장 관리 기술,기존 애플리케이션과의 연동을 위한 UI 명령어 자동변환 기술 등을 연구개발함.
o 실감형 인터랙션 NUI 기술을 활용한 소환현실 응용 서비스 연구
- 공간 UI 구성 및 터치 인터랙션 기술, 사용자 추적기반 정보 표현 기술, 실시간 실세계 영상 정합 및 보정 표현 기술, 사용자 동선추적 지향성 음향제어 기술, 사용자 위치기반 다중 디스플레이 몰입정보 표현 기술 등을 연구하고 이를 통합하여 소환현실 응용 서비스의 시나리오 기반 NUI 요소기술 연계 서비스를 개발함.

기대효과 (응용분야 및 활용범위 포함)
● 기술/경제/산업적 파급 효과
o 소환현실을 위한 실감형 인터랙션 NUI 기술은 스마트 공간을 구성하는 차세대기술로 다양한 산업분야에서도 필요성을 느끼고 큰 관심을 가지고 있으나, 고비용 고가격과 원가 상승을 우려해 기술 개발에 적극적이지는 않으므로, 역혁신을 추구하여 낮은 비용으로 시스템 개발과 상품화 기술 이전하여 상품의 부가가치를 높이고 제품의 경쟁력을 강화함.
o 본 센터 사업의 중소형인 참여 산업체들과 연계한 기술 이전, 인력 공급, 상용화 등을 통해 중소기업의 기술력과 경쟁력을 확대하여 산업체의 발전 모델로 모범 사례가 될 것임.
o 국가사회 전반에 NUI/NUX의 창조적 활용을 촉진하고, NUI/NUX 산업의 수요기반 창출을 통해 창조경제 창조사회 구현에 한 몫을 할 것임.
● 인재 양성 파급 효과
o 관련 해외 교육 연구 기관과의 공동 연구, 국제학회 발표, 전시회 참여 등을 통해 NUI/NUX 기술 개발을 추진하여 창의력과 실무 경험을 갖춘 융합형 고급인력 양성.
o 본 센터는 매년 약 20명의 NUI/NUX 전문 인력을 양성하여 NUI/NUX기반 사업분야에서 주도적인 역할을 할 것으로 예상함.
o 글로벌 경쟁력 강화를 위한 핵심기술 R&D 지원과 국내 중소기업들이 공동으로 이용할 수 있는 NUI/NUX 시험환경 인프라 확충하고 고도화함.
o 산업체 진출 후도 지속적으로 기술 개발 활동을 수행할 수 있는 다양한 전문역량을 보유한 고급 전문인력을 배출하여 산업체 전반에 미래지향적인 기술개발 및 연구 모델 전파함.
o 실무 위주의 대학원 교육과정을 통하여 국제적 경쟁력을 보장하는 선진형 교육과정모델을 제시함.

Abstract ▼

Purpose
●We research and develop NUI/NUX middleware framework reflecting immersive interaction NUI element technology for producing invoked reality-based contents. And educate global advanced leaders related to immersive interaction NUI platform with such theory and practical technologies.
- [

Purpose
●We research and develop NUI/NUX middleware framework reflecting immersive interaction NUI element technology for producing invoked reality-based contents. And educate global advanced leaders related to immersive interaction NUI platform with such theory and practical technologies.
- [1st detailed project] Technology research of Multimodal Immersive Inte raction NUI components
- [2nd detailed project] Technology research of Immersive Interaction NUI Middleware Framework
- [3rd detailed project] Technology research of Invoked Reality Application Services using Immersive Interaction NUI engine
- [4th detailed project] Development of NUI/NUX based immersive interacti on technology for performance/exhibition
●We develop invoked reality application services including exhibition or game contents which expected to happen ripple effect about economic and social.