초록 ▼

본 연구는 Neuro-Emotion Intelligence Vision 기반 사용자 감성추적, 휴먼 아바타의 능동적 감성 표현 및 피드백 기술 개발을 연구목적으로 함. 인체(얼굴/동공) 미동과 뇌/심장 반응의 연결성을 기반으로 카메라를 이용한 무구속/무자각 생체반응 추론 기술을 세계 최초로 개발함. 카메라 기술을 기반으로 감성적 상호작용을 하는 사용자간의 생리반응 동기화 현상을 추적하여 개인/다중의 사회감성을 인식할 수 있는 기술을 개발함. 또한, 실감교류 확장 공간 내 공존현실을 위한 디지털 휴먼 아바타 능동적 표현 및 피드백 기

본 연구는 Neuro-Emotion Intelligence Vision 기반 사용자 감성추적, 휴먼 아바타의 능동적 감성 표현 및 피드백 기술 개발을 연구목적으로 함. 인체(얼굴/동공) 미동과 뇌/심장 반응의 연결성을 기반으로 카메라를 이용한 무구속/무자각 생체반응 추론 기술을 세계 최초로 개발함. 카메라 기술을 기반으로 감성적 상호작용을 하는 사용자간의 생리반응 동기화 현상을 추적하여 개인/다중의 사회감성을 인식할 수 있는 기술을 개발함. 또한, 실감교류 확장 공간 내 공존현실을 위한 디지털 휴먼 아바타 능동적 표현 및 피드백 기술을 개발함으로써 사회 감성에 따른 아바타의 얼굴과 시선, 동공의 표현 요소 적용을 통한 실감 표현 기술을 개발함.

(출처 : 보고서 요약서 3p)

Abstract ▼

□ Purpose & Contents
The project is to develop real-time physiological response and emotion tracking system for single/multi users based on Neuro-Emotion Intelligence Vision.
Neuro-Emotion Intelligence Vision & Glass (NEIV/NEIG) tracks single/multi-users’ emotion from cardiovascular and neuron

□ Purpose & Contents
The project is to develop real-time physiological response and emotion tracking system for single/multi users based on Neuro-Emotion Intelligence Vision.
Neuro-Emotion Intelligence Vision & Glass (NEIV/NEIG) tracks single/multi-users’ emotion from cardiovascular and neuronal responses by extracting micro-movement of face and pupillary response.
Another goal is to develop active emotional expression and feedback technology of digital human avatar for the coexistent reality. This technology generates the avatar’s facial expression, gaze and the interaction factors of pupillary movement which response to social emotion in the coexistent reality.

□ Results
The world’s first tracking system for cardiovascular and neuronal responses based on micro-movement using camera was developed.
The rule-base and tracking system for single/multi users’social emotions were developed based on the cardiovascular and neuronal responses. Social emotions in this project were defined as intimacy, empathy, coexistence, valence, competition-cooperation, focus, engagement and reciprocal interaction.
The physiological response and social emotion tracking system based on the micro-movement of pupil was optimized to HMD and CRSF environment. Human factor tracking system based on pupillary movement was developed. Human factor in this project was defined as visual fatigue and motion sickness.
The active feedback technology of digital human avatar was developed. The technology generates facial expression, gaze and pupillary factors of digital avatar for the realistic representation. Responses of the digital human avatar depends on the social emotions. Social emotion interaction simulator between users and the digital human avatar was developed to evaluate coexistence.

□ Expected Contribution
Physiological response tracking system based on cameras is non-contact measurement which makes users feel comfortable. This can be applied to various industries such as U-health care, security, surveillance, emotion recognition, car and education. Emotion recognition technology can be applied to various service by recognition of the public, individual emotion and help users to feel targeted emotion. The realistic representation and feedback technology for the digital human avatar is expected to expand the coexistence reality by increasing realistic experience.

(출처 : SUMMARY 5p)

목차 Contents

• 표지 ... 1
• 제출문 ... 2
• 보고서 요약서 ... 3
• 요약문 ... 4
• SUMMARY ... 5
• Index ... 6
• 목차 ... 6
• 제1장 연구개발 과제의 개요 ... 7
• 1. 연구개발 목적 ... 7
• 2. 연구개발의 필요성 ... 8
• 3. 연구개발 범위 ... 8
• 제2장. 연구수행 내용 및 성과 ... 10
• 1. 연구 목표 및 실적 ... 10
• 2. 연구 내용 및 결과 ... 13
• 제3장. 목표 달성도 및 관련 분야 기여도 ... 414
• 1~2. 목표 및 달성여부 ... 414
• 3. 관련분야 기여도 ... 421
• 4. 목표 미달성 시 원인(사유) 및 차후대책(후속연구의 필요성 등) ... 422
• 제4장. 연구개발 성과의 활용 계획 등 ... 423
• 제5장. 연구개발성과의 보안등급 ... 425
• 제6장. 국가과학기술종합정보시스템에 등록한 연구시설·장비 현황 ... 426
• 제7장. 연구개발과제 수행에 따른 연구실 등의 안전 조치 이행 실적 ... 427
• 제8장. 연구개발과제의 대표 연구 실적 ... 428
• 제9장. 기타 사항 ... 429
• 제10장. 참고문헌 ... 430
• 끝페이지 ... 431