$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

자동 적응 기반 메타버스 가상 휴먼 상호작용 기법
Automatic Adaptation Based Metaverse Virtual Human Interaction 원문보기

정보처리학회논문지. KIPS transactions on software and data engineering. 소프트웨어 및 데이터 공학, v.11 no.2, 2022년, pp.101 - 106  

정진호 (울산대학교 AI융합전공) ,  조동식 (울산대학교 IT융합전공)

초록
AI-Helper 아이콘AI-Helper

최근 가상 휴먼은 국방, 의료, 산업, 유통, 문화, 엔터테인먼트 등 다양한 서비스 분야에서 교육, 훈련 정보 가이드, 홍보 전시 등 널리 활용되고 있다. 또한, 가상 휴먼을 통해 원격지에 접속한 사용자와 상호작용하기 위한 메타버스 서비스가 급속히 확대 적용될 것으로 전망하고 있다. 메타버스 환경 안에서 가상 휴먼(혹은 아바타)을 이용한 상호작용은 참여자가 현실 세계의 실제 친구와 대화하는 것처럼 자연스럽게 소통하는 방식으로 운용이 되고, 이를 위해서는 사용자의 음성, 동작, 감정 등 다양한 입력을 기반으로 반응하는 가상 휴먼 상호작용 매핑 관계를 제작하여야 한다. 또한, 현실 세계의 변화에 동작하는 가상 휴먼의 경우 현실의 환경에 기반한 상호작용 동작이 되도록 지원하여야 한다. 하지만, 기존 가상 휴먼 상호작용 방법은 미리 정해진 반응형 패턴을 제작하기 위해 수작업으로 동작 결과를 프로그래밍하여 구현되었다. 이러한 방법은 개발 기간이 상대적으로 많이 소요되고, 상호작용 수정이 쉽게 변경하지 못하는 단점이 있다. 또한, 실제 주변 환경의 영향에 의해 반응적으로 동작하는 상호작용을 지원하기가 어렵다고 할 수 있다. 본 논문에서는 가상 휴먼의 직관적인 상호작용을 위해 음성, 동작, 감정 등 사용자의 멀티모달 입력과 주변 환경에 대한 반응하는 가상 휴먼 제작 방법을 제시한다. 이를 위한 가상 휴먼 상호작용 저작도구를 통해 쉽고 빠르게 사용자와 반응하는 가상 휴먼의 표현을 생성하고, 가상 휴먼이 자동 적응 기반으로 사용자 입력 및 주변 환경에 변화에 동작할 수 있도록 하였다.

Abstract ▼ AI-Helper 아이콘AI-Helper

Recently, virtual human has been widely used in various fields such as education, training, information guide. In addition, it is expected to be applied to services that interact with remote users in metaverse. In this paper, we propose a novel method to make a virtual human' interaction to perceive...

주제어

#가상 휴먼   #메타버스   #저작도구   #멀티모달   #상호작용  

표/그림 (6)

참고문헌 (18)

  1. S. Gandhe, "Rapid prototyping and evaluation of dialogue systems for virtual humans," Dissertation of University of Southern California, 2014. 

  2. H. Y. Song, I. J. Kim, and D. S. Jo, "Virtual human interaction based on reinforcement learning," In Proceeding of the Korea Institute of Information and Communication Engineering, 2020. 

  3. K. S. Shin and D. S. Jo, "Exploring the effects of the virtual human with physicality on co-presence and emotional response," Journal of The Korea Society of Computer and Information, Vol.24, No.1, pp.67-71, 2019. 

    원문보기 상세보기 crossref

  4. K. Otsuka, "MMSpace: Kinetically-augmented telepresence for small group-to-group conversations," In IEEE Conference on Virtual Reality, pp.19-28, 2016. 

  5. K. P. Tee, R. Yan, Y. Chua, Z. Huang, and S. Liemhetcharat, "Gesture-based attention direction for a telepresence robot: Design and experimental study," In IEEE/RSJ International Conference on Intelligent Robots and Systems, pp.4090-4095. 2014. 

  6. D. Jo, K.-H. Kim, and G. Kim, "SpaceTime: Adaptive control of the teleported avatar for improved AR tele-conference experience," Computer Animation and Virtual Worlds (CAVW), Vol.26, No.3-4, pp.259-269, 2015. 

    상세보기 crossref

  7. C. Breiteneder, S. Gibbs, and C. Arapis, "Teleport-an augmented reality teleconferencing environment," In Eurographics Workshops, Virtual Environments and Scientific Visualization, pp.41-49, 2006. 

  8. A. Maimone, X. Yang, N. Dierk, A. State, M. Dou, and H. Fuchs, "General-purpose telepresence with head-worn optical see-through displays and projector-based lighting," In IEEE Conference on Virtual Reality, pp.23-26, 2013. 

  9. S. Zhao, "Toward a taxonomy of copresence," Presence: Teleoperators and Virtual Environments, Vol.12, No.5, pp.445-455, 2003. 

    상세보기 crossref

  10. D. Kim and D. Jo, "Exploring the effects of gesture interaction on co-presence of a virtual human in a hologram-like system," Journal of the Korea Institute of Information and Communication Engineering, Vol.24, No.10, pp.1390-1393, 2020. 

    원문보기 상세보기 crossref

  11. D. Jo, "Effects of virtual humans on co-presence," In Proceeding of the International Conference on Future Information and Communication Engineering, 2019. 

  12. E. Shin and D. Jo, "Virtual human authoring toolKit for a senior citizen living alone," Journal of the Korea Institute of Information and Communication Engineering, Vol.24, No.9, pp.1245-1248, 2020. 

    원문보기 상세보기 crossref

  13. J.-H. Chung and D. Jo, "Authoring toolkit for interaction with a virtual human," In Proceeding of the Spring Conference on Korea Information Processing Society(KIPS), 2021. 

  14. S. Scherer, S. C. Marsella, G. Stratou, Y. Xu, F. Morbini, A. Egan, A. Rizzo, and L.-P. Morency, "Perception markup language: Towards a standardized representation of perceived nonverbal behaviors," In The 12th International Conference on Intelligent Virtual Agents (IVA), 2012. 

  15. B. Lok, "Training with virtual operating room teammates to influence team behaviors," International Conference on Collaboration Technologies and Systems(CTS), 2016. 

  16. E. Ho, T. Komura, and C, Tai, "Spatial relationship preserving character motion adaptation," In Proceedings of SIGGRAPH ACM Transactions on Graphics, Vol.29, No.4, Article 33, 2010. 

  17. R. Al-Asqhar, T, Komura, and M. Choi, "Relationship descriptors for interactive motion adaptation," In Proceedings of 12th ACM SIGGRAPH/Eurographics Symposium on Computer Animation, pp.45-53, 2013. 

  18. P. Ekman and R. Davidson, "The nature of emotion: Fundamental questions," Oxford University Press, 1994. 

관련 콘텐츠

오픈액세스(OA) 유형

GOLD

오픈액세스 학술지에 출판된 논문

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로