3채널 멀티 영상 재생 기법과 증강현실을 이용한 체험 콘텐츠 제작에 관한 연구: 투명 OLED 및 듀얼 레이어 디스플레이 시스템 기반 A Study on Development of Experimental Contents Using 3-channel Multi-Image Playback Technique: Based on transparent OLED and dual layer display system원문보기
지역의 관광지 및 문화를 체험 콘텐츠로 개발하는 방법 중 고화질의 비디오 영상을 대형 디스플레이에 표시하는 게 일반적인 방식으로 체험자의 능동적 참여와 다른 지역의 영상 체험과의 특별한 차별성이 필요하게 된다. 본 논문은 단분자 OLED와 능동형을 사용하여 지역의 명소를 투명 OLED듀얼 레이어 디스플레이 시스템과 확장형 영상 구현 및 증강형 인터렉션 기법을 융합하여 체험자에게 새로운 경험과 아름다운 명소에 직접 와 있는 것과 같은 현실감 있는 체험을 제공 한다. 본 논문에서는 영상의 레이어에 추가적인 영상과 UI 레이어를 입혀 관광지 정보, 날씨, 지도, 숙박, 축제, 사진 자료등을 영상과 함께 체험할 수 있도록 하였으며, 듀얼 레이어 시스템 외에 추가로 양단에 세로형 55인치 디스플레이를 보조적으로 각각 1대씩 추가 연동하는 멀티 디스플레이 시스템을 더해 체험자에게 웅장한 몰입감과 인터페이스 연동의 재미를 더할 수 있도록 구현하였으며, 투명 OLED 및 듀얼 레이어 패널과 3채널 멀티 영상 재생 기법을 활용하여 한국의 전라남도 지역의 명소를 시공간의 제약 없이 상시 체험 가능한 증강형 체험 콘텐츠을 개발하였다.
지역의 관광지 및 문화를 체험 콘텐츠로 개발하는 방법 중 고화질의 비디오 영상을 대형 디스플레이에 표시하는 게 일반적인 방식으로 체험자의 능동적 참여와 다른 지역의 영상 체험과의 특별한 차별성이 필요하게 된다. 본 논문은 단분자 OLED와 능동형을 사용하여 지역의 명소를 투명 OLED 듀얼 레이어 디스플레이 시스템과 확장형 영상 구현 및 증강형 인터렉션 기법을 융합하여 체험자에게 새로운 경험과 아름다운 명소에 직접 와 있는 것과 같은 현실감 있는 체험을 제공 한다. 본 논문에서는 영상의 레이어에 추가적인 영상과 UI 레이어를 입혀 관광지 정보, 날씨, 지도, 숙박, 축제, 사진 자료등을 영상과 함께 체험할 수 있도록 하였으며, 듀얼 레이어 시스템 외에 추가로 양단에 세로형 55인치 디스플레이를 보조적으로 각각 1대씩 추가 연동하는 멀티 디스플레이 시스템을 더해 체험자에게 웅장한 몰입감과 인터페이스 연동의 재미를 더할 수 있도록 구현하였으며, 투명 OLED 및 듀얼 레이어 패널과 3채널 멀티 영상 재생 기법을 활용하여 한국의 전라남도 지역의 명소를 시공간의 제약 없이 상시 체험 가능한 증강형 체험 콘텐츠을 개발하였다.
Among the methods of developing tourist spots and culture as the experience contents, it is a common method to display high-quality video images on a large display, and it is necessary to make a special difference between the participant's active participation and the visual experience in other regi...
Among the methods of developing tourist spots and culture as the experience contents, it is a common method to display high-quality video images on a large display, and it is necessary to make a special difference between the participant's active participation and the visual experience in other regions. In this paper, using the single molecular OLED and active type, the regional tourist spots blend transparent OLED dual-layer display systems with the extended image implementation and augmented interaction techniques to give the participants a real-world experience, such as directing to new experiences and beautiful sights. In this paper, additional images and UI layers are applied to the layers of the images to allow visitors to experience sightseeing information, weather, maps, accommodations, festivals and photo materials with image. In addition to the dual-layer system, it also added a multi-display system that additionally has one vertical 55-inch display on each side, adding to the experience the immersive experience and interface interlocking fun. By using transparent OLED, dual layer panel and 3-channel Multi-image playback technique, the augmented type experience contents which can experience the local attractions in Jeollanamdo province in Korea at all time without any limitation of time and space were developed.
Among the methods of developing tourist spots and culture as the experience contents, it is a common method to display high-quality video images on a large display, and it is necessary to make a special difference between the participant's active participation and the visual experience in other regions. In this paper, using the single molecular OLED and active type, the regional tourist spots blend transparent OLED dual-layer display systems with the extended image implementation and augmented interaction techniques to give the participants a real-world experience, such as directing to new experiences and beautiful sights. In this paper, additional images and UI layers are applied to the layers of the images to allow visitors to experience sightseeing information, weather, maps, accommodations, festivals and photo materials with image. In addition to the dual-layer system, it also added a multi-display system that additionally has one vertical 55-inch display on each side, adding to the experience the immersive experience and interface interlocking fun. By using transparent OLED, dual layer panel and 3-channel Multi-image playback technique, the augmented type experience contents which can experience the local attractions in Jeollanamdo province in Korea at all time without any limitation of time and space were developed.
* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.
문제 정의
또한, 동일 시점의 동영상 및 증강 정보를 출력을 위해 비디오 및 UI 동기화 처리를 통해 이를 구현하고자 한다. 그림 9는 본 논문에서 연구 및 제작하고자 하는 내용의 전체 개발 흐름도 이다.
본 논문에서의 시스템은 그림 2와 같이 투명 OLED 및 듀얼 레이어 패널과 3채널 멀티 영상 재생 기법을 활용하여 한국에 있는 전라남도 지역의 명소를 시공간 제약 없이 상시 체험 가능한 증강형 체험 콘텐츠 개발 하고자 한다.
본 논문은 영상의 레이어에 추가적인 영상 과 UI 레이어를 입혀 관광지 정보, 날씨, 지도, 숙박, 축제, 사진 자료 등을 영상과 함께 체험할 수 있도록 하고자 하며, 듀얼레이어 시스템 외에 추가로 양단에 세로형 55인치 디스플레이를 보조적으로 각각 1대씩 추가 연동하는 멀티 디스플레이 시스템을 더해 체험자에게 웅장한 몰입감과 인터페이스 연동의 재미를 더할 수 있도록 구현하고자 한다.
OLED는 유기물층의 발광 재료에 따라 단분자 OLED와 고분자 OLED로 분류할 수 있고 구동 방식에 따라 수동형(PM: Passive Matrix Type)과 능동형(AM: Active Matrix Type)으로 구분된다. 본 논문의 구현을 위해서단분자OLED와 능동형을 사용 하여 지역의 명소를 투명 OLED 듀얼 레이어 디스플레이 시스템과 확장형 영상 구현 및 증강형 인터렉션 기법을 융합하여 체험자에게 새로운 경험과 아름다운 명소에 직접 와 있는 듯한 체험 경험을 제공하고자한다.
본 연구에서 제안하고자 하는 연구는 증강현실과 투명 OLED(Organic Light Emitting Diode)를 영상과 혼합하여 새로운 증강형 영상 재생 기법을 적용하고자 하며, 그로인해 터치패널을 통해 체험시에 몰입감을 증가시킬 수 있을 것이다. OLED는 우리나라에서 현재 유기전기발광소자, 유기 EL(OEL), 유기LED(OLED)등으로 OLED(Organic Light Emitting Diode)의 명칭이 다양하게 불리고 있으며, 해외에서는 일반적으로 유기EL이라 하며, 유럽이나 미국 등에서는 유기 LED라고 부른다.
본 연구에서는 전라남도의 아름다운 관광명소를 투명 OLED 듀얼 레이어 시스템과 확장형 영상 구현 및 증강형 인터렉션 기법을 융합하여 체험자에게 새로운 경험과 전라남도의 명소에 직접 와 있는 듯한 체험 경험을 할 수 있도록 제작하고자 한다.
본 연구에서는 한국의 아름다운 관광명소를 투명 OLED 듀얼 레이어 시스템과 확장형 영상 구현 및 증강형 인터렉션 기법을 융합하여 체험자에게 새로운 경험과 관광 명소에 직접 와 있는 듯한 체험 경험을 할 수 있도록 제작하고자 한다.
제안 방법
T-OLED 디스플레이의 특성을 최대한 활용하여 오브젝트와 영상콘텐츠의 연계 선상에서 관람자들의 흥미를 유발할 수 있는 콘텐츠를 선정하여 효과적인 3D 이펙트 적용 콘텐츠 구성된다.
UI를 60Hz 이상으로 렌더링, 투명 OLED에 출력되는 증강 정보를 멀티 디스플레이로 터치를 이용하여 좌우로 이동할 수 있도록 통합 제어 시스템과 연동하고자 한다.
그림 18은 날씨 효과를 증강형태로 나타낼 수 있도록 개발 하였다. 개발 내용은 2가지로 형태로 나타내며 첫 번째, 해당 지역의 RSS 날씨 데이터를 실시간으로 확인하여 지역의 날씨에 따라 날씨 이펙트를 증강 되며, 두 번째, 해당 지역의 날씨와 상관 없이 사용자의 UI 조작을 이용하여 임의의 날씨 이펙트를 적용할 수 있다.
그림 20은 식영정 내부의 현판 정보를 확인하기 위한 증강 콘텐츠이다. 내부의 현판에 번호를 매겨 해당 번호의 현판 정보를 확인할 수 있도록 하였으며, 현판의 해석, 해설, 현황, 표점 등의 정보를 열람할 수 있으며, 해당 현판의 배치를 3D 백그라운드 디스플레이로 확인할 수 있게 제작되었다.
다음 단계로 T-OLED 와 3채널 디스플레이를 이용하여 듀얼 레이어 디스플레이 시스템을 구축한다. 통합 디스플레이를 출력할 때 출력 시스템에 연결 되어있으며,T-OLED 패널은 증강 콘텐츠 및 사용자 체험 인터렉션 제어를 담당하며, 3채널 OLED 패널은 백그라운드용 4K 영상을 출력하는 장치로 사용된다.
듀얼 레이어 디스플레이 시스템과 함께 멀티 디스플레이 시스템을 통한 확장형 영상 구현 및 증강형 인터렉션 기법을 더해 체험자에게 웅장한 몰입감과 인터페이스 연동의 재미를 더할 수 있으며, 체험 대기자도 체험경험과 콘텐츠를 공유할 수 있는 방식을 설계 제작 된다. 멀티 디스플레이 시스템은 멀티 영상 재생 기법은 55인치의 모니터를 듀얼 레이어 디스플레이 시스템 양쪽 측면에 각각 1대씩 배치하여 확장형 영상 구현 및 증강형 인터렉션 기법을 적용하기 위한 멀티 모니터 시스템을 그림 4와 같은 형태로 제작한다.
사용자의 터치 위치를 적외선 터치 센서를 이용하여 인식한 후 콘텐츠를 증강시키며, 콘텐츠는 RSS 데이터, 현판 데이터, 영상제어 패널 등이 증강된다. 또한 메뉴 주변의 탭 버튼을 이용하여 제어 UI를 감추거나 드러내어 사용할 수 있도록 개발하였다.
또한, 확장된 디스플레이 상의 영상 플레이와 인터렉티브한 동작의 구현 결과물은 직접 체험자만의 경험이 아닌 체험 대기자(관람객)도 간접적 경험과 콘텐츠의 몰입감을 공유할 수 있는 방식으로 전시 기술을 구현 및 제작하였다.
본 논문은 영상의 레이어에 추가적인 영상 또는 UI 레이어를 입혀 관광지 정보, 날씨, 지도, 숙박, 축제, 사진 자료 등을 영상과 함께 체험할 수 있도록 듀얼 레이어 시스템 외에 추가로 양단에 세로형 55인치 디스플레이를 보조적으로 각각 1대씩 추가 연동하는 멀티 디스플레이 시스템을 더해 체험자에게 웅장한 몰입감과 인터페이스 연동의 재미를 더할 수 있도록 제작한다.
본 논문의 연구개발 내용으로는 그림 6와 같이 투명 OLED를 활용한 듀얼 레이어 디스플레이 시스템은 일반 디스플레이 앞면에 투명 디스플레이를 배치하여 백 그라운드 영상 출력과 함께 RSS데이터 등의 증강형 콘텐츠를 중첩하여 하나의 영상처럼 체험하는 시스템과 두 개의 레이어를 담당하는 디스플레이는 통합 디스플레이 출력 시스템에 연결이 되어 있다.
체험자는 투명 OLED 패널과 Tech Panel OLED(T-OLED)을 이용한 인터페이스를 제공하며, 확장형 영상의 입체적 사운드 조절, 영상의 색감, 효과(이펙트) 등을 실시간으로 제어할 수 있게 되며, 다양한 증강 정보는 멀티 모니터 디스플레이 시스템의 좌 또는 우측으로 나타나거나 사라지는 멀티 확장 영상 구현 기법이 적용된다.
듀얼 레이어 디스플레이 시스템은 터치패널을 포함하고 있으며, 이를 기반으로 체험자에게 강건한 터치 인터페이스를 제공한다. 체험자의 터치 인터페이스는 멀티모니터 시스템을 통해 구현되는 영상의 입체적 사운드 조절, 영상의 색감, 효과(이펙트) 등을 제어할 수 있도록 구성하였으며, 증강형 데이터의 실행, 정지, 변경, 전환 등의 동작을 실행할 수 있다. 특히 식영정 해제 콘텐츠 구현 시 터치 동작을 통해 다양한 인터렉션 기능을 실행할 수 있도록 구성하였다.
체험자의 터치 인터페이스는 멀티모니터 시스템을 통해 구현되는 영상의 입체적 사운드 조절, 영상의 색감, 효과(이펙트) 등을 제어할 수 있도록 구성하였으며, 증강형 데이터의 실행, 정지, 변경, 전환 등의 동작을 실행할 수 있다. 특히 식영정 해제 콘텐츠 구현 시 터치 동작을 통해 다양한 인터렉션 기능을 실행할 수 있도록 구성하였다. 다음은 그림 12는 증강할 대상의 정보를 연동하는 과정을 나타내고 있으며, 또한 관련 개발 소스코드 이다.
대상 데이터
본 연구에서 사용되는 듀얼 레이어 디스플레이 시스템은 투명 OLED 패널과 일반 디스플레이 패널을 같은 시야로 중첩시켜 영상과 증강 콘텐츠를 함께 출력할 수 있고 체험자의 터치 인터페이스가 가능하며, 그림 3과 같이 투명 OLED에 증강될 수 있는 콘텐츠는 실사영상, 3D오브젝트, RSS(Rich Site Summary) 연동 정보, 관광지 정보, 날씨, 지도, 숙박, 축제, 사진 자료 등 이다.
성능/효과
본 논문에 적용된 기술은 메타데이터 분석을 통한 지역관광문화 요소 추출 알고리즘을 활용 파생 서비스 모델 접목이 가능하며, 문화재/관광/레저 콘텐츠 추천 서비스를 위한 대상 맞춤형 지역 콘텐츠 추천 기술 마련 가능하다. 또한, 지역 맞춤형 융복합 콘텐츠 서비스 모델의 개발을 통해 다양한 지역의 관광 콘텐츠를 융합한 새로운 융복합 콘텐츠의 서비스 모델 설계가 가능하다.
본 논문에 적용된 기술은 메타데이터 분석을 통한 지역관광문화 요소 추출 알고리즘을 활용 파생 서비스 모델 접목이 가능하며, 문화재/관광/레저 콘텐츠 추천 서비스를 위한 대상 맞춤형 지역 콘텐츠 추천 기술 마련 가능하다. 또한, 지역 맞춤형 융복합 콘텐츠 서비스 모델의 개발을 통해 다양한 지역의 관광 콘텐츠를 융합한 새로운 융복합 콘텐츠의 서비스 모델 설계가 가능하다.
본 연구 논문에서 사용된 듀얼 레이어 시스템과 멀티디스플레이 시스템의 제어 및 연동은 단순 제어뿐만 아니라 영상에서 재생되는 시점의 오브젝트를 터치하면 RSS 증강 데이터 등의 추가 정보 및 특정 지역에 대한 인문학적 콘텐츠 등의 정보가 정해진 스토리텔링에 따라 증강되어 체험할 수 있다.
후속연구
본 논문에서 적용한 기술들은 증강현실 기술이 적용된 지역특성에 맞는 맞춤형 융합된 영상콘텐츠를 제공할 수 있는 시스템 개발로 새로운 형태의 문화재, 관광, 레저분야의 패러다임을 개척하는데 도움 될 것으로 생각 된다.
질의응답
핵심어
질문
논문에서 추출한 답변
OLED란 무엇인가?
OLED는 유기물 박막에 양극과 음극을 통하여 주입된 전자와 전공이 재결합하여 여기자를 형성하고 형성된 여기자로부터의 에너지로 의해 특정한 파장의 빛이 발생하는 현상을 이용한 자체 발광형 디스플레이 소자이다. OLED 특징으로 자체발광형, 넓은 시야각, 빠른 응답속도, 저소비전력, 초박형이 가능하다 [6].
박물관에서 증강현실기술은 어떻게 변화하고 있는가?
증강현실기술은 다양 한 산업 영역에서 활용되고 있으며, 산업, 의학, 과학, 오락 등에 적용되며, 박물관 등에서는 관람자의 이해 및 흥미를 촉진시키기 위하여 활용하고 있다. 현재는 증강현실 기법을 이용해 단순히 보는 전시에서 벗어나 체험하고 즐기는 실감 체험형으로 바뀌고 있다. 증강현실 및 스토리텔링 기법에 의해 관람객의 흥미유발 및 체감 극대화 기술들이 발전을 해 나가고 있다.
증강현실의 목적은 무엇인가?
증강현실기술은 다양한 산업 영역에서 활용되어지고 있으며 [4], 산업, 의학, 과학, 오락 등에 적용되며, 박물관 등에서는 관람자의 이해 및 흥미를 촉진시키기 위하여 활용 하고 있다 [2]. 이러한 증강현실(Auqmented Reality: AR)의 목적은 실제 관찰하고 있는 사물이나 장소에 한 부가적인 정보나 의미를 함께 제공하는 것으로, 가상현실(Virtual Reality)과 달리, 증강현실은 완벽한 가상공간을 제공하지 않으며 실제 공간에 약간의 가상객체를 삽입한 형태의 가상현실 기술이라고 할 수 있다 [3].
참고문헌 (8)
Tang, C. W. VanSlyke, S. A, "Organic electroluminescent diodes", Applied Physics Letters (1987), Vol. 51, No. 12, pp. 913-15, 1987. DOI: 10.1063/1.98799.
S.-H. Lee, S.-J. Lee, D.-W. Park, "Development of a 3D scanner and UI using kinect sensors", International Information Institute, Vol. 18, No. 7, pp. 3207-3212, 2015.
Sang-Hyun Lee, "Development of Handheld 3D Scanner for Human Bodies based on IR Sensor", International Information Institute, Vol. 18, No. 7, pp. 3207-3212, 2015.
Han-byeol Kang, Dae-Won Park, Sang-Hyun Lee, "Development of Cultural Contents using Auger Reality Based Markerless Tracking", The International Journal of Advanced Smart Convergence, Vol. 5 No. 4, pp.57-65, 2016.
Monti, F. Kessler, M. Delgado, J. Frey, F. Bazzanini, G. Accorsi, N. Armaroli, H. J. Bolink, E. Orti, R. Scopelliti, Md. K. Nazeeruddin, and E. Baranoff, "Charged bis- cyclometalated iridium(III) complexes with carbene-based ancillary ligands", Inorganic Chemistry, Vol. 52, pp. 10292-10305, 2013. DOI: 10.1021/ic400600d
G. Yu, F. Ding, H. Wei, Z. Zhao, Z. Liu, Z. Bian, L. Xiao, and C. Huang, "Highly efficient terbium(III)-based organic light-emitting diodes obtained by exciton confinement," J. Mater. Chem. C, Vol. 4, No. 1, pp. 121-125, 2016.
Hafeez. G, Seunghyun Lee, Soonchul Kwon, Alaric Hamacher, "Image Based 3D Reconstruction of Texture-less Objects for VR Contents," International Journal of Advanced Smart Convergence, Vol. 6, No. 1, pp. 1219-17, 2017.
Jongho Choi, Soonchul Kwon, Kwangchul Son, Jisang Yoo, "Fast key-frame extraction for 3D reconstruction from a handheld video," International Journal of Advanced Smart Convergence, Vol. 5, No. 4, pp. 1-9, 2016.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.