초록 ▼

□ 연구개발 목표 및 내용
■ 최종 목표
○ 8K급 실감형/몰입형 비대면 문화/에술 공유 플랫폼 기술 개발
- 참여자의 원격 및 이동 환경에 적합하며, 끊김 없이, 몰입감 있는 공연환경을 제공하는 원격 멀티카메라 기반 초저지연 영상 획득 및 동기화 기술
- 5G/클라우드/MEC 기반 8K급 실시간 광시야각 영상 처리 기술
- 광시야각 동영상 및 증강현실(AR) 기반 공연자 원격 협업형 문화공연 예술 제작 플랫폼
○ 정량적 개발목표

■ 전체 내용
○ 개발 기술 내용
① 원격 멀티

□ 연구개발 목표 및 내용
■ 최종 목표
○ 8K급 실감형/몰입형 비대면 문화/에술 공유 플랫폼 기술 개발
- 참여자의 원격 및 이동 환경에 적합하며, 끊김 없이, 몰입감 있는 공연환경을 제공하는 원격 멀티카메라 기반 초저지연 영상 획득 및 동기화 기술
- 5G/클라우드/MEC 기반 8K급 실시간 광시야각 영상 처리 기술
- 광시야각 동영상 및 증강현실(AR) 기반 공연자 원격 협업형 문화공연 예술 제작 플랫폼
○ 정량적 개발목표

■ 전체 내용
○ 개발 기술 내용
① 원격 멀티카메라 기반 초저지연 영상 획득 및 동기화 기술
- 원격지에서 멀티카메라를 활용하여 복수의 4K급 고품질 영상의 동기화를 유지하며 공연자의 영상을 획득할 수 있는 실시간 획득, 부호화 및 송신 기술
② 5G/클라우드/MEC 기반 8K급 실시간 광시야각 영상 처리 기술
- 클라우드/MEC 환경의 고성능 프로세서와 초저지연 5G 네트워크를 활용한 8K급 초고품질 광시야각 동영상을 실시간 생성 및 스트리밍 기술
- 공연자 중심, 관심 무대 영역을 자동 인식 및 추적하여 생성된 관심영상 편집 기술
③ 광시야각 영상 및 증강현실(AR) 기반 공연자 원격 협업형 문화공연 예술 제작 플랫폼
- 공연자들 간에 광시야각 영상 및 증강현실 영상을 공유하여 동시에 실연할 수 있는 협업형 제작 플랫폼
- 3차원 실사객체 생성/전송 및 인터랙티브 제어 기술

○ 비대면 문화 공연에 적합한 플랫폼 개발 및 실시간 실증서비스 적용
- 일반 문화 공연 관계자들도 멀티카메라를 이용한 무대 촬영 및 송수신을 용이하게 활용할 수 있고 이를 모바일 단말을 보유한 관객에게 실시간/비실시간 실감형 공연 소비 경험을 제공할 수 있는 End-to-End 솔루션 개발
- 개발 기술의 검증을 위하여 문화 공연 현장 시험 및 복수의 관객을 대상으로 하는 비대면 문화공연 실증서비스 수행

○ 기존 8K급 이상 광시야각 동영상 처리 기술을 적극 활용 및 사용자 친화적인 인터페이스 고도화 수행
- 12Kx2K 급 UWV, 8KVR 등 기존 광시야각 동영상 처리 기술을 적극 활용하고, 이를 바탕으로 다양한 문화 공연 환경에 적합한 사용자 친화적인 인터페이스, 고가의 물리적인 서버를 최소화하는 클라우드 기반 서비스 개발 추진
- 다양한 종류의 모바일 단말, 댁내 TV 수신 환경 등을 고려한 효과적인 부호화 및 스트리밍 기술 개발을 통하여 누구나 비대면 문화 공연을 향유할 수 있는 기반 구축

○ 방송통신사업자와의 협업을 통하여 기술 개발과 동시에 서비스 사업화 추진
- 5G, ATSC3.0 등 새로운 방송통신망 환경을 보유한 방송통신사업자와의 주기적인 협업 및 공동연구참여를 통하여 기술 개발과 병행한 비대면 문화공연 서비스 사업화 추진

□ 연구개발성과
○ End Product
- 원격 제어 지원 4K급 멀티카메라 시스템 (HW, 획득 화소수 최대 12Kx2K)
- 복수 4K 동영상 실시간 처리 및 8K급 광시야각 동영상 생성 기술 (SW, 8Kx4K@30fps)
- 8K급 동영상 부복호화 및 적응적 스트리밍 기술 (SW, 2종 이상의 화질 제공)
○ 기타 예상되는 연구개발성과 유형

□ 연구개발성과 활용계획 및 기대 효과
○ 활용 게획
- (비대면 문화공연 서비스를 위한 핵심기술 제공) 8K급 초고품질 실감형 동영상을 기반으로 하는 비대면 문화공연 서비스를 위한 End-to-End 핵심 기술 제공
- (파노라마/VR/AR 미디어 및 콘텐츠 다양화) CG를 기반으로 하는 게임이나 저화질 체험형 미디어 및 콘텐츠에 머물러 있는 실감형 미디어 산업을 실사 기반의 비대면 동영상 서비스, AR 및 MR 서비스 등으로 확대하는데 활용
- (다양한 산업분아로 확대) 단순 2D 동영상 기반의 VoD 서비스 뿐만 아니라, 실시간 문화공연 스트리밍 및 라이브 방송, AI 기반 관심영역 자동 선택 및 편집을 이용한 고부가가치 콘텐츠 생성으로 장기적인 수익구조 환경으로 활용

○ 기대효과 (기술적/경제적/사회적 효과)
- (국가적/사회적 문제 해결) 포스트 코로나 시대의 문화 공연 예술 분야의 심각한 산업 변동을 대비하여 비대면 문화공연 플랫폼을 통한 새로운 문화 향유 경험과 수익 창출 구조를 제공하는 사회문제 해결 수단으로서 실감형 미디어 역할 증대
- (실감형 미디어 산업 활성 기폭제 역할 수행) 저화질에 머물러있는 VR, 컴퓨터그래픽에 의존적인 AR 체험형 서비스가 주류인 정체된 실감형 미디어 산업을 주시청영역의 시야각, 해상도, 프레임율을 100도이상 8Kx4K 수준으로 끌어 올리고, 다양한 단말에서 소비할 수 있는 차별화된 서비스를 제공할 수 있는 기폭제 역할 수행
- (AI 기반 자동 중게 시장 대비) 빅데이터와 인공지능으로 대표되는 4차 산업혁명의 핵심기술 중 하나인 대용량 영상데이터를 산업에 적용가능한 수준의 AI 기술을 적용하여 추후 IBM, Intel, Google, Facebook 등 글로벌 IT 기업들에 의해 연구개발이 주도되고 있는 AI 기반 자동 중게 분야의 글로벌 경쟁력 확보
- (사회적비용 절감) 시간과 공간의 제약 없이 사람들 간의 자유로운 만남, 소통, 체험을 가능하게 하는 원격회의/교육/의료/군사훈련/보안 등 다양한 분야에서의 사회적비용 절감 기대

(출처 : 요 약 문 4p)

목차 Contents

• 표지 ... 1
• 최종보고서 ... 2
• 요 약 문 ... 4
• 목차 ... 7
• 1. 연구개발과제의 개요 ... 8
• 1-1. 비대면 문화공연 플랫폼 추진배경 및 추진방법 ... 8
• 1-2. 기술 개념 및 기술개발 범위 ... 8
• 2. 연구개발과제의 수행 과정 및 수행 내용 ... 11
• 1) 연구수행 추진 전략 ... 11
• 2) 연구개발과제 목표 및 내용 ... 12
• 3) 연구개발과제 수행 일정 ... 13
• 3. 연구개발과제의 수행 결과 및 목표 달성 정도 ... 15
• 1) 연구수행 결과 ... 15
• 2) 목표 달성 수준 ... 53
• 4. 목표 미달 또는 미흡한 사항에 대한 분석 ... 56
• 1) 목표 미달 또는 미흡한 연구결과에 대한 원인(사유) 자체분석 내용 ... 56
• 2) 미달 또는 미흡한 결과물에 대한 보완 활동 ... 56
• 3) 연구개발 과정의 성실성 ... 57
• 5. 연구개발성과의 관련 분야에 대한 기여 정도 ... 59
• 6. 연구개발성과의 관리 및 활용 계획 ... 60
• 1) 향후 5년간 성과활용·확산 활용방안 및 계획(활동계획) ... 60
• 2) 주요 성과활용 (기대)성과목표 ... 60
• 3) 성과활용·관리 추진체계 ... 61
• 4) 기타 ... 61
• 7. 연구개발성과에 대한 후속연구 및 추가 개발 계획 ... 62
• 8. 연구개발비 사용실적 ... 64
• 붙임 1. 사업화대상기술별 기술명세서 ... 66
• 붙임 2. 자체 보안관리 진단표 ... 74
• 끝페이지 ... 76