초록 ▼

본 과제는 깊이맵 데이터를 중심으로 다차원 영상을 계층성, 압축센싱, 인지품질을 고려한 영상 획득, 코딩 전/후처리, 압축센싱 코딩, 전송최적화를 위한 연구를 진행하였다.

1차년도는 다차원 영상 시스템 구조 설계 및 기반 요소기술의 개발을 진행하였다. 계층형 MVD(multiview +depth) 데이터 처리 시스템의 기본 구조를 설계하였고, 깊이맵 획득 및 전처리/후처리 요소기술 개발을 객체의 움직임을 고려한 깊이맵 전처리 기법과 후처리 기법을 각각 개발하였다. 깊이맵 코딩과 압축센싱을 위한 기반 기술 개발을 위해 H

본 과제는 깊이맵 데이터를 중심으로 다차원 영상을 계층성, 압축센싱, 인지품질을 고려한 영상 획득, 코딩 전/후처리, 압축센싱 코딩, 전송최적화를 위한 연구를 진행하였다.

1차년도는 다차원 영상 시스템 구조 설계 및 기반 요소기술의 개발을 진행하였다. 계층형 MVD(multiview +depth) 데이터 처리 시스템의 기본 구조를 설계하였고, 깊이맵 획득 및 전처리/후처리 요소기술 개발을 객체의 움직임을 고려한 깊이맵 전처리 기법과 후처리 기법을 각각 개발하였다. 깊이맵 코딩과 압축센싱을 위한 기반 기술 개발을 위해 Homogenizing 필터를 개발하여 복원된 깊이맵 영상의 주관적 화질을 높였다. MVD 영상 코딩 방법 및 깊이맵 코딩 기술로 깊이맵 영상의 디블록킹 필터를 연구하였고 적용하였다. 인지품질관련 품질평가 지표를 조사 및 분석하였고 MVD 영상 데이터 전송을 위해 MVD 텍스쳐/깊이맵 데이터의 비트 할당률에 대해 연구하였고 전송채널이 MVD 데이터에 미치는 영향에 대해 분석하였다.

2차년도는 인지품질을 고려한 영상처리 및 전송기술의 개발을 진행하였다. 계층형 MVD 시스템의 상세설계 및 구현을 위해 HNC-RLNC (Hierarchical Network Coding - Random Linear Network Coding) 결합기법을 제안하여 계층형 MVD 데이터의 효율적 전송기법을 구현하고 PSNR 수치가 향상된 것을 보았다. 또한 전송된 MVD 데이터의 인지품질을 고려해 깊이 영상에 에러가 발생하는 상황을 설정하고 손상 복구기법을 개발하였다. 영상 전송 시 비트열 분석을 위해 참조 소프트웨어를 이용해 분석 환경을 조성하였다.인지품질을 고려한 MVD 계층형 영상처리 통합 모듈 개발을 위한 깊이맵 데이터 처리 방법과 경계면 부분을 중시한 필터를 개발해 경계면 왜곡 제거 및 보존 기법을 개발하였다. 깊이맵 하이브리드 매칭 기법을 이용해 실용성을 강조한 기법을 개발하고 마지막으로 통합 모델을 개발하였다. 3D 영상용 인지품질지표를 개선 및 적용해서 기존에 쓰이던 방법을 향상시켰다. 2차년도에는 추가적으로 깊이맵 영상과 성격이 유사한 (gray-image) 의료영상처리에 대한 연구를 실시하였는데 의료 영상 분할 기법과 표시기법을 개발했다.

3차년도는 계층형 MVD 영상처리/전송시스템 통합 및 최적화를 진행하였다. 인지품질을 고려해 MVD 계층 데이터의 손상을 복구하기 위해 깊이맵 영상과 색체 영상의 정보를 참조한 기법을 개발했고 두 가지 블록 에러 패턴을 가정해 실험하였다. 또한 MVD 비트열 파싱 프로그램을 이용해서 전송상의 비트열 손실 환경을 구현할 수 있도록 했다. 계층형 MVD 데이터 코딩을 위해 3D-HEVC 참조 소프트웨어를 이용해 비트열을 파싱하고 비트열을 실제 전송환경처럼 손실을 줄 수 있는 환경을 구현하였다. 효과적인 경계면 부분 업샘플링을 위해 필터를 제안하여 깊이맵의 업샘플링 기법을 개발하였다. MVD 3차원 중간시점 합성영상을 위한 필터를 개발해서 경계면 부분을 차별적으로 고려하고 또한 사람의 인지적인 특성을 반영하여 합성영상의 인지품질을 향상시켰다. 통합 성능 검증을 위한 이동 통신망 에뮬레이터 구성 및 실험을 위해 실제 무선망을 raspberry pi를 이용해서 통신 환경을 구축하고 계층형 영상을 전송하여 실험하였다. 깊이맵 영상의 응용부분으로 이와 유사한 의료영상의 분할 기법을 새로 개발해 기존 방법보다 복잡도는 낮추고 품질은 향상시키는 방법을 개발하였다.
(출처: 연구결과 요약문 3p)

목차 Contents

• 표지 ... 1
• 목차 ... 2
• Ⅰ. 연구결과 요약문 ... 3
• Ⅱ. 연구내용 및 결과 ... 4
• 1. 연구과제의 개요 ... 4
• 2. 국내외 기술개발 현황 ... 4
• 3. 연구수행 내용 및 결과 ... 5
• 4. 목표 달성도 및 관련 분야에의 기여도 ... 6
• 5. 연구결과의 활용계획 ... 6
• 6. 연구과정에서 수집한 해외과학기술정보 ... 6
• Ⅲ. 연구성과 ... 7
• 끝페이지 ... 11