초록 ▼

□ 과제목표
생성 모델(generative model)을 활용하여 음성 혹은 비디오 등의 멀티미디어와 행동 검출을 위한 시간적 클래스 활성화 맵을 생성하고, 3차원 정밀 지도를 생성하기 위해 동적 객체를 검출 및 제거한 후, 그 빈 공간을 채우는 기술에 대해 연구한다.

□ 주요내용
인공지능 사회에 조금 더 가까이 가는데 큰 역할을 하고 있는 딥러닝 네트워크(deep learning network) 모델은 응용 분야에 따라 discriminative model과 generative model로 나눌 수 있다.

□ 과제목표
생성 모델(generative model)을 활용하여 음성 혹은 비디오 등의 멀티미디어와 행동 검출을 위한 시간적 클래스 활성화 맵을 생성하고, 3차원 정밀 지도를 생성하기 위해 동적 객체를 검출 및 제거한 후, 그 빈 공간을 채우는 기술에 대해 연구한다.

□ 주요내용
인공지능 사회에 조금 더 가까이 가는데 큰 역할을 하고 있는 딥러닝 네트워크(deep learning network) 모델은 응용 분야에 따라 discriminative model과 generative model로 나눌 수 있다. 보통, discriminative model은 주어진 입력 데이터가 어떤 부류에 속하는 지를 분류하기 위해 사용되며, generative model은 입력 데이터의 통계적 분포를 다양한 형태의 모델로 분석한 후, 이를 기반으로 주어진 조건에 따라 입력 데이터와 동일한 통계적 분포를 가지지만 학습에 사용한 신호와는 다른 형태의 새로운 데이터를 생성하기 위해 사용된다. 학습된 기본 지식을 바탕으로 새로운 형태의 지식을 유추할 수 있는 인간 지능에 비해서는 비교적 단순하지만, 새로운 형태의 데이터를 생성할 수 있고, 입력 데이터와는 상관없는 형태의 정보는 무시할 수 있다는 장점으로 인해 generative model을 활용한 응용 분야는 매우 다양하다. 본 연구는 데이터를 새롭게 생성한다는 동일한 주제를 목표로 다음과 같이 세 가지의 세부 과제로 구성된다. 첫 번째 세부 주제는 문자열을 입력 데이터로 하고 그 문자열의 의미를 분석한 후, 그 의미를 표현하는 새로운 형태의 비디오 클립을 생성하는 비디오 생성 연구이다. 그 동안 문자열을 입력으로하여 한 장의 영상을 생성하는 연구는 활발히 연구되어왔지만, 그 결과가 비디오인 연구는 거의 이루어지지 않고 있다. 두 번째 세부 주제는 generative model을 활용한 음성신호처리 알고리즘을 개발하는 것이다. 그 동안 generative model은 문자열로부터 음성으로 생성하는 음성 합성 연구에는 활발히 연구되어 왔지만, 음성신호처리 연구의 다른 분야, 예를 들면 음질개선 등에 적용한 예는 드물다. 두 번째 세부과제에서는 잡음이 섞인 음성 신호로부터 원하는 대상 음성 신호만을 취득하기 위해 generative model을 활용하고자 한다. 세 번째 세부 주제는 3차원 정밀 공간 맵 생성을 위한 동적 객체 제거 및 채움에 관한 기술이다. 그 동안, 2D 또는 3D 정보를 활용하여 3차원 공간 맵 생성을 위한 연구는 비교적 활발히 진행되어 왔으나 맵 상에서 객체의 움직임이 지속적으로 누적되는 문제점을 해결하기 위한 연구는 아직 의미 있는 결과를 보이지 못하고 있다. 따라서 동적 객체를 검출 및 제거하고, 그 빈 공간을 generative model을 활용하여 채우는 기술을 제안한다. 마지막 세부 주제는 정확한 시간적 클래스 활성화 맵 생성을 통한 약한 지도 학습 기반 행동의 시간적 위치 검출 기술이다. 기존 연구들은 행동이 존재하지 않는 배경 프레임의 영향으로 인해 시간적 클래스 활성화 맵을 정확히 생성하지 못했다. 네 번째 세부과제에서는 배경 프레임을 걸러내는 알고리즘을 개발함으로써 보다 정확한 클래스 활성화 맵을 생성하고, 나아가 행동의 시간적 위치 검출 성능을 향상시키고자 한다.

□ 기대효과
본 과제에서는 딥러닝 분야에서 가장 활발히 연구되고 있는 최신 연구 주제를 다루며, 특히 해당 분야에서 세계 최고의 기술력을 가지고 있는 해외 협력기관과의 공동 연구를 통하여 국내 연구 역량을 한 단계 더 강화할 수 있을 것으로 판단된다.

(출처 : 요약문 4p)

목차 Contents

• 표지 ... 1최종보고서 ... 2목차 ... 3과제 요약문 ... 4과제 실적 요약 ... 5Ⅰ. 추진 배경 및 연구 결과 ... 6 1. 추진 배경 ... 6 2. 국내·외 현황 ... 15 2. 과제 수행 개요 ... 16 3. 추진전략 및 일정 ... 22 4. 과제 수행 결과 ... 26Ⅲ. 계획대비 실적 및 주요성과 ... 48 1. 연차별 성과지표 총괄표 ... 48 2. 연차별 주요성과 ... 49 3. 장비·기자재 취득목록 ... 52 4. 목표 미달성시 원인(사유) 및 차후대책(후속연구의 필요성) ... 52Ⅳ. 기대효과 ... 53 1. 협력연구 기대 효과 ... 53 2. 연구성과 활용 방안 ... 53 3. 파견에 따른 글로벌 인재양성 효과 ... 53 4. 후속 연구계획 및 성과관리 방안 ... 53 5. 파견인력 등 진로 추적 등 사후관리 ... 54Ⅴ. 예산집행실적 ... 54 1. 연차별 예산 총괄표 ... 54 2. 비목/세목별 예산 집행실적 ... 54 3. 파견인력 지원비 ... 55Reference ... 56부 록 ... 58끝페이지 ... 97