초록 ▼

연구개요
본 연구의 최종 목표는 실내의 통제된 환경이 아닌 실외를 포함하는 일반적인 환경에서 획득된 단일의 RGB 영상으로부터 그 영상에 포함된 모든 사람들에 대한 3차원 위치 및 자세 정보를 획득하고, 또한 가까운 미래에 변화될 위치 및 자세 정보 또한 예측하는 것이다. 결론적으로 본 연구를 통해 개발하고자 하는 기술은 단일의 입력 RGB 영상으로부터 다수 사람들의 위치와 자세 정보를 4차원 시공간 내에서의 궤적의 형태로 출력하게 되며, 따라서 본 과제의 명칭을 “일반적 환경의 단일 영상으로부터 다수 사람에 대한 4차원 위치

연구개요
본 연구의 최종 목표는 실내의 통제된 환경이 아닌 실외를 포함하는 일반적인 환경에서 획득된 단일의 RGB 영상으로부터 그 영상에 포함된 모든 사람들에 대한 3차원 위치 및 자세 정보를 획득하고, 또한 가까운 미래에 변화될 위치 및 자세 정보 또한 예측하는 것이다. 결론적으로 본 연구를 통해 개발하고자 하는 기술은 단일의 입력 RGB 영상으로부터 다수 사람들의 위치와 자세 정보를 4차원 시공간 내에서의 궤적의 형태로 출력하게 되며, 따라서 본 과제의 명칭을 “일반적 환경의 단일 영상으로부터 다수 사람에 대한 4차원 위치 및 자세 추정 연구”라고 설정하였다.

연구 목표대비 연구결과
본 과제에서는 단일 RGB 영상으로부터 추정된 2차원 자세로부터 3차원 자세를 추정하는 방법을 개발하였다. 또한 그러한 모델을 학습하기 위해 3차원 자세에 대한 참값을 포함하지 않는 대규모의 2차원 자세 데이터를 활용할 수 있는 약지도 학습방법을 개발하였다. 이는 본 과제의 1차년도 목표를 달성한 것이라고 볼 수 있다.
본 과제에서는 다수 사람을 포함하는 단일 RGB 영상으로부터 다수 사람들의 3차원 자세 및 카메라 좌표계 기준의 절대 위치를 추정하는 방법을 개발하였다. 개발된 방법에서는 사람의 체구에 대한 사전 정보와 학습된 외양(Appearance) 정보가 결합되어 해당 휴먼 객체의 절대 위치를 정확하게 추정할 수 있다. 이는 본 과제의 2차년도 목표를 달성한 것으로 볼 수 있다.
본 과제에서는 단일 RGB 동영상으로부터 휴먼 객체의 자세 시퀀스를 추정 및 보완하고, 근미래의 자세 시퀀스를 추정할 수 있는 방법을 개발하였다. 개발된 방법은 어텐션(Attention) 메커니즘에 기반하여 시간적으로 멀리 떨어져 있는 정보들을 종합적으로 고려할 수 있으며, 이를 통해 시간적으로 일관된 자세 시퀀스를 추정할 수 있다. 이는 본 과제의 3차년도 목표를 달성한 것이라고 할 수 있다.
종합하자면 본 과제의 수행을 통해 일반적 환경의 단일 영상으로부터 다수 사람에 대한 자세 추정 및 예측을 수행할 수 있는 방법을 개발하였으며, 정량적/정성적 평가를 수행하였고, 각종 논문을 통해 그 결과를 발표하였으므로 최종 목표를 성공적으로 달성하였다고 판단된다.

연구개발성과의 활용 계획 및 기대효과 (연구개발결과의 중요성)
· 영상으로부터의 사람의 자세 추정(Human Pose Estimation)은 컴퓨터 비전에서 오랫동안 연구되어온 문제로서 아직까지 완전히 풀리지 않은 도전적인 문제이며, 본 과제의 결과물이 해당 문제의 해결에 도움이 될 것이라고 기대됨
· 단일 RGB 영상으로부터의 3차원 자세 추정을 위한 최근의 방법들은 제한된 Dataset에 기반하며 단일 사람만을 대상으로 하고 있다는 한계를 가지고 있으므로 일반적인 In The Wild 상황에서의 다수 사람에 대한 3차원 자세 추정으로 확장할 필요가 있으며, 본 과제의 결과물이 그러한 확장에 기여한다고 생각됨
· 사람이 가지고 있는 지능의 핵심 특성 중 하나는 미래에 대한 예측 능력이며, 따라서 영상에 포함된 사람들의 자세, 동작, 행동을 예측하는 기술은 인공 지능의 실현에 도움을 줄 수 있음. 본 과제를 통해 개발된 휴먼 자세 예측 기술은 그러한 측면에서의 인공 지능 기술의 발전에 해당함.

(출처 : 요약문 2p)

목차 Contents

• 표지 ... 1
• 연구결과 요약문 ... 2
• 목차 ... 3
• 1. 연구개발과제의 개요 ... 4
• 1) 연구개발의 목적 ... 4
• 2) 연구개발의 필요성 ... 4
• 2. 연구개발과제의 수행 과정 및 수행 내용 ... 6
• 1) 1차년도 ... 6
• 2) 2차년도 ... 8
• 3) 3차년도 ... 8
• 3. 연구개발과제의 수행 결과 및 목표 달성 수준 ... 9
• 1) 정성적 연구개발성과(연구개발결과) ... 9
• 2) 세부 정량적 연구개발성과 ... 14
• 3) 목표 달성 수준 ... 14
• 4. 연구개발성과의 관련 분야에 대한 기여 정도(연구개발결과의 중요성) ... 14
• 5. 연구개발성과의 관리 및 활용 계획 ... 15
• 6. 참고문헌 ... 16
• [붙임1] 세부 정량적 연구개발성과 ... 17
• [붙임2] 연구책임자 대표적 연구실적 및 증빙(요약문 및 사본) ... 18
• 끝페이지 ... 27