초록 ▼

□ 연구개요
o 동영상의 내용 이해를 통해 시각 정보를 지식화 하는데 필수적인 시각동사의 분류 체계에 따른 동영상 온톨로지인 액션넷을 구축하고, 이를 기반으로 언어 이해 방식을 이용하는 Hilbert 인덱스 기반의 동영상 시맨틱 이해 알고리즘 개발
- 동영상 시각 정보를 구성하는 시각동사 선정: 100개 이상
- 계층 구조의 액션넷 온톨로지 연구: 최소 3개 계층, 노드 당 평균 50개 이상의 동영상 및 Ground Truth
- 동영상 시맨틱 이해 정확도: Ground Truth 대비 90%이상

□ 연구개요
o 동영상의 내용 이해를 통해 시각 정보를 지식화 하는데 필수적인 시각동사의 분류 체계에 따른 동영상 온톨로지인 액션넷을 구축하고, 이를 기반으로 언어 이해 방식을 이용하는 Hilbert 인덱스 기반의 동영상 시맨틱 이해 알고리즘 개발
- 동영상 시각 정보를 구성하는 시각동사 선정: 100개 이상
- 계층 구조의 액션넷 온톨로지 연구: 최소 3개 계층, 노드 당 평균 50개 이상의 동영상 및 Ground Truth
- 동영상 시맨틱 이해 정확도: Ground Truth 대비 90%이상
- 액션넷 온톨로지 및 동영상 시맨틱 이해 알고리즘의 개방형 개발 환경 제공 연구

□ 연구 목표대비 연구결과
1. 시각동사 중심의 액션넷 온톨로지 개발
o 연구목표: 시각동사 선정 (100개 이상)
- 막스플랑크연구소 영화 DB 형태소 분석 결과, DARPA Mind’s Eye 프로그램, 한국어 동사 분류 체계 연구 결과로부터 시각동사 후보 도출
- 시각동사 후보로부터 빈도수와 가시성 정도를 기준으로 100개 시각동사 선정
o 연구목표: 계층구조의 액션넷 온톨로지 스키마 연구 및 구축 (3계층, 노드당 50개)
- 시각동사 DB 및 GT (Ground Truth) 스키마 (Schema) 개발
. 3개의 계층구조 (단위동사, 복합동사, 객체결합동사)의 시각동사 분류체계 개발
- 시각동사 분류체계에 따라 동영상 태그 정보를 XML 스키마로 저장
. 3개 계층구조에서 각 노드당 50개 동영상 데이터베이스 구축
o 산출물
- KCI 등재지 1편 게재
. “동영상 시맨틱 이해를 위한 시각 동사 도출 및 액션넷 데이터베이스 구축”, 한국차세대컴퓨팅학회논문지, 제14권, 제5호, 2018. 10.
- 정보통신단체표준 1건 채택: 액션넷 동영상 데이터베이스 스키마 구조 표준화
. 모바일 장치에서 시각 정보 이해를 위한 동작 표현 메타데이터, TTAK.KO-10.1125, 2019.6.18.

2. Hilbert 인덱스 기반의 동영상 시맨틱 이해 알고리즘 연구
o 연구목표: 동영상 시맨틱 이해 (GT 대비 90% 이상)
- CNN 특징에 대한 스웜 인텔리전스 및 파라미터 최적화 기반의 객체 추적 연구
. 평균 100개 프레임으로 구성되는 8개 샘플 동영상에서 조명변화, 중첩, 변형 등 11개의 공격에 대해 56% 이상의 객체 추적 성공
- Hilbert 인덱스 기반의 이동객체의 이동 경로 분석 및 분류
. 프레임별 이동객체의 경로에 대한 Hilbert 인덱스 도큐먼트 센텐스들 사이의 correlation을 바탕으로 하는 유사도 연산을 통해 수행 (91.21% 분류 성공률)
o 산출물
- SCI급 논문 1편 게재
. “A hybrid gravitational search algorithm with swarm intelligence and deep convolutional feature for object tracking optimization”, Applied Soft Computing, vol.66, no.1, May 2018.
- KCI 등재지 2편 게재
. “적응적 파라미터 제어를 이용하는 스웜 기반의 강인한 객체 추적 알고리즘”, 한국차세대컴퓨팅학회논문지, 제13권, 제5호, 2017. 10.
. “파티클 스웜 최적화에서의 가중치 조절에 기반한 강인한 객체 추적 알고리즘”, 한국차세대컴퓨팅학회 논문지, 제14권, 제6호, 2018. 12.

□ 연구개발결과의 중요성
- 언어학에 기초한 새로운 시각동사 분류 체계를 수립하였으며 및 이에 따른 동영상 온톨로지인 액션넷 구조에 대한 연구를 수행하였음
- 문장 이해에 사용되는 Hilbert 인덱스를 기반으로 새로운 동영상 시맨틱 이해 알고리즘 연구를 수행
- 액션넷과 동영상 시맨틱 이해 알고리즘을 관련 연구자 커뮤니티에 공개하는 오픈 아키텍처 구조

(출처 : 요약문 2p)

목차 Contents

• 표지 ... 1
• 연구결과 요약문 ... 2
• 목차 ... 3
• 1. 연구개발과제의 개요 ... 4
• 2. 연구수행내용 및 연구결과 ... 5
• 3. 연구개발결과의 중요성 ... 8
• 4. 참고문헌 ... 9
• 5. 연구성과 ... 11
• 끝페이지 ... 11