초록 ▼

가. 개발 내용
(1) 제 1 세부과제 : 멀티미디어 콘텐츠의 의미론적 분석기술 개발 멀티미디어 데이터베이스 구조 설계, 이를 관리할 수 있는 시스템 개발 및 검색엔진을 구축하고, 개발된 기술의 활용을 위해 다양한 라이브러리 및 시스템을 개발하였다.
● 멀티미디어 콘텐츠 데이터 구조 분석 및 관리 툴 개발
● 다양한 멀티미디어 콘텐츠 데이터베이스 구축
● 비디오 데이터의 첫 번째 프레임 추출 및 영상 분할기법 개발
● 멀티미디어 콘텐츠의 의미론적 영상 특성요소 추출기술 개발
● 동영상에서 비디오와 오

가. 개발 내용
(1) 제 1 세부과제 : 멀티미디어 콘텐츠의 의미론적 분석기술 개발 멀티미디어 데이터베이스 구조 설계, 이를 관리할 수 있는 시스템 개발 및 검색엔진을 구축하고, 개발된 기술의 활용을 위해 다양한 라이브러리 및 시스템을 개발하였다.
● 멀티미디어 콘텐츠 데이터 구조 분석 및 관리 툴 개발
● 다양한 멀티미디어 콘텐츠 데이터베이스 구축
● 비디오 데이터의 첫 번째 프레임 추출 및 영상 분할기법 개발
● 멀티미디어 콘텐츠의 의미론적 영상 특성요소 추출기술 개발
● 동영상에서 비디오와 오디오의 분류기술 개발
(2) 제 2 세부과제 : 감성어휘기반 지능적 검색 미들웨어기술 설계
1차년도의 연구결과인 감성별 멀티미디어 특성요소의 분석을 통한 표본화를 기반으로 통합된 감성어휘 질의 처리에 관해 연구하였다. 이를 위해 감성어휘와 특성요소의 관계 기반 감성 온톨로지를 구축하고 복합적인 특성요소들에 대한 감성 처리 알고리즘을 개발하였다.
● 감성별 특성요소 표본화
● 감성 온톨로지 구축
● 온톨로지 처리를 통한 복합 감성처리 알고리즘 개발
● 감성어휘 기반 검색모듈 및 인터페이스 개발
● 지능형 감성지원 비디오 영상 콘텐츠 제작시스템 개발
나. 개발 범위
본 연구에 대한 주요 핵심 기술 범위로는 다음과 같다.
● 멀티미디어 콘텐츠 데이터 구조 설계 및 분석 관리 툴 개발 : 비디오 및 오디오의 특성요소 분석, 특징 분석 기반 데이터 구조 설계
● 다양한 멀티미디어 콘텐츠 데이터베이스 구축 : 방송국 및 영상제작 업체와 협약을 통한 교류
● 비디오 데이터의 영상 분할 기법 개발 : 비디오 영상의 의미론적 대표 프레임의 추출기법 연구
● 멀티미디어 콘텐츠의 의미론적 영상 특성요소 추출기술 개발 : 비디오 특성정보 추출 자동화 시스템을 개발하여 의미적 단위 영상 분할
● 감성별 특성요소 표본화 : 영상이 갖고 있는 감성요소를 파악하고 감성어휘와 매칭
● 감성 온톨로지 구축 : 감성요소와 감성어휘 간의 관계를 정의하고 온톨로지 구축
● 온톨로지 처리를 통한 복합 감성처리 알고리즘 개발 : 감성요소별
온톨로지 매핑, 통합 등을 이용한 복합적인 감성처리 알고리즘 개발
● 감성어휘 기반 검색모듈 및 인터페이스 개발 : 개발한 복합 감성 처리 알고리즘을 기반으로 감성질의어를 처리하고, 스토리보드를 기반으로 한 영상 편집시스템 개발
● 비즈니스 모델을 수립하여 지능형 감성지원 비디오 영상 콘텐츠 제작시스템 개발 : 방송국으로부터 다양한 콘텐츠 확보 및 인증체계 시스템을 통한 신뢰성 있는 사용자 서비스를 제공하고 과금체계 및 수익 모델 확보

Abstract ▼

A. Contents of Development
(1) Specific Task 1 : Development of semantic analysis technology of multimedia contents Develops a system that designs and manages the structure of multimedia database, a search engine and various libraries and systems to use the technologies developed
● We design a

A. Contents of Development
(1) Specific Task 1 : Development of semantic analysis technology of multimedia contents Develops a system that designs and manages the structure of multimedia database, a search engine and various libraries and systems to use the technologies developed
● We design a multimedia content data structure and develop an analysis and management tool.
● We develop various multimedia content databases.
● We develop how to spilt images in video data.
● We develop how to abstract semantic image special qualities of multimedia contents.
● We develop how to classify images into video and audio.
(2) Specific Task 2 : Design of intelligent search middleware system Deals with queries of emotional language integrated based on sampling through an analysis of special qualities of multimedia according to emotion as the results of the 1st Year Research. For the purpose, we construct emotional ontology based on the relations between emotional language and special qualities, and develop an emotional algorithm on complex special qualities.
● Develop sampling and emotional ontology of special qualities of each emotion.
● Develop a complex emotional management algorithm through ontological management.
● Develop a search module and interface based on emotional language.
● Develop a system to produce intelligence-type emotional support video image contents.
B. Scope of Development
The scopes of main systems in this study are presented as follows:
● Design a multimedia content data structure and develop an analysis management tool : Analyse special qualities of images and sound, and design a data structure based on an analysis of special qualities
● Develop various multimedia content databases : Exchange between broadcasting stations and video production companies through an agreement.
● Develop how to spilt images in video data : Study on how to abstract semantically representative frames of video images.
● Develop how to abstract special qualities of semantic images in multimedia contents : Develop an automated system to abstract special qualities of video to split images in a semantic unit.
● Sampling of special qualities for each emotion : Identify emotional qualities images have and match them with emotional vocabulary.
● Develop emotional ontology : Define the relations between emotional qualities and emotional vocabulary and develop an ontology.
● Develop a complex emotional management algorithm through ontological management : Develop a complex emotional management algorithm using mapping and incorporating ontologies for each emotion
● Develop a search module and interface based on emotional vocabulary : Manage emotional query language based on the complex emotional algorithm developed and develop a image editing system based on a storyboard.
● Prepare a business model to develop a intelligence emotional support video image contents system : Secure various contents from broadcasting stations and provide reliable services through a certification system to secure a pay system and a profitable model.

목차 Contents

• 표지 ...1
• 제출문 ...3
• 요약문 ...4
• SUMMARY ...11
• CONTENTS ...19
• 목차 ...22
• 제1장 서 론 ...25
• 제1절 2차년도 최종 연구개발 결과 개요 ...25
• 제2절 최종 연구개발 계획대비 2차년도 추진 현황 ...27
• 제2장 기술개발의 목적 및 중요성 ...29
• 가. 목적 ...29
• 나. 중요성 ...30
• 제3장 연구개발의 내용 및 범위 ...31
• 제1절 연차별 연구 개발 ...31
• 제2절 2차년도 세부 연구 개발 내용 ...32
• 1. 개발 내용 ...32
• 가. 1세부 과제 : 멀티미디 콘텐츠의 의미론적 분석기술 개발 ...32
• 나. 2세부 과제 : 감성어휘기반 지능적 검색 미들웨어기술 설계 ...32
• 2. 개발 범위 ...33
• 가. 1세부 과제 : 멀티미디 콘텐츠의 의미론적 분석기술 개발 ...33
• 나. 2세부 과제 : 감성어휘기반 지능적 검색 미들웨어기술 설계 ...34
• 3. 시스템 개발 ...36
• 제4장 연구개발 결과 ...38
• 제1절 멀티미디어 콘텐츠 관리시스템 ...38
• 1. 동영상 분석 모듈 ...41
• 가. 동영상 기본 정보 추출 기능 ...41
• 나. 첫 번째 프레임 추출 기능 ...47
• 다. 클립 생성 기능 ...50
• 2. 클립 정보 분석 모듈 ...53
• 가. 감성 정보 분석 기능 ...53
• 나. 콘텐츠 기반 분석 기능 ...61
• 3. 클립 정보 등록 모듈 ...70
• 가. 메타데이터 등록 기능 ...70
• 나. MPEG-7 생성 및 편집 기능 ...72
• 다. 데이터베이스 등록 기능 ...76
• 제2절 감성 기반 지능형 멀티미디어 검색시스템 ...77
• 1. 감성 기반 검색 모듈 ...80
• 가. 감성의 정량화 ...81
• 나. 감성 기반 검색 ...92
• 2. 콘텐츠 기반 검색 모듈 ...97
• 가. 컬러 기반 검색 기능 ...100
• 나. 형태 기반 검색 기능 ...102
• 다. 질감 기반 검색 기능 ...103
• 라. 움직임 기반 검색 기능 ...105
• 3. 검색어 기반 검색 모듈 ...107
• 4. 샷 정보 및 제작 정보 기반 검색 모듈 ...108
• 제3절 스토리보드 기반 동영상 제작시스템 ...109
• 1. 스토리보드 구성 모듈 ...112
• 가. 스토리 구성 기능 ...112
• 나. Scene 구성 기능 ...113
• 다. 샷 구성 기능 ...114
• 2. 샷 등록 모듈 ...115
• 가. 검색을 이용한 샷 등록 기능 ...115
• 나. 캠 녹화를 이용한 샷 등록 기능 ...116
• 3. 편집 모듈 ...117
• 가. 동영상 편집 및 효과 기능 ...118
• 나. 사운드 삽입 기능 ...122
• 4. 동영상 저장 모듈 ...123
• 제4절 멀티미디어 특성요소를 이용한 지능형 콘텐츠 제작기술 ...124
• 1. 매뉴얼 ...124
• 가. 멀티미디어 콘텐츠 관리시스템 ...124
• 나. 감성기반 지능형 멀티미디어 검색 시스템 ...141
• 다. 스토리보드 기반 동영상 제작 시스템 ...156
• 2. 편집 시스템 비교 ...170
• 제5절 실적 ...171
• 1. 연구실적 ...171
• 2. 전문가 초청 세미나 : 6회 실시 ...173
• 3. 기타실적 ...174
• 제6절 산학 협력 ...175
• 1. (주)한국씨네텔 ...175
• 2. (주)펀픽TV ...178
• 제5장 결론 ...180
• 참고문헌 ...181
• 기술개발결과 요약표 ...186