MAF(Multimedia Application File Format) 기반 멀티미디어 검색 시스템의 설계 및 구현 A Design and Implementation of Multimedia Retrieval System based on MAF(Multimedia Application File Format)원문보기
최근 MPEG-A(ISO/IEC 23000)에서는 MAF(Multimedia Application File Format)[1]라는 새로운 멀티미디어 파일 포맷을 제안하고 있다. MAF 파일포맷은 기존의 MPEG 압축 규격을 갖는 미디어 파일에 더해, 미디어 내용 정보를 기술하는 메타데이타를 MPEG-7을 사용하여 하나의 시스템 포맷 내에 포함할 수 있도록 해준다. 하지만 현재로서는 이러한 표준을 구현한 실제 시스템이 없기 때문에, 응용 측면에서 MAF가 얼마나 유용한지 검증하기 어렵다는 문제점을 가지고 있다. 본 논문에서는 PC와 모바일 단말기상에서 MPEG-A 표준을 기반으로 한 멀티미디어 검색 시스템을 설계 및 구현한다. 또한 MPEG-A에서는 아직 동영상에 관련된 메타데이타에 대해서는 제안된 바가 없기 때문에 MPEG-7 MDS(Multimedia Description Scheme)[2]와 TV-Anytime[3]을 기반으로 모바일 환경에서도 저작 및 사용하기 편리한 메타데이타들을 설계한다. 전체 시스템을 설계하기 위해서 MAF 검색 시스템이 가져야 할 5가지 요구사항인 이식성, 확장성, 호환성, 적응성, 효율성을 정의하고 이러한 요구사항을 바탕으로 하여 MAF 검색 시스템의 전체 구조를 응용 계층, 미들웨어 계층, 플랫폼 계층으로 설계한다. 제안하는 검색 시스템은 MAF 형식의 멀티미디어 데이타를 저작, 재생, 검색할 수 있는 클라이언트 파트와, 대용량의 MAF 형식의 멀티미디어 파일과 MAF 파일로부터 추출한 MPEG-7 형태의 메타데이타를 저장, 관리할 수 있는 서버 파트로 구성된다. 그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여, PC에서는 MS윈도우 플랫폼 그리고 모바일 단말기에서는 WIPI 플랫폼 상에서 클라이언트 시스템을 구현하고 시스템 요구사항들을 모두 만족하는지 여부를 확인한다. 제안하는 검색 시스템은 MPEG-A 표준을 검증하고 그 유용성을 확인하기 위해 사용될 수 있다.
최근 MPEG-A(ISO/IEC 23000)에서는 MAF(Multimedia Application File Format)[1]라는 새로운 멀티미디어 파일 포맷을 제안하고 있다. MAF 파일포맷은 기존의 MPEG 압축 규격을 갖는 미디어 파일에 더해, 미디어 내용 정보를 기술하는 메타데이타를 MPEG-7을 사용하여 하나의 시스템 포맷 내에 포함할 수 있도록 해준다. 하지만 현재로서는 이러한 표준을 구현한 실제 시스템이 없기 때문에, 응용 측면에서 MAF가 얼마나 유용한지 검증하기 어렵다는 문제점을 가지고 있다. 본 논문에서는 PC와 모바일 단말기상에서 MPEG-A 표준을 기반으로 한 멀티미디어 검색 시스템을 설계 및 구현한다. 또한 MPEG-A에서는 아직 동영상에 관련된 메타데이타에 대해서는 제안된 바가 없기 때문에 MPEG-7 MDS(Multimedia Description Scheme)[2]와 TV-Anytime[3]을 기반으로 모바일 환경에서도 저작 및 사용하기 편리한 메타데이타들을 설계한다. 전체 시스템을 설계하기 위해서 MAF 검색 시스템이 가져야 할 5가지 요구사항인 이식성, 확장성, 호환성, 적응성, 효율성을 정의하고 이러한 요구사항을 바탕으로 하여 MAF 검색 시스템의 전체 구조를 응용 계층, 미들웨어 계층, 플랫폼 계층으로 설계한다. 제안하는 검색 시스템은 MAF 형식의 멀티미디어 데이타를 저작, 재생, 검색할 수 있는 클라이언트 파트와, 대용량의 MAF 형식의 멀티미디어 파일과 MAF 파일로부터 추출한 MPEG-7 형태의 메타데이타를 저장, 관리할 수 있는 서버 파트로 구성된다. 그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여, PC에서는 MS 윈도우 플랫폼 그리고 모바일 단말기에서는 WIPI 플랫폼 상에서 클라이언트 시스템을 구현하고 시스템 요구사항들을 모두 만족하는지 여부를 확인한다. 제안하는 검색 시스템은 MPEG-A 표준을 검증하고 그 유용성을 확인하기 위해 사용될 수 있다.
Recently, ISO/IEC 23000 (also known as 'MPEG-A') has proposed a new file format called 'MAF(Multimedia Application File Format)[1]' which provides a capability of integrating/storing the widely-used compression standards for audio and video and the metadata in MPEG-7 form into a single file format. ...
Recently, ISO/IEC 23000 (also known as 'MPEG-A') has proposed a new file format called 'MAF(Multimedia Application File Format)[1]' which provides a capability of integrating/storing the widely-used compression standards for audio and video and the metadata in MPEG-7 form into a single file format. However, it is still very hard to verify the usefulness of MPEG-A in the real applications because there is still no real system that fully implements this standard. In this thesis, a design and implementation of a multimedia retrieval system based on MPEG-A standard on PC and mobile device is presented. Furthermore, an extension of MPEG-A for describing the metadata for video is also proposed. It is selected and defined as a subset of MPEG-7 MDS[4] and TV-anytime[5] for video that is useful and manageable in the mobile environments. In order to design the multimedia retrieval system based on MPEG-A, we define the system requirements in terms of portability, extensibility, compatibility, adaptability, efficiency. Based on these requirements, we design the system which composed of 3 layers: Application Layer, Middleware Layer, Platform Layer. The proposed system consists of two sub-parts, client-part and server-part. The client-part consists of MAF authoring tool, MAP player tool and MAF searching tool which allow users to create, play and search the MAF files, respectively. The server-part is composed of modules to store and manage the MAF files and metadata extracted from MAF files. We show the usefulness of the proposed system by implementing the client system both on MS-Windows platform on desk-top computer and WIPI platform on mobile phone, and validate whether it to satisfy all the system requirements. The proposed system can be used to verify the specification in the MPEG-A, and to proves the usefulness of MPEG-A in the real application.
Recently, ISO/IEC 23000 (also known as 'MPEG-A') has proposed a new file format called 'MAF(Multimedia Application File Format)[1]' which provides a capability of integrating/storing the widely-used compression standards for audio and video and the metadata in MPEG-7 form into a single file format. However, it is still very hard to verify the usefulness of MPEG-A in the real applications because there is still no real system that fully implements this standard. In this thesis, a design and implementation of a multimedia retrieval system based on MPEG-A standard on PC and mobile device is presented. Furthermore, an extension of MPEG-A for describing the metadata for video is also proposed. It is selected and defined as a subset of MPEG-7 MDS[4] and TV-anytime[5] for video that is useful and manageable in the mobile environments. In order to design the multimedia retrieval system based on MPEG-A, we define the system requirements in terms of portability, extensibility, compatibility, adaptability, efficiency. Based on these requirements, we design the system which composed of 3 layers: Application Layer, Middleware Layer, Platform Layer. The proposed system consists of two sub-parts, client-part and server-part. The client-part consists of MAF authoring tool, MAP player tool and MAF searching tool which allow users to create, play and search the MAF files, respectively. The server-part is composed of modules to store and manage the MAF files and metadata extracted from MAF files. We show the usefulness of the proposed system by implementing the client system both on MS-Windows platform on desk-top computer and WIPI platform on mobile phone, and validate whether it to satisfy all the system requirements. The proposed system can be used to verify the specification in the MPEG-A, and to proves the usefulness of MPEG-A in the real application.
* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.
문제 정의
본 논문에서는 MAF 기반의 멀티미디어 검색 시스템을 설계 및 구현한다. 전체 검색 시스템에는 MAF 형식 의 멀티미디어 데이타를 저작, 재생, 검색할 수 있는 클 라이언트 시스템과, 대용량의 MAF 형식의 멀티미디어 파일들을 저장, 관리할 수 있는 서버 시스템을 포함하고 있다.
하지만 현재로서는 MAF 파일 포맷 내에 저장된 이러한 메타데이타를 활 용하여 직접 멀티미디어 파일을 검색해볼 수 있는 체계 적인 시스템이 갖추어있지 않다. 본 논문에서는 MAF 형식으로 저장된 대량의 멀티미디어 데이타들을 생성, 교환, 변경, 검색, 재생에 이르기까지, 사용자가 MAF 형식의 파일들을 효율적으로 관리할 수 있는 검색 시스템을 설계 및 구현하였다.
본 논문에서는 MAF 형식의 멀티미디어 데이타를 저 작, 재생, 검색할 수 있는 클라이언트 시스템과, 대용량 의 MAF 형식의 멀티미디어 파일들을 저장, 관리할 수 있는 서버 시스템을 설계하였다. 본 검색 시스템에서 다 루고 있는 MAF 파일들은 현재 MPEG-A 그룹에서 제안한 3on4, Jon4 형식을 포함하고 있으며, 추가적으로 MP4 비디오 형식의 MAF 파일을 포함하도록 하였다.
그림 2에서는 MPEG-7 MDS와 TV-Anytime 에서 다루고 있는 메타데이타의 카테고리 및 범위를 설 명해주고 있다. 본 논문에서는 TV-Anytime보다는 좀 더 포괄적인 MPEG-7 MDS을 바탕으로 하여 MAF에 필요한 동영상 메타데이타를 설계한다.
MPEG-A 그룹에서는 'Jon4'⑼에 필요한 메타데이타 선정을 위해MPEG-7 MDS의 Content Descriptor 카테 고리에서 Who, Where, When, WhatObject, What- Action, Why, How와 같은 의미적인 기술자들을 SMP 에 포함하도록 하였다. 본 논문에서는 앞서 분석을 통해 선택한 Content Metadata, Content Descriptor 카테고 리에 속한 여러 세부 기술자들을 중심으로, 동영상 메타 데이타를 위한 SMP를 설계하였다. 다음은 Content Metadata, Content Descriptor 카테고리 중에서, 다시 한번 요구사항을 바탕으로 하여 동영상 SMP에 포함하거나 배제한 세부기술자들에 대한 설명이다.
따라서 이러한 특성을 고려했을 때, 보다 빠른 로컬 검색을 위해서는 이진 트리 기반의 인덱 싱 방법보다는 해싱 기반의 인덱싱 방법을 선택하는 것이 자원 활용 측면에서 효율적이다 최대 메모리 요구량 을 감안했을 때에도, 작은 크기의 데이타베이스 환경에서 두 방법 모두가 5MB 이하의 메모리를 필요로 하기 때문에, 해싱 기반의 인덱싱 방법을 사용하더라도 대부분의 단말기 환경에서 큰 문제없이 동작이 가능하다. 본 논문에서는 이러한 근거를 바탕으로 하여, 로컬 서버의 검색을 위한 해싱 기반의 인덱스 파일을 WIPI 환경에서 구현하였고 성능을 분석하였다.
제안 방법
MAF 클라이언트 시스템은 앞서 살펴본 요구사항을 바탕으로 하여, 계층적인 접근방식(Layered Approach) 을 통해서 그림 3과 같이 설계하였다. 전체 시스템은 크게 3개의 계층 응용 계층, 미들웨어 계층, 플랫폼 계층 으로 구성된다, 특히 미들웨어 하부에 위치한 PAL(Plat- form Abstraction Layer) 계층에서는 외부적으로 동일한 API를 제공하면서 동시어〕, 내부적으로는 실제 사용 하고자 하는 플랫폼에 해당하는 API로 매핑해주는 역할을 담당한다.
동영상 메타데이타 설계 시에 한 가지 더 고려해야 할 사항으로는, 이렇게 선택한 MPEG-7 MDS카테고리 중에서도 가급적 최소한의 메타데이타 기술자(Descriptor) 만을 선택하여, 최종적으로는 하나의 SMP(Simple Metadata Profile)의 형태로 구성해야만 한다는 점이다. MPEG-A 그룹에서는 'Jon4'⑼에 필요한 메타데이타 선정을 위해MPEG-7 MDS의 Content Descriptor 카테 고리에서 Who, Where, When, WhatObject, What- Action, Why, How와 같은 의미적인 기술자들을 SMP 에 포함하도록 하였다. 본 논문에서는 앞서 분석을 통해 선택한 Content Metadata, Content Descriptor 카테고 리에 속한 여러 세부 기술자들을 중심으로, 동영상 메타 데이타를 위한 SMP를 설계하였다.
그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여 윈도우와 단말 기 환경에서 클라이언트 시스템을 구현하였고, 특히 단 말기 내의 검색을 위해서는 간단한 인덱스 파일을 구현 하여 메타데이타에 대한 빠른 검색이 가능하도록 하였다. 그리고 구현을 통해 각 핵심모듈의 동작 여부와 함께 시스템 설계 시에 정의한 요구사항들을 모두 만족하 는지 여부를 확인하였다.
그리고 이러한 요구사항을 바탕으로 하여 MAF 검색 시스템의 전체 구조와 필요한 핵심 모듈들을 설계하였다. 그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여 윈도우와 단말 기 환경에서 클라이언트 시스템을 구현하였고, 특히 단 말기 내의 검색을 위해서는 간단한 인덱스 파일을 구현 하여 메타데이타에 대한 빠른 검색이 가능하도록 하였다. 그리고 구현을 통해 각 핵심모듈의 동작 여부와 함께 시스템 설계 시에 정의한 요구사항들을 모두 만족하 는지 여부를 확인하였다.
특히, 동영상에 관련된 메타데이타에 대해서는 아직 MPEG-A 그룹에서 제안한 거卜 없기 때문에 MPEG-7 MDS(Multimedia Description Scheme)[2] TV-Anytime[3]과 같은 기존의 동영상 관련 메타데이 타들을 분석하여 검색에 필요한 동영상 관련 메타데이 타 프로파일(Profile)을 설계한다. 그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여 윈도우와 핸 드폰 환경에서 클라이언트 시스템을 구현하고, 특히 단 말기 내의 검색을 위해서는 간단한 인덱스 파일을 구현 하여 메타데이타의 빠른 검색이 가능하도록 한다.
전체 시스템을 설계하기 위해서는, MAF 검색 시스템이 가져야 할 5가지 요구사항인 이식성, 확장성, 호환성, 적 응성, 효율성을 정의하였다. 그리고 이러한 요구사항을 바탕으로 하여 MAF 검색 시스템의 전체 구조와 필요한 핵심 모듈들을 설계하였다. 그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여 윈도우와 단말 기 환경에서 클라이언트 시스템을 구현하였고, 특히 단 말기 내의 검색을 위해서는 간단한 인덱스 파일을 구현 하여 메타데이타에 대한 빠른 검색이 가능하도록 하였다.
본 논문에서는 MAF 형식의 멀티미디어 데이타를 저 작, 재생, 검색할 수 있는 클라이언트 시스템과, 대용량 의 MAF 형식의 멀티미디어 파일들을 저장, 관리할 수 있는 서버 시스템을 설계하였다. 본 검색 시스템에서 다 루고 있는 MAF 파일들은 현재 MPEG-A 그룹에서 제안한 3on4, Jon4 형식을 포함하고 있으며, 추가적으로 MP4 비디오 형식의 MAF 파일을 포함하도록 하였다. 특히, 동영상에 관련된 메타데이타에 대해서는 아직 MPEG-A 그룹에서 제안한 바 없기 때문에, 본 논문에서는 기존의 동영상 관련 메타데이타들을 분석하여 검 색에 필요한 동영상 관련 메타데이타를 설계하였다.
본 구현에서는 모바일 환경에서의 검색 속도 문제를 해 결하기 위하여, 해싱 기반의 인덱싱 방법을 사용하여 로 컬 서버를 구현하였다. 참고한 소스코드는 QDBM(Quick Database Management)[16]으로써, 소규모의 데이타 베 이스에 적합한 간단한 API를 제공하는 DBMS 도구이다.
본 논문에서는 원격 서버의 구현을 위해 MS-SQL 2000 Personal Editiorr을 사용하였고 Jon4[8], 3on4[9] 의 메타데이타 표준과 본 논문에서 설계한 동영상 메타 데이타를 사용하여 DB 스키마를 구성하였다.
호환성(Compatibility)은 본 시스템에서 생성한 MAF 파일이 기존의 다른 재생도구에서 동일하게 사용할 수 있는 특성을 말한다. 본 시스템에서는 MP4 시스템 파 일 포맷을 사용하여 MAF 파일을 생성하기 때문에, MP4 재생이 가능한 기존의 재생 도구들을 사용하여 호 환성을 검증하였다.
적응성(Adaptability)은 MAF 검색 시스템에서 사용하는 메타데이타의 변경이 있더라도, 코드의 수정 없이 변경사항을 시스템에 반영하기 위한 요구사항이다. 본 시스템에서는 이러한 적응성 측면을 고려하기 위하여, 메타데이타를 정의한 별도의 스키마 파일을 입력으로 받도록 설계 및 구현하였다. 따라서 동영상에 필요한 메 타데이타가 앞으로 표준화되거나 응용에 따라 필요한 메다데이타를 정의하더라도, 본 시스템에서는 스키마 입력 파일만 수정함으로써 변경사항을 쉽게 반영할 수 있는 특징이 있다
본 장에서는 MAF 검색 시스템에서 필요한 메타데이 타 요구사항을 바탕으로 MPEG-7 MDS를 분석하고, 필요한 동영상 메타데이타를 설계하도록 한다.
본 장에서는 MAF 기반의 멀티미디어 검색 시스템이 가져야 할 요구사항들을 정의하고, 요구사항을 근거로 하여 검색 시스템의 구조를 설계하도록 한다. 검색 시스템은 크게 2가지 부분으로, 저작 도구, 검색 도구, 재생 도구를 포함하는 MAF 클라이언트 시스템과, 저작한 MAF 파일들올 저장하고 클라이언트로부터 검색 질의 (Search Query)를 받아 검색을 수행하는 MAF 검색 서버로 구성돤다.
본 장에서는 앞서 4장에서 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여 윈도우와 핸드폰 환경에서 클라이언트 시스템을 구현하고 구현 결과를 분석한다.
MAF 파일의 메타데이타들은 대부분 키워드 형식이기 때문에, 문자열 타입의 변수들로 표현할 수 있다. 원격 서버에서 필요한 DB 스키마는 Jon4[8], 3on4[9]의 메타데이타 표준과 본 논문에서 설 계한 동영상 메타데이타를 사용하도록 설계하였다.
이번 장에서는 MPEG-A에서 제안하는 MAF(Multi- media Application File Format)의 내부구조와 MPEG-7 MDS와 TV-Anytime과 같은 기존의 동영상 메타데이 타 사양들을 살펴보도록 한다.
특히, 동영상에 관련된 메타데이타에 대해서는 아직 MPEG-A 그룹에서 제안한 바 없기 때문에, 본 논문에서는 기존의 동영상 관련 메타데이타들을 분석하여 검 색에 필요한 동영상 관련 메타데이타를 설계하였다. 전체 시스템을 설계하기 위해서는, MAF 검색 시스템이 가져야 할 5가지 요구사항인 이식성, 확장성, 호환성, 적 응성, 효율성을 정의하였다. 그리고 이러한 요구사항을 바탕으로 하여 MAF 검색 시스템의 전체 구조와 필요한 핵심 모듈들을 설계하였다.
본 논문에서 제안하는 MAF 기반의 멀티미디어 검색 시스템은 PC뿐만 아니라, 핸드폰이나 PDA와 같은 모 바일 환경에서의 멀티미디어 검색을 대상으로 하고 있다. 클라이언트 시스템의 설계에 앞서, 시스템 측면에서 필요한 이러한 요구사항들을 표 2와 같이 분석 및 정의 하였다.
전체 검색 시스템에는 MAF 형식 의 멀티미디어 데이타를 저작, 재생, 검색할 수 있는 클 라이언트 시스템과, 대용량의 MAF 형식의 멀티미디어 파일들을 저장, 관리할 수 있는 서버 시스템을 포함하고 있다. 특히, 동영상에 관련된 메타데이타에 대해서는 아직 MPEG-A 그룹에서 제안한 거卜 없기 때문에 MPEG-7 MDS(Multimedia Description Scheme)[2] TV-Anytime[3]과 같은 기존의 동영상 관련 메타데이 타들을 분석하여 검색에 필요한 동영상 관련 메타데이 타 프로파일(Profile)을 설계한다. 그리고 설계한 MAF 검색 시스템의 유용성을 검증하기 위하여 윈도우와 핸 드폰 환경에서 클라이언트 시스템을 구현하고, 특히 단 말기 내의 검색을 위해서는 간단한 인덱스 파일을 구현 하여 메타데이타의 빠른 검색이 가능하도록 한다.
본 검색 시스템에서 다 루고 있는 MAF 파일들은 현재 MPEG-A 그룹에서 제안한 3on4, Jon4 형식을 포함하고 있으며, 추가적으로 MP4 비디오 형식의 MAF 파일을 포함하도록 하였다. 특히, 동영상에 관련된 메타데이타에 대해서는 아직 MPEG-A 그룹에서 제안한 바 없기 때문에, 본 논문에서는 기존의 동영상 관련 메타데이타들을 분석하여 검 색에 필요한 동영상 관련 메타데이타를 설계하였다. 전체 시스템을 설계하기 위해서는, MAF 검색 시스템이 가져야 할 5가지 요구사항인 이식성, 확장성, 호환성, 적 응성, 효율성을 정의하였다.
참고한 소스코드는 QDBM(Quick Database Management)[16]으로써, 소규모의 데이타 베 이스에 적합한 간단한 API를 제공하는 DBMS 도구이다. 하지만 본 논문에서는 모바일 상에서의 검색과 이식성 측 면을 고려하여, QDBM에서 해싱 기능을 제공하는 API만 을 별도로 추출하여 모듈화하였다. 따라서 본래의 QDBM 소스코드 크기는 806KB이나, 간소화한 해싱 관련 소스 코드의 크기는 76KB로 줄일 수 있었다.
MPEG-A의 제2부 규격인 MPEG Music Player Application Format®과 Photo MAF Player[9] 의 표 준화 작업에서는 JPEG의 메타데이타의 형태인 EXIF (Exchangeable Image Format)[l0]과 MP3의 메타데이 타의 형태인 ID3E11K MPEG-7 XML 형식으로 사상 (Mapping)하는 방법과, MAF에서 필요로 하는 의미적 (Semantic)인 정보들을 MPEG-7 XML 형식으로 표현 하도록 명시하고 있다. 하지만, 동영상에 관련된 메타데 이타에 대해서는 아직 MPEG-A 그룹에서 제안한 바 없기 때문에, 본 논문에서는 기존의 동영상 관련 메타데 이타들을 분석하여 검색에 필요한 동영상 관련 메타데 이타 프로파일(Profile)을 설계한다.
효율성(Efficiency) 분석을 위해서는 본 논문에서 구 현한 해시 기반의 인덱싱 방법과 로그 방식의 인덱싱 방법메타 데이타를 순차적으로 파일에 쓴 경우)을 검색 속도 및 인덱스 파일 크기의 관점에서 비교하였다. 그림 6에서와 같이, 단말기 내에 저장된 MAF 파일의 개수가 700개 미만일 때에는 로그 방식이 더 빠른 검색 성능을 보이지만, MAF 파일의 개수가 700개 이상일 경우에는 본 논문에서 구현한 해시 기반의 인덱싱 방법이 탁월한 성능을 보인다.
대상 데이터
이 중 Navigation & Access, Content Orga- nization, ( User Interaction 카테고리들은 정의한 요구사 항의 만족도 측면에서 볼 때, 사용자 입장에서 저작이 힘들고 보편적인 검색에는 사용할 수 없는 메타데이타 를 포함하고 있다. 따라서 본 논문에서는 동영상 메타데 이타를 위한 MPEG-7 MDS의 카테고리로서, Content Meta-data와 Content Description 카테고리를 선정하였다.
본 논문에서 제안하는 MAF 기반의 멀티미디어 검색 시스템은 PC뿐만 아니라, 핸드폰이나 PDA와 같은 모 바일 환경에서의 멀티미디어 검색을 대상으로 하고 있다. 클라이언트 시스템의 설계에 앞서, 시스템 측면에서 필요한 이러한 요구사항들을 표 2와 같이 분석 및 정의 하였다.
daf)로 생성하였다. 사용한 단말기의 버전 은 SKY IM-8500으로 본 시스템에서 필요로 하는 미 디어 파일들인 JPEG과 MP3, MP4 비디오의 재생을 지 원해준다. 그림 5는 핸드폰 상에서 구현한 MAF 저작도 구를 보여주고 있다.
성능/효과
그림 7에서는 두 방법을 사용했을 때 생 성되는 인덱스 파일의 크기를 비교한 것이다. MAF 파 일의 개수에 상관없이 모든 경우에 대해서, 해시 기반의 인덱스 파일이 로그 방식의 인덱스 파일보다 크기 면에서 5~8배 크다는 사실을 알 수 있다. 하지만 이러한 인 덱스 파일의 크기는 실제 단말기 내에 저장된 MAF 파 일들의 크기와 비교했을 때, 상대적으로 아주 작은 크기 임이 분명하다.
효율성(Efficiency) 분석을 위해서는 본 논문에서 구 현한 해시 기반의 인덱싱 방법과 로그 방식의 인덱싱 방법메타 데이타를 순차적으로 파일에 쓴 경우)을 검색 속도 및 인덱스 파일 크기의 관점에서 비교하였다. 그림 6에서와 같이, 단말기 내에 저장된 MAF 파일의 개수가 700개 미만일 때에는 로그 방식이 더 빠른 검색 성능을 보이지만, MAF 파일의 개수가 700개 이상일 경우에는 본 논문에서 구현한 해시 기반의 인덱싱 방법이 탁월한 성능을 보인다. 그림 7에서는 두 방법을 사용했을 때 생 성되는 인덱스 파일의 크기를 비교한 것이다.
하지만 본 논문에서는 모바일 상에서의 검색과 이식성 측 면을 고려하여, QDBM에서 해싱 기능을 제공하는 API만 을 별도로 추출하여 모듈화하였다. 따라서 본래의 QDBM 소스코드 크기는 806KB이나, 간소화한 해싱 관련 소스 코드의 크기는 76KB로 줄일 수 있었다.
008% 밖에 저장 공간올 차지하지 않는다. 따라서, 본 논문의 구현한 해시 기반의 인덱싱 방법은 대량의 MAF 파일 을 저장할 수 있는 모바일 단말기일수록 효율성이 높은 반면, 작은 크기의 스토리지를 갖는 장치에서는 상대적으로 효율성이 떨어진다는 사실을 알 수 있다.
이번 절에서는 시스템 설계 시에 고려한 요구사항을 바탕으로 전체 시스템을 분석한다. 시스템 설계 시에 고려한 요구사항은 5가지로써, 이식성, 적응성, 확장성, 호 환성, 효율성이다.
먼저 이식성(Portability) 측면에서 살펴봤을 때, 본 시스템의 미들웨어에서 제공하는 PAL(Platform Abstraction Layer) [15] API들은 PC와 모바일 단말기의 운 영체제에 상관없이 MAF 클라이언트 모듈에 필요한 파 일, 메모리, 네트워크 기능들을 원활하게 제공해준다. 실 제로 본 논문에서 구현한 모든 모듈들은 PAL에서 제공하는 API를 사용하고 있으며, 따라서 윈도우 버전과 모 바일 버전의 클라이언트 시스템을 구현할 때에도 코드 의 수정 없이 동일한 인터페이스를 통해 구현할 수 있었다. 또한 PAL 계층에서는 윈도우와 WIPI 플랫폼뿐만 아니라, 최근에 모바일 플랫폼으로써 각광받고 있는 BREW와 SYMBIAN 등에 대해서도 필요한 기능들을 제공할 수 있다.
후속연구
본 논문에서 설계 및 구현한 MAF 검색 시스템을 활 용도 측면에서 본다면, PC 혹은 단말기 환경에서 사용자가 생성한 MAF 파일들을 그 즉시 저작하여 서버 혹은 단말기 내에 저장한 다음, 추후 의미적인 키워드를 통해 검색하고 재생까지 할 수 있는 멀티미디어의 획기 적인 관리 및 검색 시나리오가 가능하다. 또한 본 논문 에서 다룬 MAF 저작도구/검색도구/재생도구 이외에도 MAF를 이용한 또 다른 응용 프로그램을 개발할 때, 본 시스템의 미들웨어에서 제공하는 핵심 모듈들을 이용하 거나 기능에 따라 필요한 모듈(예를 들어, 카메라 캡쳐 모듈)을 미들웨어 계층에 추가한다면, 좀 더 효율적이고 빠른 어플리케이션의 개발이 가능하다.
앞으로의 연구에서는 모바일 플랫폼 상의 제약을 고려하여 좀 더 효율적인 인덱싱 방법이 제안되어야 할 것이다. 또한 본 논문에서 제안한 검색 시스템에서는 메 타데이타에 대한 MPEG-7의 표현을 텍스트 형식(TeM) 으로만 지원하고 있기 때문에, 추후 바이너리 형식 (BiM)으로도 지원할 수 있도록 보완할 예정이다.
본 논문에서 설계 및 구현한 MAF 검색 시스템을 활 용도 측면에서 본다면, PC 혹은 단말기 환경에서 사용자가 생성한 MAF 파일들을 그 즉시 저작하여 서버 혹은 단말기 내에 저장한 다음, 추후 의미적인 키워드를 통해 검색하고 재생까지 할 수 있는 멀티미디어의 획기 적인 관리 및 검색 시나리오가 가능하다. 또한 본 논문 에서 다룬 MAF 저작도구/검색도구/재생도구 이외에도 MAF를 이용한 또 다른 응용 프로그램을 개발할 때, 본 시스템의 미들웨어에서 제공하는 핵심 모듈들을 이용하 거나 기능에 따라 필요한 모듈(예를 들어, 카메라 캡쳐 모듈)을 미들웨어 계층에 추가한다면, 좀 더 효율적이고 빠른 어플리케이션의 개발이 가능하다.
확장성(Extensibility)은 본 시스템에서 설계 및 구현 한 핵심 모듈을 사용하여 MAF와 관련된 응용 프로그 램의 개발을 보다 효율적으로 하기 위한 요구사항이다. 본 시스템에서 제공하는 핵심 모듈들을 사용하거나 기 능에 따라 필요한 모듈여]를 들어, 카메라 캡춰 모듈)을 미들웨어 계충에 추가한다면, 좀 더 효율적이고 빠른 어 플리케이션의 개발이 가능하다.
앞으로의 연구에서는 모바일 플랫폼 상의 제약을 고려하여 좀 더 효율적인 인덱싱 방법이 제안되어야 할 것이다. 또한 본 논문에서 제안한 검색 시스템에서는 메 타데이타에 대한 MPEG-7의 표현을 텍스트 형식(TeM) 으로만 지원하고 있기 때문에, 추후 바이너리 형식 (BiM)으로도 지원할 수 있도록 보완할 예정이다.
참고문헌 (16)
ISO/IEC, MPEG-A Multimedia Application Format Overview and Requirement (v.2), JTC1/SC29/WG11/N6832, 2004
ISO/IEC, MPEG-A Multimedia Application Format Overview and Requirement (v.2), JTC1/SC29/WG11/ N6832, 2004
ISO/IEC, Information Technology - Coding of Audio-Visual Objects-Part12: ISO Base Media File Format, 14496-12, 2005
ISO/IEC, Information Technology - Coding of Audio-Visual objects - Part1: Systems, 14496-1, 1998
ISO/IEC, Information technology - Multimedia Framework (MPEG-21) - Part 2: Digital Item Declaration (DID), 21000-2, 2004
ISO/IEC, MPEG Music Player Application Format, JTC1/SC29/WG11/N7156, 2005
ISO/IEC, Photo Player Multimedia Application Format, JTC1/SC29/WG11/N7093, 2005
일본전자공업진흥협회, Digital Still Camera Image File Format Standard (Exchangeable image file format for Digital Still Camera:EXIF) ver. 2.1, JEIDA-49, 1998
ID3 표준화협회, ID3 made easy: ID3 ver. 1.1, http://www.id3.org/id3v1.html. 2005
ISO/IEC, Information Technology - Coding of Audio-Visuals Parts: Amendment 3, MPEG-l/2 in MPEG-4 Audio, 14496-3, 2001
J. Zobel, S. Heinz, and H.E. Williams, 'In-memory Hash Tables for Accumulating Text Vocabularies,' Information Processing Letters, Vol. 80(6), pp. 271-277, 2001
※ AI-Helper는 부적절한 답변을 할 수 있습니다.