현재 전 세계적으로 미래 수익 사업의 일환으로 각광받고 있는 분야 중 하나는 3D이다. 3D는 현실세계와 가상현실 세계의 차원을 함께 공존시켜주며 형태 및 질감 등을 느낄 수 있게 해주어 기존의 평면적인 2D에서 입체적인 3D로 변화하고 공존의 시대적 현실을 잘 보여주고 있기 때문이다. 3D에 대한 사람들의 관심은 3D아바타를 바탕으로 하는 영화를 통하여 확산되었다. 또한 현재 대기업들의 3D TV 시장으로의 시장 변화 역시 3D시장의 개척에서 도약의 시대로 한층 더 업그레이드 시키게 되었다. 또한 이와 동시에 세계의 현대인이라면 필수품이 되어가고 있는 스마트폰의 열풍 또한 새로운 핸드폰 시장과 IT 시장의 혁신을 이루었으며. 스마트 폰은 작은 컴퓨터라 불릴 정도로, 그 파급속도와 여파는 전화, 인터넷의 혁신만큼 많은 이슈를 남기고 있다. 스마트폰은 말 그대로 똑똑한 폰으로 여러 가지 기능을 할 수 있는 핸드폰이다. 현재 iPhone, Android. Windows Phone외에 다수의 스마트폰이 출시되어 있다. 위의 전체적인 향후의 전망과 비즈니스 서비스 모델을 위하여 스마트폰에 가상의 3D캐릭터를 카메라로 입력받아 3D 표정아바타를 사람의 얼굴에 합성할 수 있고 카메라로 사용자의 감성 표정을 인식하여 합성된 아바타를 실시간 다른 휴대전화 사용자에게 정합, 전송, 통신 할 수 있는 실시간 감성융합 영상통신 서비스 어플리케이션의 개발하고자 한다.
현재 전 세계적으로 미래 수익 사업의 일환으로 각광받고 있는 분야 중 하나는 3D이다. 3D는 현실세계와 가상현실 세계의 차원을 함께 공존시켜주며 형태 및 질감 등을 느낄 수 있게 해주어 기존의 평면적인 2D에서 입체적인 3D로 변화하고 공존의 시대적 현실을 잘 보여주고 있기 때문이다. 3D에 대한 사람들의 관심은 3D아바타를 바탕으로 하는 영화를 통하여 확산되었다. 또한 현재 대기업들의 3D TV 시장으로의 시장 변화 역시 3D시장의 개척에서 도약의 시대로 한층 더 업그레이드 시키게 되었다. 또한 이와 동시에 세계의 현대인이라면 필수품이 되어가고 있는 스마트폰의 열풍 또한 새로운 핸드폰 시장과 IT 시장의 혁신을 이루었으며. 스마트 폰은 작은 컴퓨터라 불릴 정도로, 그 파급속도와 여파는 전화, 인터넷의 혁신만큼 많은 이슈를 남기고 있다. 스마트폰은 말 그대로 똑똑한 폰으로 여러 가지 기능을 할 수 있는 핸드폰이다. 현재 iPhone, Android. Windows Phone외에 다수의 스마트폰이 출시되어 있다. 위의 전체적인 향후의 전망과 비즈니스 서비스 모델을 위하여 스마트폰에 가상의 3D캐릭터를 카메라로 입력받아 3D 표정아바타를 사람의 얼굴에 합성할 수 있고 카메라로 사용자의 감성 표정을 인식하여 합성된 아바타를 실시간 다른 휴대전화 사용자에게 정합, 전송, 통신 할 수 있는 실시간 감성융합 영상통신 서비스 어플리케이션의 개발하고자 한다.
3D is the one of the current world in the spotlight as part of the future earnings of the business sector. Existing flat 2D and stereoscopic 3D to change the 3D shape and texture make walking along the dimension of the real world and the virtual reality world by making it feel contemporary reality o...
3D is the one of the current world in the spotlight as part of the future earnings of the business sector. Existing flat 2D and stereoscopic 3D to change the 3D shape and texture make walking along the dimension of the real world and the virtual reality world by making it feel contemporary reality of coexistence good show. 3D for the interest of the people has been spreading throughout the movie which is based on a 3D Avata. 3D TV market of the current conglomerate of changes in the market pioneer in the 3D market, further leap into the era of the upgrade was. At the same time, however, the modern man of the world, if becoming a necessity in the smartphone craze new innovation in the IT market mobile phone market and also has made. A small computer called a smartphone enough, the ripple velocity and the aftermath of the innovation of the telephone, the Internet as much as to leave many issues. Smartphone smart phone is a mobile phone that can be several functions. The current iPhone, Android. In addition to a large number of Windows Phone smartphones are released. Above the overall prospects of the future and a business service model for 3D facial expression as input avatar virtual 3D character on camera on your smartphone camera to recognize a user's emotional expressions on the face of the person is able to synthetic synthesized avatars in real-time to other mobile phone users matching, transmission, and be able to communicate in real-time sensibility fused video communication services to the development of applications.
3D is the one of the current world in the spotlight as part of the future earnings of the business sector. Existing flat 2D and stereoscopic 3D to change the 3D shape and texture make walking along the dimension of the real world and the virtual reality world by making it feel contemporary reality of coexistence good show. 3D for the interest of the people has been spreading throughout the movie which is based on a 3D Avata. 3D TV market of the current conglomerate of changes in the market pioneer in the 3D market, further leap into the era of the upgrade was. At the same time, however, the modern man of the world, if becoming a necessity in the smartphone craze new innovation in the IT market mobile phone market and also has made. A small computer called a smartphone enough, the ripple velocity and the aftermath of the innovation of the telephone, the Internet as much as to leave many issues. Smartphone smart phone is a mobile phone that can be several functions. The current iPhone, Android. In addition to a large number of Windows Phone smartphones are released. Above the overall prospects of the future and a business service model for 3D facial expression as input avatar virtual 3D character on camera on your smartphone camera to recognize a user's emotional expressions on the face of the person is able to synthetic synthesized avatars in real-time to other mobile phone users matching, transmission, and be able to communicate in real-time sensibility fused video communication services to the development of applications.
* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.
문제 정의
본 애플리케이션은 화상통화시 사용자의 감정과 표정을 인식하여 해당 감정을 대행하는 아바타와 해당 표정에 효과를 더하는 이모티콘이 정합되는 콘텐츠로서 감정 및 표정 정합지원 화상통화 서비스를 위해 필요한 얼굴인식, 감정인식, 영상정합, 화상통신 등의 핵심 기술을 개발하고 애플리케이션 콘텐츠와 연동서버를 개발한다.
사용자의 감정과 표정을 인식하기 위한 얼굴검출, 얼굴인식, 감정인식의 핵심기술을 개발 인식된 감정을 대행하는 아바타 및 표정을 극대화 하는 이모티콘의 정합기술 개발로 스마트폰 화상통신 사용자가 사용자간의 표정인식을 통해 현실세계에 불가능한 감정표현을 가능하게 하여 의사전달의 효과를 증대 하는 것이다 은 다음의 핵심 기술을 보여 준다.
제안 방법
이미지 분석 단계인 엣지 검출 알고리즘 등을 통한 이미지내의 객체 간 경계 파악, 전 처리된 이미지에서 얼굴을 검출하며, 학습 알고리즘 등을 적용하여 얼굴 특징을 분석하고 구성 요소의 이미지상 위치와 관계 데이터를 추출, 얼굴검출 단계를 통해 추출된 인식 정보를 바탕으로 자세추정과 표정인식을 한다. 얼굴이 취하는 자세와 표정에 대한 아바타의 자세와 표정을 선정, 분석된 정보를 통해서 3D 공간상의 아바타(얼굴) 위치 좌표를 결정하고 해당 표정과 감정에 대한 아바타 애니메이션을 선정하고, 3D엔진에 제어 신호(메시지)를 전달 아바타 영상과 동영상이 표현될 3D공간을 구성하고 분석된 아바타를 해당위치에 놓는 기능을 수행(3D엔진 API를 통한 3D객체 및 3D공간제어) 현재 3D공간을 통해 표현되는 아바타와 동영상소스를 단일 이미지 소스로 정합, 정합된 이미지를 음성소스와 함께 동영상 인코딩을 수행. 음성소스는 동영상 소스로부터 추출하여 처리한다.
웃음, 미소, 울음, 찡그림, 놀람 등 얼굴의 표정에 따른 감정인지 기술은 표정분석 관계연삼함수를 통하여 형태와 서로간의 관계로 행복, 슬픔, 기쁨 등의 감정 추론이 가능하다. 이러한 감정객체추출의 단계는 화소, 블랍, 객체등의 레벨 검출이 구성 적용 되어야만 하는데 배경의 정보를 학습한 배경 모델이 구성되면 배경으로부터 전경객체를 추출하기 위하여 우선 화소 레벨에서 전경화소와 배경화소를 검출하는 단계를 수행하며 인접 전경화소들을 연결하여 의미 있는 블랍을 검출하는 과정을 거치고 추출된 블랍 중 관심 객체를 구분할 수 있는 블랍을 관심객체로 정의하는 객체레벨 검출 단계를 수행한다. 균일분포 배경 모델에 의한 배경차감은 전처리 과정에서 HSI 컬러 공간에서의 배경모델 영상을 획득하기 위해 일정시간의 훈련과정을 거쳐 배경영역의 컬러 값에 대한 균일 배경모델을 구성하는 화소레벨검출을 통해 격자이미지 기법을 사용하여 낮은 해상도로 레이블링 하는 블랍레벨 검출 방법을 통한다 이러한 레벨검출 방법은 노이즈 픽셀 등의 예기치 않은 인위적 결함이 있을 경우에도 좋은 성능을 발휘 하게 된다 블랍레벨검출에서 추출한 집합에서 관심객체인 얼굴과 손 영역을 검출하기 위하여 [그림 7]의 에이다부스트 알고리즘을 적용하여 객체레벨을 검출 한다.
영상통신 감성융합 서비스는 카메라 모듈로부터 동영상 데이터 소스에서 분석할 프레임 이미지를 캡쳐, 캡쳐한 이미지를 분석하기 쉬운 상태로 전 처리를 하는 단계를 걸친다. 이미지 분석 단계인 엣지 검출 알고리즘 등을 통한 이미지내의 객체 간 경계 파악, 전 처리된 이미지에서 얼굴을 검출하며, 학습 알고리즘 등을 적용하여 얼굴 특징을 분석하고 구성 요소의 이미지상 위치와 관계 데이터를 추출, 얼굴검출 단계를 통해 추출된 인식 정보를 바탕으로 자세추정과 표정인식을 한다. 얼굴이 취하는 자세와 표정에 대한 아바타의 자세와 표정을 선정, 분석된 정보를 통해서 3D 공간상의 아바타(얼굴) 위치 좌표를 결정하고 해당 표정과 감정에 대한 아바타 애니메이션을 선정하고, 3D엔진에 제어 신호(메시지)를 전달 아바타 영상과 동영상이 표현될 3D공간을 구성하고 분석된 아바타를 해당위치에 놓는 기능을 수행(3D엔진 API를 통한 3D객체 및 3D공간제어) 현재 3D공간을 통해 표현되는 아바타와 동영상소스를 단일 이미지 소스로 정합, 정합된 이미지를 음성소스와 함께 동영상 인코딩을 수행.
후속연구
2012년 1월을 기점으로 스마트폰 2258만명, 태블릿 100만명을 돌파할 정도로 단기간에 빠른 성장세를 보이고 있는 스마트폰의 시장은 국내외 IT핵심키워드 1위에 오를만큼 그 추세는 가희 기하급수적이다. 또한 3D를 포함한 증강현실 역시 미래를 이끌 10대 혁신기술로 꼽히며 향후 미래시장의 선도에서 전 세계를 주도할 것으로 여겨진다. 이와 더불어 국내 해외 대기업간의 콘텐츠를 겸비한 상품화 전쟁이 나날이 지속되고 있는 가운데 3D 감성 융합 사업은 종합적 IT시장의 발전과 기업에 많은 이익창출과 고객들의 가상세계에 대한 인식을 바꿀 수 있는 좋은 기회가 될 것이며, 표정인지 기술에서 한발작 나아가 표준 동작 데이터에 매칭이 가능한 GTT(Gesture-To-Text)엔진 개발 및 수화 인식 기술에 대한 표준 형상 모형 데이터기반 구축에 이바지 할 것이다.
국내 및 해외 대기업들이 이러한 차세대 기술 과 디자인에 전력하는 이유는 정보와 함께 흘러가는 정보 소비자의 욕구를 충족시키기 위한 수단으로 그 기업 기술전략의 급성장을 이루고 있다. 이러한 신기술 사업의 성장은 단순기술이 아닌 정합 기술 사업으로 진출 하였으며 이에 맞는 스마트폰의 영상통화와 3D 아바타의 접목으로 국내 및 해외 시장에 맞는 영상통신 감성융합 서비스를 소비자에게 제공 수단으로 이용한다면 그에 대한 수익도 기대할 수 있다. 예로 네이트온 이모티콘은 일본을 시점으로 전 세계적으로 엄청난 수익 효과를 가져다주고 있는데 국내 카카오톡 역시 이를 응용한 다양한 이모티콘 콘텐츠로 다양한 광고 효과 및 수익 상품을 돌출하고 있다.
예로 네이트온 이모티콘은 일본을 시점으로 전 세계적으로 엄청난 수익 효과를 가져다주고 있는데 국내 카카오톡 역시 이를 응용한 다양한 이모티콘 콘텐츠로 다양한 광고 효과 및 수익 상품을 돌출하고 있다. 이에 본 개발 콘텐츠 역시 발신자 스마트폰 단말(디바이스)의 영상 통신 정합 서비스 또한 향후 막대한 기대 수익을 창출 할 수 있다.
또한 3D를 포함한 증강현실 역시 미래를 이끌 10대 혁신기술로 꼽히며 향후 미래시장의 선도에서 전 세계를 주도할 것으로 여겨진다. 이와 더불어 국내 해외 대기업간의 콘텐츠를 겸비한 상품화 전쟁이 나날이 지속되고 있는 가운데 3D 감성 융합 사업은 종합적 IT시장의 발전과 기업에 많은 이익창출과 고객들의 가상세계에 대한 인식을 바꿀 수 있는 좋은 기회가 될 것이며, 표정인지 기술에서 한발작 나아가 표준 동작 데이터에 매칭이 가능한 GTT(Gesture-To-Text)엔진 개발 및 수화 인식 기술에 대한 표준 형상 모형 데이터기반 구축에 이바지 할 것이다.
질의응답
핵심어
질문
논문에서 추출한 답변
Hadoop이란?
2008년 이래로 데이터량이 44배에 이를 것으로 예측, 실제 이를 능가하고 있다, 이는 단순한 데이터량의 증가가 아니라 데이터의 다양성, 속도등을 함께 포함, 모바일 기기나 소셜 미디어 등에서 생산되는 비정형 데이터의 증가는 소비자의 행태를 바꾸고 있으며 이는 산업계에서 비즈니스 경쟁의 규칙조차 바꾸고 있을 정도의 기술적인 큰 부가가치이다. Hadoop은 HDFS(Hadoop distributed File System)와 분산처리 시스템인 맵리듀스(Map Reduce)를 구현한 것으로 대용량 데이터 처리 분석을 위한 대규모 분산 컴튜팅 지원 프레임워크이다 (핵심 구성 요소 : 저장과 분산처리GDFS를 통해 분산 저장하고, 맵리듀스를 통해 분산 처리 하는 프레임워크).[3].
영상통신 감성융합 서비스는 어떠한 단계를 거치는가?
영상통신 감성융합 서비스는 카메라 모듈로부터 동영상 데이터 소스에서 분석할 프레임 이미지를 캡쳐, 캡쳐한 이미지를 분석하기 쉬운 상태로 전 처리를 하는 단계를 걸친다. 이미지 분석 단계인 엣지 검출 알고리즘 등을 통한 이미지내의 객체 간 경계 파악, 전 처리된 이미지에서 얼굴을 검출하며, 학습 알고리즘 등을 적용하여 얼굴특징을 분석하고 구성 요소의 이미지상 위치와 관계 데이터를 추출, 얼굴검출 단계를 통해 추출된 인식 정보를 바탕으로 자세추정과 표정인식을 한다.
HDFS의 장점은?
이러한 Hadoop 분산파일은 하드웨어의 오동작을 최소화 하며 간단한 결합 모델로 한번 쓰고 여러 번 읽는 모델에 적합한 구조이다. 파일이 한번 작성되고 닫히면 바뀔 필요가 없는 경우를 위한 것으로 이렇게 함으로써 데이터 처리량을 극대화하여 네트워크 혼잡으로 인하여 발생되어 지는 전체 처리량을 감소화 시키며 이종의 하드웨어와 소프트웨어 플랫폼과의 호환성 및 범용파일 시스템과 달리 반응 속도보다는 시간당 처리량에 최적화하여 스트리밍 자료 접근을 용이하게 한다.[1]
AI-Helper
※ AI-Helper는 부적절한 답변을 할 수 있습니다.