초록

본 발명은 아바타를 생성함에 있어서, 아바타의 얼굴 영역과 아바타의 얼굴 영역과 인접하는 주변 영역(예를 들어 아바타의 신체를 포함하는 영역)의 합성을 구분하여 수행함으로써 얼굴뿐만 아니라 몸동작이 자연스러운 아바타를 생성할 수 있는 아바타 생성 방법 및 장치에 관한 것 이다.

대표청구항 ▼

컴퓨팅 장치를 이용한 아바타 생성에 있어서 상기 아바타의 얼굴 영역과 상기 아바타의 얼굴 영역과 인접하는 주변 영역의 합성을 구분하여 수행하는 아바타 생성 방법에 있어서, 복수의 프레임을 포함하고 상기 아바타의 움직임을 제공하는 모션 소스 영상에서 합성 대상 프레임을 결정하는 단계;상기 아바타의 얼굴을 포함하는 타겟 이미지를 획득하는 단계;학습된 제1 인공 신경망을 이용하여, 상기 합성 대상 프레임 내의 제1 얼굴 영역 및 상기 타겟 이미지 내의 제2 얼굴 영역으로부터 제3 얼굴 영역을 생성하는 단계; 및학습된 제2 인공 신경망을

컴퓨팅 장치를 이용한 아바타 생성에 있어서 상기 아바타의 얼굴 영역과 상기 아바타의 얼굴 영역과 인접하는 주변 영역의 합성을 구분하여 수행하는 아바타 생성 방법에 있어서, 복수의 프레임을 포함하고 상기 아바타의 움직임을 제공하는 모션 소스 영상에서 합성 대상 프레임을 결정하는 단계;상기 아바타의 얼굴을 포함하는 타겟 이미지를 획득하는 단계;학습된 제1 인공 신경망을 이용하여, 상기 합성 대상 프레임 내의 제1 얼굴 영역 및 상기 타겟 이미지 내의 제2 얼굴 영역으로부터 제3 얼굴 영역을 생성하는 단계; 및학습된 제2 인공 신경망을 이용하여, 상기 제3 얼굴 영역, 상기 합성 대상 프레임 내에서 상기 제1 얼굴 영역을 제외한 영역인 제1 주변 영역 및 상기 타겟 이미지 내에서 상기 제2 얼굴 영역을 제외한 영역인 제2 주변 영역으로부터 제3 주변 영역과 상기 제3 얼굴 영역이 결합 된 출력 프레임을 생성하는 단계;를 포함하는, 아바타 생성 방법.