초록

본 발명의 실시 예에 따르면, 생성형 AI 모델을 이용한 동적 객체 제거 및 인페인팅 서비스 제공 서버가 개시된다. 또한, 상기 서버는, 이미지 세그멘테이션 모델 및 비디오 오브젝트 세그멘테이션 모델을 이용해 비디오의 입력 프레임 각각의 타겟객체를 탐지하는 객체 분할부; 및 인페인팅 모델을 이용해 비디오의 입력 프레임 각각의 타겟객체의 영역을 제거하고, 제거된 영역이 복원된 출력 프레임을 생성하는 인페인팅부를 포함한다.

대표청구항 ▼

생성형 AI 모델을 이용한 동적 객체 추적, 인페인팅 및 아웃페인팅 서비스 제공 서버로서,이미지 세그멘테이션 모델 및 비디오 오브젝트 세그멘테이션 모델을 이용해 비디오의 입력 프레임 각각의 타겟객체를 탐지하는 객체 분할부; 및 사용자 단말로부터 확장영역을 수신하고, 아웃페인팅 모델에 입력 이미지, 확장영역, 입력 프롬프트 및 네거티브 프롬프트를 입력 값으로 입력하며, 아웃페인팅 모델로부터 입력 값에 대한 출력 이미지를 획득하는 아웃페인팅부를 포함하고,상기 객체 분할부는, 이미지 세그멘테이션 모델을 이용해 비디오의 첫 프레임인 제1

생성형 AI 모델을 이용한 동적 객체 추적, 인페인팅 및 아웃페인팅 서비스 제공 서버로서,이미지 세그멘테이션 모델 및 비디오 오브젝트 세그멘테이션 모델을 이용해 비디오의 입력 프레임 각각의 타겟객체를 탐지하는 객체 분할부; 및 사용자 단말로부터 확장영역을 수신하고, 아웃페인팅 모델에 입력 이미지, 확장영역, 입력 프롬프트 및 네거티브 프롬프트를 입력 값으로 입력하며, 아웃페인팅 모델로부터 입력 값에 대한 출력 이미지를 획득하는 아웃페인팅부를 포함하고,상기 객체 분할부는, 이미지 세그멘테이션 모델을 이용해 비디오의 첫 프레임인 제1 기준 프레임의 관심영역에 포함된 타겟객체와 대응되는 마스크를 생성하고, 제1 기준 프레임의 마스크 및 비디오 오브젝트 세그멘테이션 모델을 이용해 비디오의 나머지 프레임에서 타겟객체의 영역과 대응되는 마스크를 생성하며,상기 아웃페인팅부는, 입력 이미지에 포함된 객체를 객체 및 타겟객체를 네거티브 워드 생성 모델에 입력 값으로 입력하고, 네거티브 워드 생성 모델로부터 객체 및 타겟객체에 대응하는 네거티브 워드를 획득하며, 네거티브 워드를 이용해 네거티브 프롬프트를 생성하는, 서버.