초록 ▼

본 발명은 방송 콘텐츠와 같이 배경음악과 음성신호와 같은 기타 소리신호가 혼합된 혼합신호 중, 배경음악을 분리할 수 있는 배경음악 분리 시스템에 관한 것으로, 배경음악과 소리신호가 혼합된 혼합신호를 입력받아 STFT하여, 상기 혼합신호의 스펙트로그램과 위상을 출력하는 STFT부, 상기 STFT부에서 출력한 상기 스펙트로그램 신호를 입력받아, Densenet 신경망 모델을 이용하여, 상기 배경음악의 마스크를 추정하는 처리부 및 상기 처리부에서 추정된 마스크와 상기 혼합신호의 스펙트로그램을 합성곱하여 분리신호를 출력하고, 상기 분리신호

본 발명은 방송 콘텐츠와 같이 배경음악과 음성신호와 같은 기타 소리신호가 혼합된 혼합신호 중, 배경음악을 분리할 수 있는 배경음악 분리 시스템에 관한 것으로, 배경음악과 소리신호가 혼합된 혼합신호를 입력받아 STFT하여, 상기 혼합신호의 스펙트로그램과 위상을 출력하는 STFT부, 상기 STFT부에서 출력한 상기 스펙트로그램 신호를 입력받아, Densenet 신경망 모델을 이용하여, 상기 배경음악의 마스크를 추정하는 처리부 및 상기 처리부에서 추정된 마스크와 상기 혼합신호의 스펙트로그램을 합성곱하여 분리신호를 출력하고, 상기 분리신호와 상기 STFT부에서 출력된 위상을 이용해 inverse STFT하여, 상기 혼합신호에 혼합된 배경음악을 복원하는 복원부를 포함하되, 상기 처리부는, 입력되는 신호를 dilated 합성곱하여 출력하는 dilated블록과, 상기 dilated블록의 후단에 연결되되, 연속된 구조의 composite function으로 구성되어 상기 dilated블록의 출력신호를 입력받아 각 단계별 composite function의 입력과 출력을 서로 연결해 출력하는 dense블록으로 구성되는 dilated dense블록을 포함하는 것을 특징으로 한다.

대표청구항 ▼

배경음악과 소리신호가 혼합된 혼합신호를 입력받아 STFT(Short-term Fourier Transform)하여, 상기 혼합신호의 스펙트로그램과 위상을 출력하는 STFT부;상기 STFT부에서 출력한 상기 스펙트로그램 신호를 입력받아, Densenet(Densely Connected Convolutional Networks) 신경망 모델을 이용하여, 상기 배경음악의 마스크를 추정하는 처리부; 및상기 처리부에서 추정된 마스크와 상기 혼합신호의 스펙트로그램을 합성곱하여 분리신호를 출력하고, 상기 분리신호와 상기 STFT부에서 출력된 위

배경음악과 소리신호가 혼합된 혼합신호를 입력받아 STFT(Short-term Fourier Transform)하여, 상기 혼합신호의 스펙트로그램과 위상을 출력하는 STFT부;상기 STFT부에서 출력한 상기 스펙트로그램 신호를 입력받아, Densenet(Densely Connected Convolutional Networks) 신경망 모델을 이용하여, 상기 배경음악의 마스크를 추정하는 처리부; 및상기 처리부에서 추정된 마스크와 상기 혼합신호의 스펙트로그램을 합성곱하여 분리신호를 출력하고, 상기 분리신호와 상기 STFT부에서 출력된 위상을 이용해 inverse STFT하여, 상기 혼합신호에 혼합된 배경음악을 복원하는 복원부;를 포함하되,상기 처리부는, 입력되는 신호를 dilated 합성곱(Convolution)하여 출력하는 dilated블록과, 상기 dilated블록의 후단에 연결되되, 연속된 구조의 composite function으로 구성되어 상기 dilated블록의 출력신호를 입력받아 각 단계별 composite function의 입력과 출력을 서로 연결해 출력하는 dense블록으로 구성되는 dilated dense블록을 포함하는 것을 특징으로 하는 배경음악 분리 시스템.