초록 ▼

본 발명은 증강현실이나 가상현실에서 실제공간에 최적화된 음향을 출력하는 사운드제어시스템에 관한 것으로, 사용자가 실제로 위치하는 공간정보와, 해당공간에서의 사용자 위치정보를 실시간 추적하는 인식부(10); 상기 인식부(10)로부터 검출된 실제 공간정보와 위치정보 및 컨텐츠로부터 송신되는 소스정보를 입력받아 좌표로 변환하는 연산부(20); 상기 송신되는 실제 및 가상의 공간정보 및 객체정보를 서로 합성하여 실제공간에서의 최적화된 객체의 절대위치 좌표를 생성하는 해석부(30); 상기 해석부(30)에 의해 생성된 객체의 절대위치 좌표를

본 발명은 증강현실이나 가상현실에서 실제공간에 최적화된 음향을 출력하는 사운드제어시스템에 관한 것으로, 사용자가 실제로 위치하는 공간정보와, 해당공간에서의 사용자 위치정보를 실시간 추적하는 인식부(10); 상기 인식부(10)로부터 검출된 실제 공간정보와 위치정보 및 컨텐츠로부터 송신되는 소스정보를 입력받아 좌표로 변환하는 연산부(20); 상기 송신되는 실제 및 가상의 공간정보 및 객체정보를 서로 합성하여 실제공간에서의 최적화된 객체의 절대위치 좌표를 생성하는 해석부(30); 상기 해석부(30)에 의해 생성된 객체의 절대위치 좌표를 바탕으로 추적된 객체의 위치에서 최적화된 사운드 제어정보를 생성하는 제어부(40); 상기 제어정보를 바탕으로 컨텐츠로부터 출력되는 음원신호를 스피커의 채널별로 볼륨을 조절하는 구동부(50);를 포함하여 이루어지는 것을 특징으로 한다.따라서 본 발명은 사용자가 실제 위치하는 공간과 위치추적을 통해 별다른 직접적인 조작 없이도 사용자에게 실시간으로 입체 음향을 전달할 수 있으며, 이로 인해 현실의 공간 내에서도 가상의 물체 및 공간과 상호작용하는 것이 가능함에 따라 마치 가상의 객체가 현실에 실제로 존재하는 사실감과 현실과 가상이 융합된 혼합세계에 속해 있는 몰입감을 제공할 수 있는 효과가 있다.

대표청구항 ▼

증강현실이나 가상현실에서 최적화된 음향을 출력하는 사운드제어시스템에 있어서,사용자가 실제로 위치하는 공간정보와, 해당공간에서의 사용자 위치정보를 실시간 추적하는 인식부(10);상기 인식부(10)로부터 검출된 실제 공간정보와 위치정보 및 컨텐츠로부터 송신되는 소스정보를 입력받아 좌표로 변환하는 연산부(20);상기 연산부(20)로부터 송신되는 실제 및 가상의 공간정보 및 객체정보를 서로 합성하여 실제공간에서의 최적화된 객체의 절대위치 좌표를 생성하는 해석부(30);상기 해석부(30)에 의해 생성된 객체의 절대위치 좌표를 바탕으로 추적된

증강현실이나 가상현실에서 최적화된 음향을 출력하는 사운드제어시스템에 있어서,사용자가 실제로 위치하는 공간정보와, 해당공간에서의 사용자 위치정보를 실시간 추적하는 인식부(10);상기 인식부(10)로부터 검출된 실제 공간정보와 위치정보 및 컨텐츠로부터 송신되는 소스정보를 입력받아 좌표로 변환하는 연산부(20);상기 연산부(20)로부터 송신되는 실제 및 가상의 공간정보 및 객체정보를 서로 합성하여 실제공간에서의 최적화된 객체의 절대위치 좌표를 생성하는 해석부(30);상기 해석부(30)에 의해 생성된 객체의 절대위치 좌표를 바탕으로 추적된 객체의 위치에서 최적화된 사운드 제어정보를 생성하는 제어부(40);상기 제어부(40)로부터 제어신호를 바탕으로 컨텐츠로부터 출력되는 음원신호를 스피커의 채널별로 볼륨을 조절하는 구동부(50);를 포함하여,상기 인식부(10)는 사용자가 실제로 위치하는 공간정보와 함께 사용자의 위치와 방향을 입체적으로 인식하는 깊이카메라(11)로 구성되어, 촬영된 영상을 기반으로 3차원 좌표로 환원되게 되고, 실시간 촬영된 RGB 영상은 AR 컨텐츠로 전송되며,상기 해석부(30)는 컨텐츠의 이미지소스를 로드하여 광선추적기법으로 사운드 광선의 경로좌표를 생성하고, 생성된 경로좌표를 검증하여 최종적인 전파좌표를 설정하며,상기 제어부(40)는 음원신호를 임펄스 응답(Finite Impulse Response)필터와의 콘볼루션(convolution) 연산을 통해 공간 정보를 가지는 사운드를 합성하며, 현재 재생되고 있는 프레임에 대한 정보를 수집하고, 오디오를 조절하는 부분은 렌더중인 프레임에 대한 출력값과 수집된 프레임에 대한 출력값을 보정하여 예측되는 미래의 프레임에 대한 출력을 미리 수행하고,상기 인식부(10)는 사용자의 움직임에 따라 발생하는 머리방향의 변화를 추적하는 지자기센서, 가속도센서, 자이로센서를 구비하여, 상기 자이로센서에서 추출되는 각속도 값을 통해 가속도센서의 피치(pitch)와 롤(roll) 값을 지자기센서와 칼만 필터(Kalman Filter)로 여과하여 정밀한 값을 추출하는 것을 특징으로 하는 증강현실 및 가상현실에서의 입체 음향효과를 구현하는 사운드제어시스템.