초록

본 발명의 실시예에 따른 관심영역을 이용한 운전자 모니터링 시스템은, 차량 실내의 영상을 촬영하는 카메라 모듈, 상기 카메라 모듈에서 촬영된 영상에서 얼굴의 위치와 윤곽을 갖는 얼굴데이터를 검출하는 얼굴데이터 검출부, 상기 얼굴데이터 검출부에서 검출된 얼굴데이터를 저장하는 데이터 저장부, 저장된 얼굴데이터를 기초로 관심영역을 설정하는 관심영역 설정부 및 상기 관심영역 설정부에서 설정된 관심영역에서 수집된 데이터를 이용하여 운전자의 상태를 판단하는 운전자 상태 판단부를 포함할 수 있다.

대표청구항 ▼

차량 실내의 영상을 촬영하는 카메라 모듈; 상기 카메라 모듈에서 촬영된 영상에서 얼굴의 위치와 윤곽을 갖는 얼굴데이터를 검출하는 얼굴데이터 검출부; 상기 얼굴데이터 검출부에서 검출된 얼굴데이터를 저장하는 데이터 저장부; 저장된 얼굴데이터를 기초로 관심영역을 설정하는 관심영역 설정부; 및 상기 관심영역 설정부에서 설정된 관심영역에서 수집된 데이터를 이용하여 운전자의 상태를 판단하는 운전자 상태 판단부; 를 포함하고, 상기 저장된 얼굴데이터로부터 운전자와 동승자를 구별하는 운전자 판단부를 더 포함하며, 상기 관심영역 설정부는, 상기 카

차량 실내의 영상을 촬영하는 카메라 모듈; 상기 카메라 모듈에서 촬영된 영상에서 얼굴의 위치와 윤곽을 갖는 얼굴데이터를 검출하는 얼굴데이터 검출부; 상기 얼굴데이터 검출부에서 검출된 얼굴데이터를 저장하는 데이터 저장부; 저장된 얼굴데이터를 기초로 관심영역을 설정하는 관심영역 설정부; 및 상기 관심영역 설정부에서 설정된 관심영역에서 수집된 데이터를 이용하여 운전자의 상태를 판단하는 운전자 상태 판단부; 를 포함하고, 상기 저장된 얼굴데이터로부터 운전자와 동승자를 구별하는 운전자 판단부를 더 포함하며, 상기 관심영역 설정부는, 상기 카메라 모듈이 작동되면 상기 관심영역 설정이 완료되었는지를 판단하고, 상기 관심영역의 설정이 완료되지 않은 것으로 판단되면, 상기 저장된 얼굴데이터에 대한 히스토그램 정보 중 가장 큰 빈도값을 가지는 위치를 운전자의 정자세에서의 얼굴위치로 판단하고, 상기 얼굴위치에서 소정의 얼굴크기 값을 갖는 데이터를 운전자 영역으로 판단하고, 운전자의 행동반경 데이터를 고려하여 상기 운전자영역을 상하좌우 소정의 크기로 키워 상기 관심영역을 설정하되, 상기 운전자의 얼굴데이터에 대한 히스토그램 정보에 포함된 얼굴의 위치 및 윤곽 데이터를 이용하여 관심영역을 설정하며,상기 운전자 상태 판단부는, 상기 카메라 모듈에서 촬영된 영상데이터 중 상기 설정된 관심영역을 추출하고, 추출된 관심영역에서 추출된 운전자의 얼굴데이터를 분석하며, 상기 카메라 모듈은 적외선카메라와 조명을 포함하고, 상기 운전자 상태 판단부는,상기 카메라 모듈에 의해서 촬영된 얼굴데이터에서 미리 설정된 특징점들에 대한 데이터를 검출하여 상기 특징점들의 이동특성을 이용해 판단되는 운전자 얼굴의 피치(pitch), 요(yaw) 및 롤(roll) 상태, 운전자의 시선, 눈의 깜박거림, 얼굴 표정, 흡연 및 음식섭취를 포함하는 운전자의 상태 정보를 이용하여 판단되는 운전상태에 기초하여 운전 상황을 판단함으로써 운전자에게 경고하는 관심영역을 이용한 운전자 모니터링 시스템.