초록

본 발명은 영상으로부터 손의 형상을 탐지하고, 탐지된 손의 형상을 3D CNN(end-to-end 3-convolution neural network)을 이용하여 분석함으로써 손 제스처를 인식할 수 있는 시스템으로서, 손 제스처가 포함된 깊이 영상을 획득하는 깊이영상 촬영부와, 깊이 영상을 분석하여 손가락 끝을 식별하는 손가락 추적부와, 손가락 끝이 식별된 데이터를 신경망(neural network)으로 분석하여 손 제스처를 인식하는 손짓 인식부를 포함한다.

대표청구항 ▼

손 제스처가 포함된 깊이 영상을 획득하는 깊이영상 촬영부와;상기 깊이 영상을 분석하여 손가락 끝을 식별하는 손가락 추적부와;상기 손가락 끝이 식별된 데이터를 신경망(neural network)으로 분석하여 손 제스처를 인식하는 손짓 인식부를 포함하고,상기 손가락 추적부는 손가락으로 추정되는 부위의 양편에 위치하는 제1포인트 및 제2포인트와, 상기 손가락으로 추정되는 부위의 끝단에 위치하는 제3포인트를 설정하고, 제1포인트와 제3포인트 및 제2포인트와 제3포인트를 연결하는 선분을 생성한 후, 제1포인트-제3포인트-제2포인트의 각도가

손 제스처가 포함된 깊이 영상을 획득하는 깊이영상 촬영부와;상기 깊이 영상을 분석하여 손가락 끝을 식별하는 손가락 추적부와;상기 손가락 끝이 식별된 데이터를 신경망(neural network)으로 분석하여 손 제스처를 인식하는 손짓 인식부를 포함하고,상기 손가락 추적부는 손가락으로 추정되는 부위의 양편에 위치하는 제1포인트 및 제2포인트와, 상기 손가락으로 추정되는 부위의 끝단에 위치하는 제3포인트를 설정하고, 제1포인트와 제3포인트 및 제2포인트와 제3포인트를 연결하는 선분을 생성한 후, 제1포인트-제3포인트-제2포인트의 각도가 기 설정된 범위 이내이면 상기 제2포인트가 손가락 끝인 것으로 판단하는 것을 특징으로 하는 손 제스처 인식 시스템.