초록

본 발명은 모션센서를 연동시킨 카드게임을 만들어 인지 재활훈련을 하되 카메라에서 받아오는 영상 중 손만 보이도록 영상처리 하고 모션센서와 상호작용함으로 가상현실과 증강현실이 조합된 혼합현실을 구현하여 몰입도를 증가시키며, 노인 인지 재활에 초점을 맞춰 친숙한 카드이미지를 적용하여 재활훈련에 거부감을 줄일 수 있는 치매예방 및 경도인지장애 재활훈련을 위한 모션센서 및 카메라 기반의 증강현실 시스템에 관한 것이다.

대표청구항 ▼

사용자의 손을 포함하는 동작영역을 촬영하는 캠모듈(110);상기 캠모듈(110)과 다른 방향에서 상기 동작영역을 촬영하여 사용자의 손동작을 인식하는 모션감지모듈(120);컨텐츠 및 유저인터페이스관련 영상을 출력하는 디스플레이모듈(130);인지재활을 위한 컨텐츠 데이터와 상기 컨텐츠 데이터에 대응하는 이미지 및 배경이미지와 유저인터페이스가 저장되는 저장부(141)와, 상기 캠모듈(110)을 통해 촬영된 영상의 손 부분을 제외한 배경을 삭제하고 상기 배경이미지를 합성하여 출력시키는 영상처리부(142)와, 출력되는 컨텐츠 및 유저인터페이

사용자의 손을 포함하는 동작영역을 촬영하는 캠모듈(110);상기 캠모듈(110)과 다른 방향에서 상기 동작영역을 촬영하여 사용자의 손동작을 인식하는 모션감지모듈(120);컨텐츠 및 유저인터페이스관련 영상을 출력하는 디스플레이모듈(130);인지재활을 위한 컨텐츠 데이터와 상기 컨텐츠 데이터에 대응하는 이미지 및 배경이미지와 유저인터페이스가 저장되는 저장부(141)와, 상기 캠모듈(110)을 통해 촬영된 영상의 손 부분을 제외한 배경을 삭제하고 상기 배경이미지를 합성하여 출력시키는 영상처리부(142)와, 출력되는 컨텐츠 및 유저인터페이스 영상에 대응하여 상기 모션감지모듈(120)을 통해 인식된 손동작을 실행중인 컨텐츠 내용에 대응하여 처리 및 반영하는 동작처리부를 구비하는 제어모듈(140); 로 이루어지되,상기 동작영역 측으로 사용자의 손과 모션감지모듈(120) 사이에 위치하는 투명재질의 터치판(102); 을 더 포함하고,상기 모션감지모듈(120)은, 복수의 적외선카메라(121) 및 적외선 광원(122)으로 이루어지되, 상기 적외선카메라(121)에서 촬영된 손의 움직임을 추적하여 손 모델 3D 맵을 형성하는 모델형성부(123)와, 상기 손 모델의 검지에 가상의 충돌체를 추가하여 상기 터치판(102)에 손이 접촉되는 것을 감지하는 작용감지부(124)를 더 포함하는 것을 특징으로 하는 모션센서 및 카메라 기반 증강현실 시스템.