초록 ▼

□ 연구개발 목표 및 내용
◎ 최종 목표
○ 가려짐, 혼잡, 겹침 등의 상황이 빈번하게 발생하는 무인점포 환경에서 이상행위를 인지하기 위한 2D/3D Depth 듀얼 카메라 및 2D/3D 영상 통합 분석을 이용한 클라우드 AI 기반 지능형 영상보안시스템 개발 및 실증
- [2D/3D Depth 듀얼 카메라 개발] 2D/3D 영상을 IP 기반으로 동시에 취득하기 위한 듀얼 카메라 기술 개발
- [2D/3D 영상 통합 분석 기반 지능형 영상보안 분석 기술] 가려짐, 혼잡, 겹침 등의 상황이 빈번하게 발생하는 무인점

□ 연구개발 목표 및 내용
◎ 최종 목표
○ 가려짐, 혼잡, 겹침 등의 상황이 빈번하게 발생하는 무인점포 환경에서 이상행위를 인지하기 위한 2D/3D Depth 듀얼 카메라 및 2D/3D 영상 통합 분석을 이용한 클라우드 AI 기반 지능형 영상보안시스템 개발 및 실증
- [2D/3D Depth 듀얼 카메라 개발] 2D/3D 영상을 IP 기반으로 동시에 취득하기 위한 듀얼 카메라 기술 개발
- [2D/3D 영상 통합 분석 기반 지능형 영상보안 분석 기술] 가려짐, 혼잡, 겹침 등의 상황이 빈번하게 발생하는 무인점포 환경에서 2D/3D 영상 통합 분석을 이용하여 이상행위 이벤트를 검출
- [클라우드 기반 무인점포 대응형 지능형 영상보안시스템 개발] 무인점포의 협소한 공간과 경비 절약을 위한 비디오 판독을 위한 클라우드 서버 시스템, 성능을 향상하되 합리적인 가격으로 제공할 수 있는 2D/3D Depth 비디오 처리 기술, 비디오 송수신이 개인정보를 보호할 수 있는 마스킹 기술과 영상반출 보안 기술을 개발하고, 무인점포 관리자 및 관련 공공기관(화재, 경찰, 점주 등)에 긴급구조 요청할 수 있는 지능형 영상보안 시스템을 설계하고 관련된 핵심기술을 개발
- [상용화를 위한 무인점포 수요기관을 통한 실증] 수요기업의 애로사항을 분석하여 핵심기술을 개발하고, 개발된 기술을 이용한 상용화 제품을 무인점포에서 실증

◎ 전체 내용
○ End Product
- 2D/3D 영상 취득용 듀얼카메라 (HW)
- 2D 영상 기반 이상행위 분석 알고리즘(SW)
- 3D 영상 기반 이상행위 분석 알고리즘(SW)
- 2D/3D 영상 정보기반 이상행위 인지 통합 신경망 알고리즘(SW)
- 학습데이터 증대 기술(SW)
- 클라우드 기반 영상분석 시스템(SYS)
- 2D/3D 카메라 VMS 연동 기술(SW)
- 이상행위 영상분석 모델 학습 데이터 구축 및 저장 서버(SW)
- 이상행위 이벤트 처리 및 영상 표출 서버(서버탑재형SW)
○ 핵심기술
- 2D 영상 기반 이상 행위 인지 기술
- 3D Depth 영상 기반 이상 행위 인지 기술
- 실내환경 다중 객체 추적 기술(세계 Top 1)
- 클라우드 기반 영상 분석 처리 기술
- 2D / 3D Depth 영상 기반 통합 신경망 모델 기술 개발(세계 최초)
- 2D / 3D Depth 영상 보안 시스템 연동 기술
- 2D / 3D Depth 영상 보안 시스템 기술 표준화
○ 주요 성능치
○ 적용범위(또는 서비스)
- 무인점포 내 위험상황 인지를 위한 클라우드 기반 영상 보안 서비스
- 2D/3D Depth 카메라를 이용한 지능형 객체 추적 시스템
- 개인정보 보호 및 검색 등에 활용 가능한 VMS 영상 보안 시스템

◎ 1차년도
● 목표
○ 2D/3D Depth 카메라 영상기반 무인점포 내 이상행위 인지 기술 설계 및 수요기관에 대한 영상 보안 요구사항 분석

● 내용
- 2D/3D Dual 이미지 센서 탑재 IP Camera 설계 및 개발
- 2D/3D Depth 영상 분석 기반 이상 행위 인지 기술 설계
- 휴먼 객체 검출 및 자세 추정 기술 개발
- 편의점형 무인점포 환경에서 영상 보안 요구사항 분석
- 카페형 무인점포 환경에서 영상 보안 요구사항 분석

◎ 2차년도
● 목표
○ 2D/3D 영상기반 이상행위 인지 핵심 기술 개발 및 클라우드 기반 영상보안 플랫폼 구축

● 내용
- 2D/3D 듀얼 IP 카메라 기구 제작 및 시작품 개발
- 2D 영상 분석 기반 이상 행위 인지 핵심 기술 개발 및 클라우드 영상 보안 플랫폼 구축 및 실증 설계
- 3D Depth 영상 분석 기반 이상 행위 인지 핵심 기술 개발
- 다수 휴먼 객체 추적 기술 개발
- 편의점형 무인점포 테스트 환경 구축 방안 도출
- 카페형 무인점포 테스트 환경 구축 방안 도출

◎ 3차년도
● 목표
○ 클라우드 기반 영상보안 플랫폼 구축을 위한 핵심기술 통합 및 무인 점포 실증

● 내용
- 2D/3D 듀얼 IP 카메라 시제품 개발 및 테스트 베드 연동
- 2D/3D 영상 기반 이상 행위 인지 시스템 통합 및 고도화
- 2D/3D 영상 기반 이상 행위 인지 시스템 통합 및 실증
- 다수 휴먼 객체 추적 기술 고도화
- 편의점형 무인점포 대응형 영상 보안 시스템 실증 및 지원
- 카페형 무인점포 대응형 영상 보안 시스템 실증 및 지원

□ 연구개발성과
2D영상과 3D Depth 영상을 활용한 이상행위에 대한 정확도 개선을 통한 무인점포 내에서 범죄예방 및 적발 및 지능형 영상 보안 기술에 대한 국가적 경쟁력 확보

□ 연구개발성과 활용계획 및 기대 효과
○ 연구개발 성과물 및 활용계획
- 2D/3D 듀얼 카메라
● 개발되는 2D/3D 듀얼 카메라는 영상 전송 방식이 IP 기반으로 수행되어, 기존에 IP 카메라와 동일하게 이용함에 따라 기존에 구축된 영상보안시스템에 적용되어 정확도 개선에 기여
- 클라우드 기반 지능형 영상 보안 플랫폼
● 공간이 협소하여 별도의 서버 설치가 어려운 장소에 대해 카메라 설치만으로 딥러닝 기반의 영상 분석이 가능
● 클라우드 형태의 서비스는 영상 및 데이터를 클라우드에 저장하기 때문에 보안이 중요시되는 곳에 효율적
- 다중 객체 추적 시스템
● 영상에서의 자동 객체 인식 및 추적 기술을 통한 무인 감시 및 범죄 발생 시 인물에 대한 동선 추적 서비스 등에 활용 가능
- 3D Depth 영상 분석 기반 이상행위 탐지 솔루션
● 무인점포와 같은 실내 환경에서 혼잡 및 겹침 상황이 자주 발생할 경우, 기존 RGB 기반 영상 분석 기술과 연계하여 사용 가능

○ 기대효과
- [기술적] 무인점포 환경 지능형 영상 보안 기술에 대한 국가적 경쟁력 확보 가능
- [기술적] 무인점포 환경 객체 검출 및 추적 정확도 향상을 위한 3D Depth 카메라 기술 선제적 확보 가능
- [기술 및 경제적] 클리우드 기반 영상보안 플랫폼을 통한 영상 보안 및 가격 경쟁력 향상 기대
- [경제 및 사회적] 무인점포 내 범죄, 이상행위에 대한 초기대응으로 경제적 비용 절감 및 사회 안전망 강화
- [경제적] 인공지능 기반 클라우드 서비스 및 핵심 기술 개발로 4차 산업관련 신일자리 창출 가능

(출처 : 요약문 3p)

목차 Contents

• 표지 ... 1
• 최종보고서 ... 2
• 요 약 문 ... 3
• 목차 ... 6
• 1. 연구개발과제의 개요 ... 7
• 가. 연구개발과제 개념 및 필요성 ... 7
• 나. 최종 목표 ... 8
• 2. 연구개발과제의 수행 과정 및 수행 내용 ... 10
• 3. 연구개발과제의 수행 결과 및 목표 달성 정도 ... 113
• 1) 연구수행 결과 ... 113
• 2) 목표 달성 수준 ... 141
• 4. 목표 미달 또는 미흡한 사항에 대한 원인분석 ... 143
• 5. 연구개발성과의 관련 분야에 대한 기여 정도 ... 144
• 6. 연구개발성과의 관리 및 활용 계획 ... 147
• 1) 향후 5년간 성과활용·확산 활용방안 및 계획(활동계획) ... 147
• 2) 주요 성과활용 (기대)성과목표 ... 148
• 3) 성과활용·관리 추진체계 ... 149
• 4) 기타 ... 149
• 7. 연구개발성과에 대한 후속연구 및 추가 개발 계획 ... 151
• 8. 연구개발비 사용실적 ... 152
• 가. 총괄 ... 152
• 나. 주관연구개발기관(㈜마크애니) ... 153
• 다. 공동연구개발기관(한국전자기술연구원) ... 154
• 라. 공동연구개발기관(광운대학교 산학협력단) ... 155
• 마. 공동연구개발기관(㈜이오씨) ... 156
• 바. 공동연구개발기관(씨제이올리브영㈜) ... 157
• 사. 공동연구개발기관(㈜베스코) ... 158
• 끝페이지 ... 159