$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

생체 기반 시각정보처리 동작인식 모델링
A Bio-Inspired Modeling of Visual Information Processing for Action Recognition 원문보기

정보처리학회논문지. KIPS transactions on software and data engineering. 소프트웨어 및 데이터 공학, v.3 no.8, 2014년, pp.299 - 308  

김진옥 (대구한의대학교 모바일콘텐츠학부)

초록
AI-Helper 아이콘AI-Helper

신체 동작, 얼굴 표정과 같이 아주 복잡한 생체 패턴을 인식하고 분류하는 인간의 능력을 모방한 정보처리 컴퓨팅 관련 연구가 최근 다수 등장하고 있다. 특히 컴퓨터비전 분야에서는 인간의 뛰어난 인지 능력 중 상황정보 없이 시각시퀀스에서 동작을 분류하는 기능을 통해 시공간적 패턴 코딩과 빠른 인식 방법을 이해하고자 한다. 본 연구는 비디오 시퀀스상의 동작인식에 생물학적 시각인지과정의 영향을 받은 생체 기반 컴퓨터비전 모델을 제시하였다. 제안 모델은 이미지 시퀀스에서 동작을 검출하고 시각 패턴을 판별하는 데 생체 시각처리과정의 신경망 구조 단계를 반영하였다. 실험을 통해 생체 기반 동작인식 모델이 인간 시각인지 처리의 여러 가지 속성을 고려했을 뿐 아니라 기존 동작인식시스템에 비해 시간 정합성이 뛰어나며 시간 변화에 강건한 분류 능력을 보임을 알 수 있다. 제안 모델은 지능형 로봇 에이전트와 같은 생체 기반 시각정보처리 시스템 구축에 기여할 수 있다.

Abstract AI-Helper 아이콘AI-Helper

Various literatures related computing of information processing have been recently shown the researches inspired from the remarkably excellent human capabilities which recognize and categorize very complex visual patterns such as body motions and facial expressions. Applied from human's outstanding ...

주제어

AI 본문요약
AI-Helper 아이콘 AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

  • 특히 컴퓨터비전과 로보틱스 연구에서 인지과학을 적극적으로 컴퓨터 시스템에 접목하기 위해 인간의 인지 기능과 정보 처리과정을 컴퓨터에 응용하는 방안을 모색하고 로봇에게 인간의 감정 표현 방법과 유사한 기능을 제공하기 위해 감정 매카니즘을 담당하는 뇌 영역과 신경망 간의 시간동기화에 대한 연구를 다수 제안하고 있다[3]. 또한 컴퓨터비전 연구자들은 뇌에서 어떻게 외부 시각 자극 데이터를 입력받는지, 어떤 데이터를 어떤 식으로 선택하고 뇌 내부에서 어떤 과정으로 시각정보화를 하는지에 대해 신경생리학을 통해 도출된 뇌 정보처리 기능을 컴퓨터 지능에 반영하고자 한다.
  • 본 연구는 동작 특징 추출과 동작 패턴 인식에 대해 인간의 시각정보처리 기능에 기반한 새로운 인식 방법을 제시하기 위해 기존 컴퓨터비전 동작인식 기능에 생체 시각인지 기능 특성을 반영하고 인간의 인지기능 한계를 개선한 시각인지 기능을 추가한 동작인식을 시도하였다. 동작인식 대상이 담긴 이미지시퀀스가 모두 제시되기 전에 미리 인식 분류 결과를 도출하며 입력 시퀀스의 시간변화와 속도변화에 대응해서 우수한 동작인식결과를 보임을 확인하도록 실험에서 테스트 비디오를 보고 동작을 판별할 때 비디오 시퀀스를 세분화한 후, 이를 시각적 자극으로 전달하고 처리하는 방법을 설정하여 테스트하였다.
  • 본 연구에서는 생체 시각정보처리 매카니즘을 바탕으로 비디오 시퀀스 내 동작을 효과적으로 인식하는 생체 기반 동작인식 모델을 제안하였다. 생체 시각자극 처리 매카니즘의 속성을 반영한 실험 결과, 제안 모델의 패턴 분류 방식이 일반적인 생체 시각처리 기능보다 시공간적 시퀀스를 잘 분류함을 보여주었다.
  • 생체 기반의 시각정보처리 방식을 이용한 본 연구는 동작인식에 뇌의 생체 시각처리 시스템 기능을 모방한 매카니즘을 적용하여 동작을 효과적으로 인식하는 방법을 제안하고자 한다. 뇌가 동작을 인식하는 과정을 분석한 다음 이를 컴퓨터시스템의 동작인식에 적용함으로써 컴퓨터 비전의 주요 연구주제인 동작인식 연구에 뇌의 시각 인지 능력을 모방한 기능을 접목한 것이다.
  • 연구에서 제시하는 동작인식 모델은 인간 두뇌에서 구동하는 시각인식 기능의 시간감지 속성을 반영한 시공간적 시각 시퀀스의 코딩과 판별을 목적으로 하고 있으며 비디오 시퀀스에서 추출한 몇 개의 동작 특징점으로도 동작 분류를 처리하고 3D 형태의 동작을 비디오 시퀀스의 2D 코딩을 통해 인식하여 생체 기반의 영리한 동작인식 방법을 제안함으로써 컴퓨터비전 기술 발전에 기여한다.
  • 이 실험을 통해서는 속도가 변화하는 상태에서 동작을 잘 분류하는지 확인한다. 생물학적 시각 자극처리에서는 연속 적인 단계별 패턴 분류 뿐만아니라 순간적인 패턴 분류 역시 정확하게 처리하기 때문에 제안 모델 또한 시퀀스에서 순간적으로 패턴을 분류하는지를 설명할 필요가 있다.
  • 단일 궤적은 복잡한 시퀀스를 해체하는 데 유용하기도 하지만 가장 간단한 패턴이 므로 동작의 직선 궤적 시뮬레이션의 목적인 여러 변수를 제어하면서 서로 다른 방향의 궤적을 판별하기 위함이다. 팔의 구부렸다 펴는 동작을 대상으로 동작인식을 테스트한것은 모델이 다른 속도로 여러 개의 동작 궤적을 동시에 처리할 수 있음을 설명하고 실제 이미지에 가까운 궤적을 시나리오 상에서 판별할 수 있음을 테스트하기 위해서이다.

가설 설정

  • 검출한 패턴은 패턴 분류기가 분류하도록 해당 분류 층으로 전달한다. 제안 모델구조에서는 부분 패턴 검출이 가능함을 가정하고 패턴 분류를 수행했다. 한 동작에서 동작특징들의 서로 다른 이동궤적을 확인하기 위해서는 Continuum Neural Field Theory (CNFT)[24]를 이용한 계산 모델을 적용하여 시각 신호 입력 값이 2D 뉴런 형태의 해당 감수영역에 매핑하여 분포되도록 한다.
본문요약 정보가 도움이 되었나요?

질의응답

핵심어 질문 논문에서 추출한 답변
뇌의 시각처리과정에서 도출된 생체 인식 특성은 어떻게 나타나는가? ⋅신호 강건성 : 시간적으로 신호의 양이 현저히 줄어도 점광(Point-Light)과 같은 단순한 자극만으로 시각적 패턴 분류가 잘 이루어지므로 점광과 같은 몇 개의 관심점 표시로 여러 동작을 구분할 수 있다[13][14]. ⋅시점 종속성 : 시각적 패턴 인식은 시점 각도에 달려 있다. 제시된 패턴이 회전변환하여 패턴 방향이 바뀔 경우 인식 성능은 낮아지지만 경험을 통해 학습하면 회전변환 때문에 저하된 인식성능은 개선할 수 있다. ⋅시간 민감성 : 시퀀스를 분류하는 뇌의 시각적 시퀀스 패턴 매칭은 시간의 상관관계에 아주 민감해서 시간정합성을 고려해야 한다[6]. ⋅처리 경로 : 시각 정보가 전달될 때 LGN을 통해 V1, V2를 거치는 신호는 두 경로로 나뉘어 처리한다. 운동과 깊이 자극은 배측 경로(dorsal pathway)를 통해 V5(MT) 로 전달하는 반면, 자세, 얼굴 표정, 손 자세와 같은 형태와 색깔자극은 정적 특징으로 복측 경로(ventral pathway) 를 통해 V4로 전달한다.
제안하는 동작인식 구조는 어떤 아이디어를 적용하였는가? 제안 동작인식 구조는 생체 시각인식과정에서 영향을 받은 다음 세 가지 아이디어를 적용하였다. 먼저 컴퓨터비전 동작인식 과정에 동작인식을 담당하는 주요 시각 피질 계층의 기능적 속성을 모방하였다. 두 번째, 패턴 인식 단계에서 피질계층 활성화를 모방하여 모델링하였다. 세 번째, 제안동작인식 모델의 평가를 생물학적 동작 실험데이터로 대상으로 수행하였다. 이를 위해 사람의 걷기 동작을 단일 궤적으로 인식하는 실험을 수행하고 복잡한 시공간적 시퀀스로 다양하게 구성하여 여러 상황의 동작으로 통합 인식하였다.
신경생물학적 시각처리 방법에서 인식대상의 위치가 회전변환 되면 인식성능은 어떻게 되는가? 신경생물학적 시각처리 방법에서는 인식대상의 위치가 회전변환 될 경우 인식성능이 아주 나빠진다. 반면 컴퓨터비전의 동작 패턴인식 방법은 대상의 회전변화에 아주 강건하다.
질의응답 정보가 도움이 되었나요?

참고문헌 (25)

  1. Falk Fleischer, Antonino Casile, Martin A. Giese, "Bio-inspired approach for the recognition of goal-directed hand actions," International Conference on Computer Analysis of Images and Patterns, pp.714-722, 2009. 

  2. Byoung-Jun PARK, Kyu-Sang SHIN, Myung-Ae CHUNG, Sang-Hyeob KIM, "Bio-mimetic Light Sensor Based Cognitive System Technology", Journal of the Korean Physical Society, Vol.19, No.9. pp.2-8, 2010. 

  3. M. Lagarde, P. Andry, P. Gaussier, "Distributed real time neural networks in interactive complex systems. "International conference on Soft Computing as transdisciplinary science and technology, pp.95-101, 2008. 

  4. W. A. Fellez, J. G. Talyor, "Establishing retinotopy by lateral-inhibition type homogeneous neural fields," NeuroComputing, Vol.48, pp.313-322, 2002. 

  5. E. Mingolla, "Neural models of motion integration and segmentation," Neural Networks, Vol.16, pp.939-945, 2003. 

  6. R. Blake, M. Shiffrar, "Perception of human motion," Annu. Rev. Psychol., Vol.58, pp.47-73, 2007. 

  7. R. A. Brooks, "A Robot that walks; emergent behaviors from a carefully evolved network," Neural Computation, Vol.1, No.2, pp.253-262, 1989. 

  8. G. Johansson, "Visual perception of biological motion and a model for its analysis," Perception and Psychophysics, Vol.14, No.2, pp.201-211, 1973. 

  9. C. Curio, M. Giese, "Combing view-based and model-based tracking of articulated human movements," IEEE Workshop on Motion and Video Computing, Vol.2, 2005, pp.261-268. 

  10. K. Schindler, L. van Gool, "Action snippets: How many frames does human action recognition require?," Computer Vision and Pattern Recognition, pp.1-8, 2008. 

  11. C. Harris, M. Stephens, "A combined corner and edge detector," Albey vision conference, 1988, pp.147-152. 

  12. I. Laptev, "On space-time interest points", International Journal of Computer Vision, Vol.64, No.2, pp.107-123, 2005. 

  13. M. A. Giese, T. Poggio, "Neural mechanisms for the recognition of biological movements," Nat. Rev. Neurosci., Vol.4, pp.179-192, 2003. 

  14. A. Casile, M. A. Giese, "Critical features for the recognition of biological motion," Journal of Vision, Vol.5, No.4, pp. 348-360, 2005. 

  15. A. Puce, D. Perrett, "Electrophysiology and brain imaging of biological motion," Philosophical Transactions of the Royal Society of London, Series B. Vol.358, pp.435-445, 2003. 

  16. K. Fugushima, S. Miyake, T. Ito, "Neocongnitron: A Neural Network Model for a Mechanism of Visual Pattern Recognition," IEEE Trans. on System. Man and Cybernetics, Vol.13, No.5, pp.826-834, 1993. 

  17. T. B. Moeslund, E. Granum, "A survey of computer vision-based human motion capture," Computer Vision and Image Understanding, Vol.81, No.3, pp.231-268, 2001. 

  18. R. Sekuler, S. N. J. Watamaniuk, R. Blake, "Motion Perception," Steven's Handbook of Experimental Psychology, Vol.1, pp.121-176, 1998. 

  19. JinOk Kim, "Effective Pose-based Approach with Pose Estimation for Emotional Action Recognition," The KIPS Transactions: Part B, Vol.2, No.3, pp.1-10, 2013. 

  20. JinOk Kim, "Agent's Activities based Intention Recognition Computing," The KSII Transactions, Vol.13, No.2, pp.87-98, 2012. 

  21. JinOk Kim, "A Study on Visual Perception based Emotion Recognition using Body-Activity Posture," The KIPS Transactions, Part B, Vol.18, No.5, pp.305-314, 2011. 

  22. http://www.helpautismnow.com/Understanding_Children_With_Autism_PP.pdf 

  23. N. Rougier, J. Vitay, "Emergence of Attention within a Neural Population," Neural Networks, Vol.19, pp.573-581, 2006. 

  24. X. Xie, M. A. Giese, "Nonlinear dynamics of directionselective recurrent neural media," Physical Review E-statistical, nonlinear and soft matter physics, Vol.65, No.1, pp.1-11, 2002. 

  25. I. Ahmad, W Zheng, J. Luo, M. Liou, "A fast adaptive motion estimation algorithm," IEEE Trans. on Circuits and Systems for Video Technology, Vol.16, No.3, pp.420-438, 2006. 

관련 콘텐츠

오픈액세스(OA) 유형

BRONZE

출판사/학술단체 등이 한시적으로 특별한 프로모션 또는 일정기간 경과 후 접근을 허용하여, 출판사/학술단체 등의 사이트에서 이용 가능한 논문

이 논문과 함께 이용한 콘텐츠

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로