$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

3차원 시각 주의 모델과 이를 이용한 무참조 스테레오스코픽 비디오 화질 측정 방법
3D Visual Attention Model and its Application to No-reference Stereoscopic Video Quality Assessment 원문보기

Journal of the Institute of Electronics and Information Engineers = 전자공학회논문지, v.51 no.4, 2014년, pp.110 - 122  

김동현 (연세대학교 전기전자공학과) ,  손광훈 (연세대학교 전기전자공학과)

초록
AI-Helper 아이콘AI-Helper

최근 사용자에게 직접 입체감을 제공하는 3차원 영상기술에 대한 관심이 증대함에 따라 스테레오스코픽 비디오 화질 측정기술개발은 중요한 주제로 많은 연구자에게 관심을 받고 있다. 특히, 스테레오스코픽 비디오 화질 측정에 중요한 역할을 하는 인간시각특성을 고려한 연구가 활발히 진행되지 않고 있어 본 논문에서 스테레오스코픽 비디오를 시청할 때 자극되는 다수의 인간시각특성 요소인 깊이, 움직임, 컬러, 휘도, 대조 등을 고려하여 3차원 시각 주의 모델을 제안한다. 또한, 본 논문에서는 실제 3차원 영상 특정 영역의 화질 열화 정도를 측정하는데 제안된 3차원 시각 주의 모델을 사용하여 무참조 스테레오스코픽 비디오 화질 측정 방법을 제안하였다. 제안 방법을 검증하기 위해 주관평가를 실시하여 기존의 스테레오스코픽 비디오 화질 측정 방법보다 평균 평가점에서 더 높은 연관성을 보였다. 게다가, 3차원 시각 주의 모델을 이용하여 스테레오스코픽 비디오의 관심영역 추출 결과는 공간적, 시간적 요소를 고려하여 추출된 관심영역에 비해 실제 관심영역과 더욱 유사함을 주관적으로 보여 제안 방법의 효율성을 보였다.

Abstract ▼ AI-Helper 아이콘AI-Helper

As multimedia technologies develop, three-dimensional (3D) technologies are attracting increasing attention from researchers. In particular, video quality assessment (VQA) has become a critical issue in stereoscopic image/video processing applications. Furthermore, a human visual system (HVS) could ...

주제어

#3D Visual Attention Model   #No-reference (NR) stereoscopic video quality assessment   #Region-of-interest (ROI) extraction   #Subjective video evaluation  

참고문헌 (39)

  1. H. Lee, "3D video and human factors," Journal of The Institute of Electronics Engineers of Korea, Vol. 37, no. 9, pp. 84-92, September 2010. 

  2. Z. Wang and A. C. Bovik, "Mean squared error: Love it or leave it? A new look at signal fidelity measures," IEEE Signal Processing Magazine, Vol. 26, no. 1, pp. 98-117, January 2009. 

    상세보기

  3. Z. Wang, A. C. Bovik, H. R. Sheikh and E. P. Simoncelli, "Image quality assessment: From error visibility to structural similarity," IEEE Trans. on Image Processing, Vol. 13, no. 4, pp. 600-612, April 2004. 

    상세보기 crossref

  4. Z. Wang, and X. Shang, "Spatial pooling strategies for perceptual image quality assessment," in Proc. of IEEE Int. Conf. on Image Processing, pp. 2945-2948, Atalanta, USA, October 2006. 

  5. D. Min, and K. Sohn, "Virtual view rendering for 2D/3D freeview video generation," Journal of The Institute of Electronics Engineers of Korea, Vol. 45, no. 4, pp. 22-31, July 2008. 

  6. A. Benoit, P. Le Callet, P. Campisi, R. Cousseau, "Quality assessment of stereoscopic images," EURASIP Journal on Image and Video Processing, Vol. 2008, pp. 1-13, December 2008. 

  7. M. Lambooij, W. IJsselsteijn, D. G. Bouwhuis and I. Heynderickx, "Evaluation of stereoscopic images: beyond 2d quality," IEEE Trans. on Broadcasting, Vol. 57, no. 2, pp. 432-444, June 2011. 

    상세보기 crossref

  8. A. K. Moorthy, C. C. Su, A. Mittal and A. C. Bovik, "Subjective evaluation of stereoscopic image quality," Signal Processing: Image Communication, Vol. 28, no. 8, pp. 870-883, September 2012. 

  9. Z. M. P. Sazzad, S. Yamanaka, Y. Kawayokeita and Y. Horita, "Stereoscopic image quality prediction," in Proc. Int. Workshop on Quality of Multimedia Experience, pp. 180-185, San Diego, USA, July 2009. 

  10. J. Seo, X. Liu, D. Kim and K. Sohn, "An objective video quality metric for compressed stereoscopic video," Circuits, Systems, and Signal Processing, Vol. 31, no. 3, pp. 1089-1107, July 2012. 

    상세보기 crossref

  11. J. Yang, C. Hou, R. Xu, J. Lei, "New metric for stereo image quality assessment based on HVS," Int. Journal of Imaging Systems and Technology, Vol. 20, no. 4, pp. 301-307, November 2010. 

    상세보기 crossref

  12. L. Itti, C. Koch and E. Niebur, "A model of saliency-based visual attention for rapid scene analysis," IEEE Trans. on Pattern Analysis and Machine Intelligence, Vol. 20, no. 11, pp.1254-1259, November 1998. 

    상세보기 crossref

  13. D. Walther, and C. Koch, "Modeling attention to salient proto-objects," Neural Networks, Vol. 19, no. 9, pp. 1395-1407, November 2006. 

    상세보기 crossref

  14. U. Rajashekar, I. van der Linde, A. C. Bovik and L. K. Cormack, "Gaffe: A gaze-attentive fixation finding engine," IEEE Trans. on Image Processing, Vol. 17, no. 4, pp. 564-573, April 2008. 

    상세보기 crossref

  15. M. Barkowsky, J. Bialkowski, B. Eskoer, R. Bitto and A. Kaup, "Temporal trajectory aware video quality measure," IEEE Journal of Selected Topics in Signal Processing, Vol. 3, no. 2, pp. 266-279, April 2009. 

    상세보기 crossref

  16. L. Itti and C. Koch, "Feature combination strategies for saliency-based visual attention systems," Journal of Electronic Imaging, Vol. 10, no. 1, pp. 161-169, January 2001. 

    상세보기 crossref

  17. A. Ninassi, O. Le Meur, P. Le Callet and D. Barba, "Considering temporal variations of spatial visual distortions in video quality assessment," IEEE Journal of Selected Topics in Signal Processing, Vol. 3, no. 2, pp. 253-265, April 2009. 

    상세보기 crossref

  18. L. Itti and C. Koch, "Computational modeling of visual attention," Nature reviews neroscience, Vol. 2, no. 3, pp. 194-203, March 2001. 

    상세보기 crossref

  19. W. Epstein and S. Rogers, Perception of space and motion, Academic Press., pp. 69-117, 1995. 

  20. D. R. Prott, J. Stefanucci, T. Banton and W. Epstein, "The role of effort in perceiving distance," Psychological Science, Vol. 14, no. 2, pp. 106-112, March 2003. 

    상세보기 crossref

  21. R. Li, B. Zeng and M. L. Liou, "A new three-step search algorithm for block motion estimation," IEEE Trans, on Circuits and Systems for Video Technology, Vol. 4, no. 4, pp. 438-442, August 1994. 

    상세보기 crossref

  22. J. Karathanasis, D. Kalivas and J. Vlontzos "Disparity estimation using block matching and dynamic programming," in Proc. IEEE Int. Conf. on Electronics, Circuits, and Systems, Vol. 2, pp. 728-731, Rodos, Greece, October 1996. 

  23. D. Min, S. Yea, Z. Arican, and A. Vetro "Disparity search range estimation: enforcing temporal consistency," in Proc. IEEE Int. Conf. on Acoustics Speech and Signal Processing, pp. 2366-2369, Dallas, USA, March 2010. 

  24. http://www.middlebury.edu/stereo 

  25. S. Zeki, J. Watson, C. Lueck, K. Friston, C. Kennard, R. Frackowiak, "A direct demonstration of functional specialization in human visual cortex," The Journal of Neuroscience, Vol. 11, no. 3, pp. 641-649, March 1991. 

  26. I. P. Howard, and B. J. Rogers, Seeing in Depth, Oxford Univ. Press, 2008. 

  27. S. J. Watt, K. Akeley, M. O. Ernst, M. S. Banks, "Focus cues aect perceived depth," Journal of Vision, Vol. 5, no. 10, pp. 834-862 December 2005. 

    crossref

  28. D. Kim, S. Ryu and K. Sohn, "Depth perception and motion cue based 3d video quality assessement," in Proc. IEEE Int. Symposium on Broadband Multimedia Systems and Broadcasting, pp. 1-4, Seoul, Korea, June 2012. 

  29. S. Ryu and K. Sohn, "No-reference sharpness metric based on inherent sharpness," Electronics Letters, Vol. 47, no. 21, pp. 1178-1180, October 2011. 

    상세보기 crossref

  30. S. Ryu and K. Sohn, "Blind blockiness measurebased on marginal distribution of wavelet coefficient and saliency," in Proc. IEEE Int. Conf. on Acoustics, Speech, and Signal Processing, pp. 1874-1878, Vancouver, Canada, May 2013. 

  31. Video Quality Experts Group, "Final report from the video quality experts group on the validation of object models of video quality assessment," 2000. 

  32. http://3dtv.at/Movies/Heidelberg..en.aspx 

  33. M. Domanski, T. Grajek, K. Klimaszewski, M. Kurc, O. Stankiewicz, J. Stankowski and K. Wegner, "Poznan multiview video test sequences and camera parameters," Tech. rep. MPEG/M17050, ISO/IEC JTC1/SC29/WG11. 

  34. M. Domanski, T. Grajek, K. Klimaszewski, M. Kurc, O. Stankiewicz, J. Stankowski and K. Wegner, "Undo dancer 3dv sequence for purposes of 3dv standardization," Tech. rep. MPEG/M17050, ISO/IEC JTC1/SC29/WG11. 

  35. H. Schwarz, D. Marpe and T. Wiegand, "Description of exploration experiments in 3d video coding," Tech. rep. MPEG/N11274, ISO/IEC JTC1/SC29/WG11. 

  36. A. Vetro, T. Wiegand and G. Sullivan, "Overview of the stereo and multiview video coding extensions of the H.264/MPEG-4 AVC standard," Proceedings of the IEEE, Vol. 99, no. 4, pp.626-642, April 2011. 

    상세보기 crossref

  37. http://diml.yonsei.ac.kr/dimldb/stereo 

  38. Methodology for Subjective Assessment of the Quality of Television Pictures, ITU-R Recommendation BT.500, Recommendation of the ITU, Radiocommunication Sector. 

  39. Smart Eye, Smart-eye pro 5.5 user manual, Gothenburg, Sweden, 2009. 

저자의 다른 논문 :

관련 콘텐츠

이 논문과 함께 이용한 콘텐츠

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로