$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

자연스러운 저조도 영상 개선을 위한 비지도 학습
Unsupervised Learning with Natural Low-light Image Enhancement 원문보기

멀티미디어학회논문지 = Journal of Korea Multimedia Society, v.23 no.2, 2020년, pp.135 - 145  

이헌상 (School of Electrical & Electronic Engineering, Yonsei University) ,  손광훈 (School of Electrical & Electronic Engineering, Yonsei University) ,  민동보 (Department of Computer Science & Engineering, Ewha Womans University)

Abstract AI-Helper 아이콘AI-Helper

Recently, deep-learning based methods for low-light image enhancement accomplish great success through supervised learning. However, they still suffer from the lack of sufficient training data due to difficulty of obtaining a large amount of low-/normal-light image pairs in real environments. In thi...

주제어

표/그림 (8)

AI 본문요약
AI-Helper 아이콘 AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

  • 환경 조명 A를 지역적으로 변화시키며 학습함으로써 과포화를 해결할 수도 있으나, 비지도 개선 방식에서 이는 어려운 과제이다. 따라서 본 논문에서는 이를 해결하기 위하여 자기-주목(self-attention) 맵을 통한 저조도 영상 개선을 수행한다. 이는 다음과 같이 저조도 입력 영상을 HSV 컬러 공간으로 변환한 뒤 계산한다.
  • 본 논문에서는 저조도 영상을 개선하기 위한 새로운 방법을 제안하였다. 기존 방식들이 실제 저조도 환경에서의 정답 데이터가 부족하다는 이유로 인위적인 데이터 셋을 만들어 학습하던 문제를 해결하기 위하여 BCP를 사용한 비지도 학습을 통해 저조도 개선을 수행하였다.
  • 이러한 문제를 해결하기 위하여, 본 논문에서는 비지도 학습 기반의 저조도 영상 개선 방식을 제안한다. 이를 위해 안개 제거 연구 [16, 17]에서 사용되는 dark channel prior (DCP)에 착안하여, bright channel prior (BCP)에 기반한 비지도 딥러닝 네트워크를 설계하였다.
본문요약 정보가 도움이 되었나요?

질의응답

핵심어 질문 논문에서 추출한 답변
저조도 환경에서 획득된 영상의 특징은 무엇인가? 저조도 환경에서 획득된 영상은 적은 광자 수와 낮은 신호 대 잡음 비로 인하여 낮은 가시성과 대비, 심각한 노이즈에 의해 열화 될 수 있다. 노출 시간을 늘림으로써 보다 높은 화질의 영상을 획득할 수 있으나, 이 방법은 카메라나 물체가 움직이는 상황에서 블러 문제를 초래한다.
BCP란 무엇인가? 이를 위해 안개 제거 연구 [16, 17]에서 사용되는 dark channel prior (DCP)에 착안하여, bright channel prior (BCP)에 기반한 비지도 딥러닝 네트워크를 설계하였다. BCP는 저 조도가 개선된 영상의 패치 내에서 가장 밝은 값을 가지는 픽셀의 값이 1에 가까워야 한다는 제약 조건으로, 본 논문에서는 BCP를 통해 초기 조명 맵을 예측하고, 이를 유사 정답으로 사용해 네트워크를 학습한다. 우리가 아는 한도 내에서, 제안 방식은 비지도 학습을 통해 저 조도를 개선하는 제거하는 첫 번째 연구로 정답이 포함된 대규모 학습데이터가 필요하지 않다.
자기-주목(self-attention) 맵을 통한 저조도 영상 개선을 수행한 정성적 결과는? 반면에, 제안한 방법은 저조도 영상의 색감을 비슷하게 유지하고 어두운 영역의 가시성을 향상시키면서 디테일을 보존하여 더욱 자연스러운 결과를 생성한다. 따라서, 정량적 결과 비교에서도 확인할 수 있었듯이, 제안 방법의 결과가 기존 방법들과 비교하여 더욱 자연스러운 영상을 생성하며 디테일을 보존한 저조도 개선을 이루었다고 볼 수있다.
질의응답 정보가 도움이 되었나요?

참고문헌 (28)

  1. J. Redmon, S. Divvala, R. Girshick, and A. Farhadi, "You Only Look Once: Unified, Realtime Object Detection," Proceeding of Conference on Computer Vision and Pattern Recognition, pp. 779-788, 2016. 

  2. J. Deng, W. Dong, R. Socher, L.J. Li, K. Li, and L.F. Fei, "Imagenet: A Large-scale Hierarchical Image Database," Proceeding of Conference on Computer Vision and Pattern Recognition, pp. 248-255, 2009. 

  3. L.C. Chen, G. Papandreou, I. Kokkinos, K. Murphy, and A.L. Yuille, "Deeplab: Semantic Image Segmentation with Deep Convolutional nets, Atrous Convolution, and Fully Connected Crfs," Transaction on Pattern Analysis and Machine Intelligence, Vol. 40, No. 4, pp. 834-848, 2017. 

  4. S.M. Pizer, R.E. Johnston, J.P. Ericksen, B.C. Yankaskas, and K.E. Muller, "Contrast- limited Adaptive Histogram Equalization: Speed and Effectiveness," Proceeding of Conference on Visualization in Biomedical Computing, pp. 337-345, 1990. 

  5. M.A.A. Wadud, M.H. Kabir, M.A.A. Dewan, and O. Chae, "A Dynamic Histogram Equalization for Image Contrast Enhancement," Transaction on Consumer Electronics, Vol. 53, No. 2, pp. 593-600, 2007. 

  6. S. Wang, J. Zheng, H.M. Hu, and B. Li, "Naturalness Preserved Enhancement Algorithm for Non-uniform Illumination Images," Transaction on Image Processing, Vol. 22, No. 9, pp. 3538-3548, 2013. 

  7. X. Fu, D. Zeng, Y. Huang, X.P. Zhang, and X. Ding, "A Weighted Variational Model for Simultaneous Reflectance and Illumination Estimation," Proceeding of Conference on Computer Vision and Pattern Recognition, pp. 2782-2790, 2016. 

  8. X. Guo, Y. Li, and H. Ling, "Lime: Low-light Image Enhancement Via Illumination Map Estimation," Transaction on Image Processing, Vol. 26, No. 2, pp. 982-993, 2016. 

  9. K.G. Lore, A. Akintayo, and S. Sarkar, "Llnet: A Deep Autoencoder Approach to Natural Low-light Image Enhancement," Pattern Recognition, Vol. 61, pp. 650-662, 2017. 

  10. C. Wei, W. Wang, W. Yang, and J. Liu, "Deep Retinex Decomposition for Low-light Enhancement," Proceeding of British Machine Vision Conference, pp. 1-12, 2018. 

  11. C. Li, J. Guo, F. Porikli, and Y. Pang, "Lightennet: A Convolutional Neural Network for Weakly Illuminated Image Enhancement," Pattern Recognition Letters, Vol. 104, pp. 15-22, 2018. 

  12. W. Ren, S. Liu, L. Ma, Q. Xu, X. Xu, X. Cao, et al., "Low-light Image Enhancement Via a Deep Hybrid Network," Transaction on Image Processing, Vol. 28, No. 9, pp. 4364-4375, 2019. 

  13. R. Wang, Q. Zhang, C.W. Fu, X. Shen, W.S. Zheng, and J. Jia, "Underexposed Photo Enhancement Using Deep Illumination Estimation," Proceeding of Conference on Computer Vision and Pattern Recognition, pp. 6849-6857, 2019. 

  14. Flickr, https://www.flickr.com/ (accessed November 22, 2019). 

  15. V. Bychkovsky, S. Paris, E. Chan, and F. Durand, "Learning Photographic Global Tonal Adjustment with a Database of Input/Output Image Pairs," Proceeding of Conference on Computer Vision and Pattern Recognition, pp. 97-104, 2011. 

  16. K. He, J. Sun, and X. Tang, "Single Image Haze Removal Using Dark Channel Prior," Transaction on Pattern Analysis and Machine Intelligence, Vol. 33, No. 12, pp. 2341-2353, 2010. 

  17. A. Golts, D. Freedman, and M. Elad, "Unsupervised Single Image Dehazing Using Dark Channel Prior Loss," arXiv Preprint ArXiv: 1812.07051, 2018. 

  18. X. Zhang, P. Shen, L. Luo, L. Zhang, and J. Song, "Enhancement and Noise Reduction of Very Low Light Level Images," Proceeding of International Conference on Pattern Recognition, pp. 2034-2037, 2012. 

  19. L. Li, R. Wang, W. Wang, and W. Gao, "A Low-light Image Enhancement Method for Both Denoising and Contrast Enlarging," Proceeding of International Conference on Image Processing, pp. 3730-3734, 2015. 

  20. G. Petschnigg, R. Szeliski, M. Agrawala, M. Cohen, H. Hoppe, and K. Toyama, "Digital Photography with Flash and No-flash Image Pairs," Transaction on Graphics, Vol. 23, No. 3, pp. 664-672, 2004. 

  21. K. Dabov, A. Foi, V. Katkovnik, and K. Egiazarian, "Image Denoising by Sparse 3-D Transform-domain Collaborative Filtering," Transaction on Image Processing, Vol. 16, No. 8, pp. 2080-2095, 2007. 

  22. M. Gharbi, J. Chen, J.T. Barron, S.W. Hasinoff, and F. Durand, "Deep Bilateral Learning for Real-time Image Enhancement," Transaction on Graphics, Vol. 36, No. 4, pp. 118, 2017. 

  23. Y. Wang, S. Zhuo, D. Tao, J. Bu, and N. Li, "Automatic Local Exposure Correction Using Bright Channel Prior for Under-exposed Images," Signal Processing, Vol. 93, No. 11, pp. 3227-3238, 2013. 

  24. A. Levin, D. Lischinski, and Y. Weiss, "A Closed-form Solution to Natural Image Matting," Transaction on Pattern Analysis and Machine Intelligence, Vol. 30, No. 2, pp. 228-242, 2008. 

  25. J. Cai, S. Gu, and L. Zhang, "Learning a Deep Single Image Contrast Enhancer from Multi-Exposure Images," Transaction on Image Processing, Vol. 27, No. 4, pp. 2049-2062, 2018. 

  26. D.P. Kingma and J. Ba, "Adam: A Method for Stochastic Optimization," Proceeding of International Conference on Learning Representations, 2015. 

  27. A. Mittal, R. Soundararajan, and A.C. Bovik, "Making a "Completely Blind" Image Quality Analyzer," Signal Processing Letters, Vol. 20, No. 3, pp. 209-212, 2012. 

  28. S. Jung, J. Kim, D. Lee, S. Lee, and G. Kim, "Intelligent Video Event Detection System Used by Image Object Identification Technique," Journal of Korea Multimedia Society, Vol. 13, No. 2, pp. 171-178, 2010. 

저자의 다른 논문 :

관련 콘텐츠

오픈액세스(OA) 유형

BRONZE

출판사/학술단체 등이 한시적으로 특별한 프로모션 또는 일정기간 경과 후 접근을 허용하여, 출판사/학술단체 등의 사이트에서 이용 가능한 논문

이 논문과 함께 이용한 콘텐츠

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로