$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

전이학습과 딥러닝 네트워크를 활용한 고해상도 위성영상의 변화탐지
Change Detection for High-resolution Satellite Images Using Transfer Learning and Deep Learning Network 원문보기

한국측량학회지 = Journal of the Korean Society of Surveying, Geodesy, Photogrammetry and Cartography, v.37 no.3, 2019년, pp.199 - 208  

송아람 (Dept. of Civil and Environmental Engineering, Seoul National University) ,  최재완 (School of Civil Engineering, Chungbuk National University) ,  김용일 (Dept. of Civil and Environmental Engineering, Seoul National University)

초록
AI-Helper 아이콘AI-Helper

운용 가능한 위성의 수가 증가하고 기술이 진보함에 따라 영상정보의 성과물이 다양해지고 많은 양의 자료가 축적되고 있다. 본 연구에서는 기구축된 영상정보를 활용하여 부족한 훈련자료의 문제를 극복하고 딥러닝(deep learning) 기법의 장점을 활용하고자 전이학습변화탐지 네트워크를 활용한 고해상도 위성영상의 변화탐지를 수행하였다. 본 연구에서 활용한 딥러닝 네트워크는 공간 및 분광 정보를 추출하는 합성곱 레이어(convolutional layer)와 시계열 정보를 분석하는 합성곱 장단기 메모리 레이어(convolutional long short term memory layer)로 구성되었으며, 고해상도 다중분광 영상에 최적화된 정보를 추출하기 위하여 커널(kernel)의 차원에 따른 정확도를 비교하였다. 또한, 학습된 커널 정보를 활용하기 위하여 변화탐지 네트워크의 초기 합성곱 레이어를 고해상도 항공영상인 ISPRS (International Society for Photogrammetry and Remote Sensing) 데이터셋에서 추출된 40,000개의 패치로 학습된 값으로 초기화하였다. 다시기 KOMPSAT-3A (KOrean Multi-Purpose SATllite-3A) 영상에 대한 실험 결과, 전이학습과 딥러닝 네트워크를 활용할 경우 기복 변위 및 그림자 등으로 인한 변화에 덜 민감하게 반응하며 분류 항목이 달라진 지역의 변화를 보다 효과적으로 추출할 수 있었으며, 2차원 커널보다 3차원 커널을 사용할 때 변화탐지의 정확도가 높았다. 3차원 커널은 공간 및 분광정보를 모두 고려하여 특징 맵(feature map)을 추출하기 때문에 고해상도 영상의 분류뿐만 아니라 변화탐지에도 효과적인 것을 확인하였다. 본 연구에서는 고해상도 위성영상의 변화탐지를 위한 전이학습과 딥러닝 기법의 활용 가능성을 제시하였으며, 추후 훈련된 변화탐지 네트워크를 새롭게 취득된 영상에 적용하는 연구를 수행하여 제안기법의 활용범위를 확장할 예정이다.

Abstract AI-Helper 아이콘AI-Helper

As the number of available satellites increases and technology advances, image information outputs are becoming increasingly diverse and a large amount of data is accumulating. In this study, we propose a change detection method for high-resolution satellite images that uses transfer learning and a ...

주제어

표/그림 (9)

AI 본문요약
AI-Helper 아이콘 AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

  • 또한 본 연구에서 사용한 변화탐지 기법의 효율성을 비교하기 위하여 PCA (Principal Component Analysis)와 SVM (Support Vector Machine)을 활용한 기법, fully connected LSTM에 의한 변화탐지 결과를 비교하였고, 변화탐지 및 분류 네트워크에 각각 2차원과 3차원을 커널을 적용한 결과를 비교분석 하였다. PCA를 통한 변화탐지는 n1, n2개의 밴드를 갖는 다시기 영상을 n1+n2개의 밴드를 갖는 하나의 영상으로 만든 뒤, PCA를 수행하여 생성된 주성분을 활용하여 감독 및 무감독 기반으로 변화지역을 추출하는데 (Deng et al., 2008), 본 연구에서는 감독기반으로 수행된 제안기법과의 비교를 위하여 추출된 주성분 영상에 SVM을 적용하여 변화탐지를 수행하였다. Fully connected LSTM의 경우, Lyu et al.
  • 따라서 본 연구에서는 부족한 훈련자료의 한계를 극복하고자 전이학습(transfer learning)을 통하여 기구축된 고해상도 항공 영상으로 학습된 정보를 활용하였으며, 고해상도 영상의 변화탐지를 위한 최신 딥러닝 네트워크의 적용가능성을 평가하고자 커널의 차원에 따른 변화탐지 네트워크 성능을 분석하였다.
  • 고해상도 다중분광 영상을 대상으로 학습한 정보를 저해상도 초분광영상에 적용한 전이학습을 적용하여 변화탐지 정확도를 개선한 선행 연구가 있었으나(Song, 2019), 소스(source) 영상과 타겟(target) 영상의 분류 항목, 해상도 등의 차이가 큰 한계가 있었다. 본 연구에서는 고해상도 다중분광 위성영상의 효과적인 변화탐지를 위하여 분광 및 공간해상도가 유사한 고해상도 항공 영상을 활용함으로써 부족한 훈련자료의 한계를 극복하였으며, 커널의 차원에 따른 네트워크의 성능을 평가하고자 하였다.
  • 본 연구에서는 고해상도 영상의 변화탐지를 위한 최신 딥러닝 네트워크의 적용가능성을 평가하고자 전이학습과 커널의 차원에 따른 변화탐지 네트워크 성능을 분석하였다. KOMPSAT-3A와 공간해상도 및 분광해상도가 유사한 ISPRS 데이터셋에 대하여 분류네트워크를 학습시켰으며, 학습된 파라미터를 변화탐지 네트워크에 초기값으로 활용하는 전이학습을 수행하였다.
  • 본 연구에서는 부족한 훈련자료의 한계를 극복하고자, 많은 양의 데이터셋에서 훈련된 네트워크의 파라미터를 변화 탐지 네트워크에 활용하는 전이학습을 수행하였다. 전이학습을 위해 사용된 영상 자료는 ISPRS 2D (two-dimensional) Semantic Labelling Challenge의 Potsdam 지역의 영상으로 가시광-근적외선 영역에서 취득한 총 4개의 밴드와 영상에 따른 6개의 항목(불투수면(impervious surface), 건물(building), 나무(tree), 적은 식생(low vegetation), 자동차(car), 배경(background))으로 분류된 참조 지도를 제공 한다(Fig.
  • 이때 입력 영상의 내부의 패치들로 학습을 진행되기 때문에 훈련자료의 수와 다양성이 부족한 문제가 존재한다. 본 연구에서는 이러한 문제를 해결하기 위하여 합성곱 레이어의 무작위 초기화 대신, 많은 양의 영상 자료로 학습된 값으로 초기화하여 부족한 훈련자료의 한계를 극복하고 효율적으로 특징맵을 추출하기 위한 전이학습을 수행하였다. 초기값 설정방법에 따라 네트워크의 예측 정확도가 향상될 수 있기 때문에 적절한 초기값을 설정하는 것은 매우 중요하다(Liu et al.
본문요약 정보가 도움이 되었나요?

질의응답

핵심어 질문 논문에서 추출한 답변
고해상도 영상의 변화탐지 기법 중 객체기반 변화탐지의 특징은 무엇인가? 그러나 객체기반 변화탐지의 경우 유의미하지만 작은 객체를 고려하지 못할 가능성이 있고 객체의 크기를 결정하는 최적의 스케일 파라미터(scale parameter)들이 영상에 따라 달라질 수 있기 때문에 다시기 영상에서 일관된 크기의 객체를 추출하기 어렵다. 또한 객체 분할 과정에서 과분할 오류(oversegmentation error) 및 미분할 오류(under-segmentation error)가 발생할 수 있다(Hussian et al., 2013).
변화탐지란 무엇인가? 변화탐지는 원격탐사의 주요 연구 분야이며, 서로 다른 시기에 취득된 영상을 이용하여 동일한 지역에서 발생한 공간 및 분광 변화를 분석하여 자연재해로 인한 피해지역 검출, 식생 및 도심지 모니터링 등에 활용되는 기술이다(Han et al., 2017; Yu et al.
CNN의 단점은 무엇인가? , 2019). 그러나 CNN은 구조 내에서 시계열 정보를 처리할 수 없기 때문에 end-to-end 방식, 즉 자료변환 및 후 분류 작업과 같은 전·후처리를 수행하지 않고 네트워크의 학습만으로 변화를 추출할 수 없다는 단점이 있다.
질의응답 정보가 도움이 되었나요?

참고문헌 (25)

  1. Choi, J. (2015), Unsupervised change detection for very high-spatial resolution satellite imagery by using object-based IR-MAD algorithm, Journal of the Korean Society of Surveying, Geodesy, Photogrammetry and Cartography, Vol. 33, No. 4, pp. 297-304. (in Korean with English abstract) 

  2. Choi, J., Kim, G., Park, N., Park, H., and Choi, S. (2017), A hybrid pansharpening algorithm of VHR satellite images that employs injection gains based on NDVI to reduce computational costs, Remote Sensing, Vol. 9, No. 10. pp. 976. 

  3. Chung, M., Han, Y., Choi, J., and Kim, Y. (2018), Optimal parameter analysis and evaluation of change detection for SLIC-based superpixel techniques using KOMPSAT Data, Korean Journal of Remote Sensing, Vol. 34, No. 6_3, pp. 1427-1443. (in Korean with English abstract) 

  4. Dellinger, F., Delon, J., Gousseau, Y., Michel, J., and Tupin, F. (2014), Change detection for high resolution satellite images, based on SIFT descriptors and an a contrario approach, In 2014 IEEE Geoscience and Remote Sensing Symposium 2014, 13-18 July, Quebec, Canada, pp. 1281-1284. 

  5. Deng, J.S., Wang, K., Deng, Y.H., and Qi, G.J. (2008), PCA-based land-use change detection and analysis using multitemporal and multisensor satellite data, International Journal of Remote Sensing, Vol. 29, No. 16, pp. 4823-4838. 

  6. Han, Y., Kim, T., Han, S., and Song, J. (2017), Change detection of urban development over large area using KOMPSAT optical imagery, Korean Journal of Remote Sensing, Vol. 33, No. 6-3, pp. 1223-1232. (in Korean with English abstract) 

  7. Hussain, M., Chen, D., Cheng, A., Wei, H., and Stanley, D. (2013), Change detection from remotely sensed images: from pixel-based to object-based approaches, ISPRS Journal of photogrammetry and remote sensing, Vol. 80, pp. 91-106. 

  8. Jeong, J. (2005), Developments of urban change detection methods according to spatial resolution of satellite images -application of KOMPSAT 1 images into urban area-, The Geographical Journal of Korea, Vol. 39, No. 1, pp. 161-170. (in Korean with English abstract) 

  9. Ji, S., Zhang, C., Xu, A., Shi, Y., and Duan, Y. (2018), 3D convolutional neural networks for crop classification with multi-temporal remote sensing images, Remote Sensing, Vol. 10, No. 1, pp. 75. 

  10. Lim, K., Jin, D., and Kim, C.S. (2018), Change detection in high resolution satellite images using an ensemble of convolutional neural networks, In 2018 Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC), 12-15 November, Honolulu, Hawaii, USA, pp. 509-515. 

  11. Li, Y., Zhang, H., Xue, X., Jiang, Y., and Shen, Q. (2018), Deep learning for remote sensing image classification: A survey, Wiley Interdisciplinary Reviews: Data Mining and Knowledge Discovery, Vol. 8, No. 6, pp. e1264. 

  12. Liu, B., Yu, X., Yu, A., and Wan, G. (2018), Deep convolutional recurrent neural network with transfer learning for hyperspectral image classification, Journal of Applied Remote Sensing, Vol. 12, No. 2, pp. 026028. 

  13. Lyu, H., Lu, H., and Mou, L. (2016), Learning a transferable change rule from a recurrent neural network for land cover change detection, Remote Sensing, Vol. 8, No. 6, pp. 506. 

  14. Mei, S., Yuan, X., Ji, J., Zhang, Y., Wan, S., and Du, Q. (2017), Hyperspectral image spatial super-resolution via 3D full convolutional neural network, Remote Sensing, Vol. 9, No. 11, pp. 1139. 

  15. Mou, L., Bruzzone, L., and Zhu, X.X. (2019), Learning spectral-spatial-temporal features via a recurrent convolutional neural network for change detection in multispectral imagery, IEEE Transactions on Geoscience and Remote Sensing, Vol. 57, No. 2, pp. 924-935. 

  16. Song, A., Choi, J., Han, Y., and Kim, Y. (2018), Change detection in hyperspectral images using recurrent 3D fully convolutional networks, Remote Sensing, Vol. 10, No. 11, pp. 1827. 

  17. Song, A. (2019), A Novel Deep Learning Framework for Multi-Class Change Detection of Hyperspectral Images, Doctoral Thesis, Seoul National University, Seoul, Korea, 137p. 

  18. Tan, K., Zhang, Y., Wang, X., and Chen, Y. (2019), Object-based change detection using multiple classifiers and multi-scale uncertainty analysis, Remote Sensing, Vol. 11, No. 3, pp. 359. 

  19. Wang, W., Dou, S., Jiang, Z., and Sun, L. (2018), A fast dense spectral-spatial convolution network framework for hyperspectral images classification, Remote Sensing, Vol. 10, No. 7, pp. 1068. 

  20. Wang, Q., Yuan, Z., Du, Q., and Li, X. (2018), Getnet: A general end-to-end 2-d CNN framework for hyperspectral image change detection, IEEE Transactions on Geoscience and Remote Sensing, Vol. 57, No. 1, pp. 3-13. 

  21. Wang, Q., Zhang, X., Chen, G., Dai, F., Gong, Y., and Zhu, K. (2018), Change detection based on Faster R-CNN for high-resolution remote sensing images, Remote sensing letters, Vol. 9, No. 10, pp. 923-932. 

  22. Wiratama, W., Lee, J., Park, S. E., and Sim, D. (2018), Dual-dense convolution network for change detection of high-resolution panchromatic imagery, Applied Sciences, Vol. 8, No. 10, pp. 1785. 

  23. Xingjian, S.H.I., Chen, Z., Wang, H., Yeung, D.Y., Wong, W.K., and Woo, W.C. (2015), Convolutional LSTM network: A machine learning approach for precipitation nowcasting, In Advances in Neural Information Processing Systems, 7-12 December, Montreal, Canada, pp. 802-810. 

  24. Yu, H., Yang, W., Hua, G., Ru, H., and Huang, P. (2017), Change detection using high resolution remote sensing images based on active learning and markov random fields, Remote Sensing, Vol. 9, No. 12, pp. 1233. 

  25. Zhang, C., Wei, S., Ji, S., and Lu, M. (2019), Detecting large-scale urban land cover changes from very high resolution remote sensing images using CNN-based classification, ISPRS International Journal of Geo-Information, Vol. 8, No. 4, pp. 189. 

저자의 다른 논문 :

LOADING...

관련 콘텐츠

오픈액세스(OA) 유형

GOLD

오픈액세스 학술지에 출판된 논문

이 논문과 함께 이용한 콘텐츠

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로