$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

[국내논문] 멀티 브랜치 네트워크 구조 탐색을 사용한 구름 영역 분할
Semantic Segmentation of Clouds Using Multi-Branch Neural Architecture Search 원문보기

대한원격탐사학회지 = Korean journal of remote sensing, v.39 no.2, 2023년, pp.143 - 156  

정치윤 (한국전자통신연구원 초지능창의연구소) ,  문경덕 (한국전자통신연구원 초지능창의연구소) ,  김무섭 (한국전자통신연구원 초지능창의연구소)

초록
AI-Helper 아이콘AI-Helper

인공위성이 촬영한 영상의 내용을 정확하게 분석하기 위해서는 영상에 존재하는 구름 영역을 정확하게 인지하는 것이 필요하다. 최근 다양한 분야에서 딥러닝(deep learning) 모델이 뛰어난 성능을 보여줌에 따라 구름 영역 검출을 위해 딥러닝 모델을 적용한 방법들이 많이 제안되고 있다. 하지만 현재 구름 영역 검출 방법들은 의미 영역 분할 방법의 네트워크 구조를 그대로 사용하여 구름 검출 성능을 향상하는 데는 한계가 있다. 따라서 본 논문에서는 구름 검출 데이터 세트에 다중 브랜치 네트워크 구조 탐색을 적용하여 구름 영역 검출에 최적화된 네트워크 모델을 생성함으로써 구름 검출 성능을 향상하는 방법을 제안한다. 또한 구름 검출 성능을 향상하기 위하여 의미 영역 분할 모델의 학습 단계와 평가 단계의 평가 기준 불일치를 해소하기 위해 제안된 soft intersection over union (IoU) 손실 함수를 사용하고, 다양한 데이터 증강 방법을 적용하여 학습 데이터를 증가시켰다. 본 논문에서 제안된 방법의 성능을 검증하기 위하여 아리랑위성 3/3A호에서 촬영한 영상으로 구성된 구름 검출 데이터 세트를 사용하였다. 먼저 제안 방법과 의미 영역 분할 데이터 세트에서 탐색된 기존 네트워크 모델의 성능을 비교하였다. 실험 결과, 제안 방법의 mean IoU는 68.5%이며, 기존 모델보다 mIoU 측면에서 4%의 높은 성능을 보여주었다. 또한 soft IoU 손실 함수를 포함한 다섯 개의 손실 함수를 적용하여 손실 함수에 따른 구름 검출 성능을 분석하였으며, 실험 결과 본 연구에서 사용한 soft IoU 함수가 가장 좋은 성능을 보여주었다. 마지막으로 의미 영역 분할 분야에서 활용되는 최신 네트워크 모델과 제안 방법의 구름 검출 성능을 비교하였다. 실험 결과, 제안 모델이 의미 영역 분할 분야의 최신 모델들보다 mIoU와 정확도 측면에서 더 나은 성능을 보여주는 것을 확인하였다.

Abstract AI-Helper 아이콘AI-Helper

To precisely and reliably analyze the contents of the satellite imagery, recognizing the clouds which are the obstacle to gathering the useful information is essential. In recent times, deep learning yielded satisfactory results in various tasks, so many studies using deep neural networks have been ...

Keyword

표/그림 (11)

AI 본문요약
AI-Helper 아이콘 AI-Helper

문제 정의

  • 따라서 본 연구에서는 멀티 브랜치 탐색이 가능한 NAS를 활용하여 구름 영역을 검출하는 방법을 제안하였다. 먼저 NAS를 사용하여 구름 영역 검출에 최적화된 네트워크 모델을 생성하였다.
  • 본 연구에서는 멀티 브랜치 탐색이 가능한 NAS를 적용하여 구름 검출 방법의 성능을 향상하는 방법을 제안하였다. 이를 위해서 의미 영역 분할 분야에 적용된 NAS 모델을 기반으로 손실 함수와 데이터 증강 방법을 개선하여 구름 검출 데이터 세트에서 최적의 네트워크 모델을 탐색할 수 있도록 하였다.
본문요약 정보가 도움이 되었나요?

참고문헌 (36)

  1. Buttar, P. K. and Sachan, M. K., 2022. Semantic?segmentation of clouds in satellite images based?on U-Net++ architecture and attention mechanism.?Expert Systems with Applications, 209, 118380.?https://doi.org/10.1016/j.eswa.2022.118380 

  2. Byeon, Y., Jin, D., Seong, N., Woo, J., Jeon, U., and?Han, K.-S., 2022. A study on daytime transparent?cloud detection through machine learning: Using?GK-2A/AMI. Korean Journal of Remote Sensing,?38(6-1), 1181-1189. https://doi.org/10.7780/kjrs.2022.38.6.1.15 

  3. Chen, L. C., Zhu, Y., Papandreou, G., Schroff, F., and Adam,?H., 2018. Encoder-decoder with atrous separable?convolution for semantic image segmentation. In:?Ferrari, V., Hebert, M., Sminchisescu, C., Weiss, Y.?(eds.), Computer Vision - ECCV 2018, Springer,?pp. 833-851. https://doi.org/10.1007/978-3-030-01234-2_49 

  4. Chen, W., Gong, X., Liu, X., Zhang, Q., Li, Y., and?Wang, Z., 2020. FasterSeg: Searching for faster?real-time semantic segmentation. arXiv preprint?arXiv:1912.10917v2. https://arxiv.org/abs/1912.10917v2 

  5. Chu, X., Zhou, T., Zhang, B., and Li, J., 2020. Fair DARTS:?Eliminating unfair advantages in differentiable?architecture search. In: Vedaldi, A., Bischof, H.,?Brox, T., Frahm, J. M. (eds.), Computer Vision -?ECCV 2020, Springer, pp. 1-17. https://doi.org/10.1007/978-3-030-58555-6_28 

  6. Demir, I., Koperski, K., Lindenbaum, D., Pang, G.,?Huang, J., Basu, S. et al., 2018. DeepGlobe 2018:?A challenge to parse the earth through satellite?images. In Proceedings of the 2018 IEEE/CVF?Conference on Computer Vision and Pattern?Recognition Workshops (CVPRW), Salt Lake City,?UT, USA, June 18-22, pp. 172-181. https://doi.org/10.1109/CVPRW.2018.00031 

  7. Fan, M., Lai, S., Huang, J., Wei, X., Chai, Z., Luo, J.,?and Wei, X., 2021. Rethinking BiSeNet for real-time semantic segmentation. In Proceedings of?the 2021 IEEE/CVF Conference on Computer?Vision and Pattern Recognition (CVPR), Nashville,?TN, USA, June 20-25, pp. 9711-9720. https://doi.org/10.1109/CVPR46437.2021.00959 

  8. Hong, Y., Pan, H., Sun, W., and Jia, Y., 2021. Deep dual-resolution networks for real-time and accurate?semantic segmentation of road scenes. arXiv?preprint arXiv:2101.06085. https://doi.org/10.48550/arXiv.2101.06085 

  9. Huang, Y., Tang, Z., Chen, D., Su, K., and Chen, C., 2020. Batching soft IoU for training semantic?segmentation networks. IEEE Signal Processing?Letters, 27, 66-70. https://doi.org/10.1109/LSP.2019.2956367 

  10. Jeong, C.-Y., Shin, H.-C., and Kim, M., 2021. Sensor-data augmentation for human activity recognition?with time-warping and data masking. Multimedia?Tools and Applications, 80, 20991-21009. https://doi.org/10.1007/s11042-021-10600-0 

  11. Jeong, C.-Y., Moon, K., and Kim, M., 2023. An end-to-end deep learning approach for real-time single?image dehazing. Journal of Real-Time Image?Processing, 20(1), 12. https://doi.org/10.1007/s11554-023-01270-2 

  12. Kang, J., Park, G., Kim, G., Youn, Y., Choi, S., and?Lee, Y., 2022. Cloud detection from sentinel-2?images using DeepLabV3+ and swin transformer?models. Korean Journal of Remote Sensing,?38(6-2), 1743-1747. https://doi.org/10.7780/kjrs.2022.38.6.2.14 

  13. Kim, M.-J. and Ko, Y.-H., 2022. A study on the cloud?detection technique of heterogeneous sensors?using modified DeepLabV3+. Korean Journal of?Remote Sensing, 38(5-1), 511-521. https://doi.org/10.7780/kjrs.2022.38.5.1.6 

  14. Lee, M., Kim, M., and Jeong, C. Y., 2022. Real-time?semantic segmentation on edge devices: A?performance comparison of segmentation models.?In Proceedings of the 2022 13th International?Conference on Information and Communication?Technology Convergence (ICTC), Jeju Island,?Republic of Korea, Oct. 19-21, pp. 383-388.?https://doi.org/10.1109/ICTC55196.2022.9952938 

  15. Li, L., Zhou, T., Wang, W., Li, J., and Yang, Y., 2022.?Deep hierarchical semantic segmentation. In?Proceedings of the 2022 IEEE/CVF Conference?on Computer Vision and Pattern Recognition?(CVPR), New Orleans, LA, USA, June 18-24,?pp. 1236-1247. https://doi.org/10.1109/CVPR52688.2022.00131 

  16. Li, Q., Yang, W., Liu, W., Yu, Y., and He, S., 2021.?From contexts to locality: ultra-high resolution?image segmentation via locality-aware contextual?correlation. In Proceedings of the 2021 IEEE/CVF?International Conference on Computer Vision?(ICCV), Montreal, QC, Canada, Oct. 10-17, pp.?7232-7241. https://doi.org/10.1109/ICCV48922.2021.00716 

  17. Lin, T. Y., Goyal, P., Girshick, R., He, K., and Dollar,?P., 2017. Focal loss for dense object detection. In?Proceedings of the 2017 IEEE/CVF International?Conference on Computer Vision (ICCV), Venice,?Italy, Oct. 22-29, pp. 2999-3007. https://doi.org/10.1109/ICCV.2017.324 

  18. Liu, C., Yang, S., Di, D., Yang, Y., Zhou, C., Hu, X.,?and Sohn, B. J., 2022. A machine learning-based?cloud detection algorithm for the Himawari-8?spectral image. Advances in Atmospheric Sciences,?39, 1994-2007. https://doi.org/10.1007/s00376-021-0366-x 

  19. Liu, H., Simonyan, K., and Yang, Y., 2018. DARTS:?Differentiable architecture search. arXiv preprint?arXiv:1806.09055. https://doi.org/10.48550/arXiv.1806.09055 

  20. Long, J., Shelhamer, E., and Darrell, T., 2015. Fully?convolutional networks for semantic segmentation.?In Proceedings of the 2015 IEEE/CVF Conference?on Computer Vision and Pattern Recognition?(CVPR), Boston, MA, USA, June 8-10, pp. 3431-3440. https://doi.org/10.1109/CVPR.2015.7298965 

  21. MMSegmentation, 2020. MMSegmentation: OpenMMLab?semantic segmentation toolbox and benchmark.?Available online: https://github.com/open-mmlab/mmsegmentation (accessed on Jan. 10, 2023). 

  22. Mohajerani, S. and Saeedi, P., 2020. Cloud and cloud?shadow segmentation for remote sensing imagery?via filtered Jaccard loss function and parametric?augmentation. arXiv preprint arXiv:2001.08768.?https://doi.org/10.48550/arXiv.2001.08768 

  23. National Information Society Agency AI Hub, 2020.?Dataset for object recognition from satellite?imagery. Available online: https://aihub.or.kr/aihubdata/data/view.do?currMenu115topMenu100 (accessed on Jan. 10, 2023). 

  24. Qiu, S., He, B., Zhu, Z., Liao, Z., and Quan, X., 2017.?Improving Fmask cloud and cloud shadow?detection in mountainous area for Landsats 4-8?images. Remote Sensing of Environment, 199,?107-119. https://doi.org/10.1016/j.rse.2017.07.002 

  25. Ronneberger, O., Fischer, P., and Brox, T., 2015. U-Net: Convolutional Networks for Biomedical Image?Segmentation. In: Navab, N., Hornegger, J., Wells,?W., Frangi, A. (eds.), Medical Image Computing?and Computer-Assisted Intervention - MICCAI?2015, Springer, pp. 234-241. https://doi.org/10.1007/978-3-319-24574-4_28 

  26. Seo, S. and Jung, H., 2023. A robust collision prediction?and detection method based on neural network?for autonomous delivery robots. ETRI Journal,?45(2), 329-337. https://doi.org/10.4218/etrij.2021-0397 

  27. Shrivastava, A., Gupta, A., and Girshick, R., 2016. Training?region-based object detectors with online hard?example mining. In Proceedings of the 2016 IEEE?Conference on Computer Vision and Pattern?Recognition (CVPR), Las Vegas, NV, USA, June?27-30, pp. 761-769. https://doi.org/10.1109/CVPR.2016.89 

  28. Tian, J., Mithun, N. C., Seymour, Z., Chiu, H., and Kira,?Z., 2021. Striking the right balance: Recall loss?for semantic segmentation. arXiv preprint arXiv: 2106.14917. https://doi.org/10.48550/arXiv.2106.14917 

  29. Wei, J., Huang, W., Li, Z., Sun, L., Zhu, X., Yuan, Q.,?Liu, L., and Cribb, M., 2020. Cloud detection?for Landsat imagery by combining the random?forest and superpixels extracted via energy-driven?sampling segmentation approaches. Remote Sensing?of Environment, 248, 112005. https://doi.org/10.1016/j.rse.2020.112005 

  30. Xie, E., Wang, W., Yu, Z., Anandkumar, A., Alvarez, J.?M., and Luo, P., 2021. SegFormer: Simple and?efficient design for semantic segmentation with?transformers. Advances in Neural Information?Processing Systems, 34, 12077-12090. 

  31. Yeom, J., Ko, J., Hwang, J., Lee, C., Choi, C., and?Jeong, S., 2018. Updating absolute radiometric?characteristics for KOMPSAT-3 and KOMPSAT3A multispectral imaging sensors using well-characterized pseudo-invariant tarps and microtops?II. Remote Sensing, 10(5), 697. https://doi.org/10.3390/rs10050697 

  32. Yu, C., Gao, C., Wang, J., Yu, G., Shen, C., and Sang, N., 2021. BiSeNet v2: Bilateral network with guided?aggregation for real-time semantic segmentation.?International Journal of Computer Vision, 129,?3051-3068. https://doi.org/10.1007/s11263-021-01515-2 

  33. Yuan, Y., Chen, X., and Wang, J., 2020. Object-contextual?representations for semantic segmentation. In:?Vedaldi, A., Bischof, H., Brox, T., Frahm, J. M.?(eds.), Computer Vision - ECCV 2020, Springer,?pp. 173-190. https://doi.org/10.1007/978-3-030-58539-6_11 

  34. Yun, S., Han, D., Oh, S. J., Chun, S., Choe, J., and Yoo,?Y., 2019. Cutmix: Regularization strategy to?train strong classifiers with localizable features.?In Proceedings of the 2019 IEEE/CVF International?Conference on Computer Vision (ICCV), Seoul,?Republic of Korea, Oct. 27-Nov. 2, pp. 6022-6031. https://doi.ieeecomputersociety.org/10.1109/ICCV.2019.00612 

  35. Zhang, J., Li, X., Li, L., Sun, P., Su, X., Hu, T., and?Chen, F., 2020. Lightweight U-Net for cloud?detection of visible and thermal infrared remote?sensing images. Optical and Quantum Electronics,?52(397), 1-14. https://doi.org/10.1007/s11082-020-02500-8 

  36. Zhu, Z., Wang, S., and Woodcock, C. E., 2015. Improvement?and expansion of the Fmask algorithm: cloud,?cloud shadow, and snow detection for Landsats?4-7, 8, and Sentinel 2 images. Remote Sensing?of Environment, 159, 269-277. https://doi.org/10.1016/j.rse.2014.12.014 

저자의 다른 논문 :

활용도 분석정보

상세보기
다운로드
내보내기

활용도 Top5 논문

해당 논문의 주제분야에서 활용도가 높은 상위 5개 콘텐츠를 보여줍니다.
더보기 버튼을 클릭하시면 더 많은 관련자료를 살펴볼 수 있습니다.

관련 콘텐츠

오픈액세스(OA) 유형

GOLD

오픈액세스 학술지에 출판된 논문

이 논문과 함께 이용한 콘텐츠

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로