$\require{mediawiki-texvc}$

연합인증

연합인증 가입 기관의 연구자들은 소속기관의 인증정보(ID와 암호)를 이용해 다른 대학, 연구기관, 서비스 공급자의 다양한 온라인 자원과 연구 데이터를 이용할 수 있습니다.

이는 여행자가 자국에서 발행 받은 여권으로 세계 각국을 자유롭게 여행할 수 있는 것과 같습니다.

연합인증으로 이용이 가능한 서비스는 NTIS, DataON, Edison, Kafe, Webinar 등이 있습니다.

한번의 인증절차만으로 연합인증 가입 서비스에 추가 로그인 없이 이용이 가능합니다.

다만, 연합인증을 위해서는 최초 1회만 인증 절차가 필요합니다. (회원이 아닐 경우 회원 가입이 필요합니다.)

연합인증 절차는 다음과 같습니다.

최초이용시에는
ScienceON에 로그인 → 연합인증 서비스 접속 → 로그인 (본인 확인 또는 회원가입) → 서비스 이용

그 이후에는
ScienceON 로그인 → 연합인증 서비스 접속 → 서비스 이용

연합인증을 활용하시면 KISTI가 제공하는 다양한 서비스를 편리하게 이용하실 수 있습니다.

표면 결함 검출을 위한 데이터 확장 및 성능분석
Performance Analysis of Data Augmentation for Surface Defects Detection 원문보기

전기학회논문지 = The Transactions of the Korean Institute of Electrical Engineers, v.67 no.5, 2018년, pp.669 - 674  

김준봉 (Dept. of Electronics Engineering, Seokyeong University) ,  서기성 (Dept. of Electronics Engineering, Seokyeong University)

Abstract AI-Helper 아이콘AI-Helper

Data augmentation is an efficient way to reduce overfitting on models and to improve a performance supplementing extra data for training. It is more important in deep learning based industrial machine vision. Because deep learning requires huge scale of learning data to learn a model, but acquisitio...

주제어

AI 본문요약
AI-Helper 아이콘 AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

제안 방법

  • CNN 기반 전자제품 표면 결함 검사 실험은 각 결함 마다 3가지 확장 방법을 적용해 정상과 결함을 분류하는 2 클래스 분류 실험으로 수행한다.
  • 본 연구에서는 다양한 표면 결함에 대해서 기하적 변환 외에 작은 결함의 특성에 영향을 끼치는 밝기조절을 추가하여 여러 CNN 네트워크 구조 변화에 대해서 실험한다. 이를 토대로 메탈 케이스의 표면 결함에 대해서 이미지 데이터 확장 방법에 따른 CNN 학습 및 분류 성능의 변화 실험을 수행하고 분석한다.
  • 산업용 부품 결함 이미지에 대해서 결함 종류에 따라 어떤 이미지 확장 방법이 학습에 더 효과적인지 CNN 기반의 딥러닝 기법을 적용하여 실험하고 비교분석하였다. 짙은 얼룩, 스크래치, 찍힘 세 가지 결함에 대해 밝기 조절, 회전, 윈도우 이동의 세 가지 이미지 확장 방법을 적용하였다.
  • 확장 방법을 사용한 실험에서는 결함 이미지 4000장(원본 400장 + 확장 3600장)과 원본 정상 이미지 4000장을 학습에 사용하였고, 평가는 같은 방법을 사용하였다. 위 데이터로 앞서 소개한 세 가지 네트워크에 대해 각각 열두 개 씩 총 36가지를 실험하였다. 표 1은 실험 데이터를 정리한 것이다.
  • 본 연구에서는 다양한 표면 결함에 대해서 기하적 변환 외에 작은 결함의 특성에 영향을 끼치는 밝기조절을 추가하여 여러 CNN 네트워크 구조 변화에 대해서 실험한다. 이를 토대로 메탈 케이스의 표면 결함에 대해서 이미지 데이터 확장 방법에 따른 CNN 학습 및 분류 성능의 변화 실험을 수행하고 분석한다.
  • 학습 시 정상 이미지에 비해 결함 이미지의 수가 부족하므로 학습용 결함 이미지에 대해서만 이미지 확장을 수행했다. 이미지 확장 방법은 회전, 윈도우 이동, 밝기 조절 방법을 적용했으며, 각 이미지는 CNN에 입력될 때 32x32 해상도로 크기를 조절하였다.
  • 산업용 부품 결함 이미지에 대해서 결함 종류에 따라 어떤 이미지 확장 방법이 학습에 더 효과적인지 CNN 기반의 딥러닝 기법을 적용하여 실험하고 비교분석하였다. 짙은 얼룩, 스크래치, 찍힘 세 가지 결함에 대해 밝기 조절, 회전, 윈도우 이동의 세 가지 이미지 확장 방법을 적용하였다.
  • 회전은 71x71 크기 윈도우를 10도씩 회전시켜 확장 이미지를 생성했고, 윈도우 이동은 71x71 크기로 8픽셀씩 이동하며 잘라내어 확장 이미지를 생성했다. 밝기 조절은 영상의 각 픽셀에 실수값을 곱하여 수행하며, 곱해지는 실수 값은 0.

대상 데이터

  • 실험에 사용된 원본 이미지는 스크래치, 찍힘, 짙은 얼룩에 대해 각 종류별로 결함 이미지 500장과 정상 이미지 4100장이다. 그리고 확장된 결함 이미지는 각 결함 종류마다 세 가지 확장을 각각 적용하여 생성된 이미지들 중 종류별로 3600장씩 임의로 선택하여 실험에 사용하였다.
  • 본 연구에서는 널리 알려진 CNN 네트워크 구조인 AlexNet이나 VGGNet에 비해 비교적 단순한 구조의 네트워크를 사용한다. 네트워크 구조가 복잡해지면 충분히 학습시키기 위해서는 많은 양의 이미지가 필요한데, 산업용 데이터의 특성상 제공되는 양이 매우 적다.
  • 실험에 사용된 네트워크에서는 세 개 이하의 컨볼루션 층을 사용하고, 입력 이미지의 크기가 32x32로 작기 때문에 결함에 대한 특징 손실을 적게 하기 위해 세 개 이하의 풀링 층을 사용한다. 그리고 네트워크의 후반부에는 분류를 위한 완전연결 층과 소프트맥스 층이 위치한다.
  • 실험에 사용된 원본 이미지는 스크래치, 찍힘, 짙은 얼룩에 대해 각 종류별로 결함 이미지 500장과 정상 이미지 4100장이다. 그리고 확장된 결함 이미지는 각 결함 종류마다 세 가지 확장을 각각 적용하여 생성된 이미지들 중 종류별로 3600장씩 임의로 선택하여 실험에 사용하였다.
  • 원본 이미지는 100x100 크기의 이미지로 스크래치, 찍힘, 짙은 얼룩, 정상 4개의 클래스로 이루어져있다. 학습 시 정상 이미지에 비해 결함 이미지의 수가 부족하므로 학습용 결함 이미지에 대해서만 이미지 확장을 수행했다.
  • 원본 이미지로만 학습시킨 실험은 결함 이미지 400장, 정상 이미지 400장씩을 학습에 사용하였고, 결함 이미지와 정상 이미지 100장씩에 대해 평가하였다. 확장 방법을 사용한 실험에서는 결함 이미지 4000장(원본 400장 + 확장 3600장)과 원본 정상 이미지 4000장을 학습에 사용하였고, 평가는 같은 방법을 사용하였다.
  • 원본 이미지로만 학습시킨 실험은 결함 이미지 400장, 정상 이미지 400장씩을 학습에 사용하였고, 결함 이미지와 정상 이미지 100장씩에 대해 평가하였다. 확장 방법을 사용한 실험에서는 결함 이미지 4000장(원본 400장 + 확장 3600장)과 원본 정상 이미지 4000장을 학습에 사용하였고, 평가는 같은 방법을 사용하였다. 위 데이터로 앞서 소개한 세 가지 네트워크에 대해 각각 열두 개 씩 총 36가지를 실험하였다.

데이터처리

  • 표 2~4에 각 네트워크별 3가지 성능 지표에 대한 결과가 나와 있다. 실험에 사용된 데이터의 결함과 정상의 수가 같기 때문에 정확도 위주로 분석하고, 재현율과 정밀도에 대해서는 표 5의 평균 mAP 수치를 중심으로 분석한다.

이론/모형

  • 실험 결과를 나타내는 성능지표는 재현율(recall), 정밀도(precision), 정확도(accuracy)를 사용한다. recall은 평가에 사용된 결함 이미지 중 학습된 모델에서 결함으로 분류한 이미지의 비율을 나타내고, precision은 학습된 모델에서 결함으로 분류한 이미지 중 실제 결함 이미지의 비율을 나타낸다.
본문요약 정보가 도움이 되었나요?

질의응답

핵심어 질문 논문에서 추출한 답변
결함 데이터를 확장하기 위해 사용한 이미지 확장 방법은? 결함 데이터를 확장하기 위해 사용한 이미지 확장 방법은 회전(rotation), 윈도우 이동(sliding window), 밝기 조절(brightness variation), 크기 조절(resize) 4가지 방법을 사용한다. 이러한 확장 방법들을 선택한 이유는 결함의 방향, 길이, 결함의 픽셀값 변화 또는 주변 배경과 결함 픽셀값 차이에 변화를 주기 위함이다.
표면 결함의 종류는? 표면 결함의 종류는 스크래치(scratch), 찍힘(stamped), 짙은 얼룩(stain) 등이 존재한다. 이들 결함에 따라서 적용 가능한 데이터 확장 방법이 다를 수 있으며, 효과도 상이할 수 있다.
데이터 확장(augmentation) 방법의 종류와 특징은? 데이터 확장(augmentation) 방법은 크게 기하적 변환과 태스크 기반(task-specific 또는 guided) 확장으로 나뉜다[5]. 기하적 변환은 크기조절, 반전, 자르기, 회전, 이동, 윈도우 분할 등이 있다. 태스크 기반 확장은 데이터를 합성 시 분류에 대한 척도를 고려하여 학습을 수행한다. 물체 인식에 대해서 자르기(crop)와 반전(flip)만을 사용하여 다양한 CNN 네트워크에 대해서 성능 비교를 한 연구가 있다[6].
질의응답 정보가 도움이 되었나요?

참고문헌 (10)

  1. Y. Park, and I. S. Kweon "Ambiguous Surface Defect Image Classification of AMOLED Displays in Smartphones," IEEE Trans. on Industrial Informatics, Vol. 12, No. 2, pp. 597-607, 2016 

  2. J-K. Park, N. Kwon, J-H. and D. Kang "Machine Learning-Based Imaging System for Surface Defect Inspection," International Journal of Precision Engineering and Manufacturing-Green Technology, Vol. 3, No. 3, pp. 303-310, 2016 

  3. H. Choi and K. Seo, "CNN Based Detection of Surface Defects for Electronic Parts," Journal of Korean Institute of Intelligent Systems, Vol. 27, No. 3, pp. 2017. 

  4. H. Choi and K. Seo, "Comparison of CNN Structures for Detection of Surface Defects," The Transactions of the Korean Institute of Electrical Engineers Vol. 66, No. 7, pp. 1100 1104, 2017. 

  5. Mandar Dixit, Roland Kwitt, Marc Niethammer, Nuno Vasconcelos, "AGA, Attribute-Guided Augmentation," arXiv:1612.02559 

  6. Ken Chatfield, Karen Simonyan, Andrea Vedaldi, Andrew Zisserman, "Return of the Devil in the Details: Delving Deep into Convolutional Nets," arXiv:1405.3531 

  7. Andrew G. Howard, "Some Improvements on Deep Convolutional Neural Network Based Image Classification," arXiv:1312.5402 

  8. Ian J. Goodfellow, Jean Pouget-Abadie, Mehdi Mirza, Bing Xu, David Warde-Farley, Sherjil Ozair, Aaron Courville, Yoshua Bengio, "Generative Adversarial Networks," arXiv: 1406.2661 

  9. Jason Wang, Luis Perez, "The Effectiveness of Data Augmentation in Image Classification using Deep Learning," Technical Report, 2017 

  10. A. Krizhevsky, I. Sutskever, and G. Hinton. "ImageNet classification with deep convolutional neural networks", In NIPS, 2012. 

저자의 다른 논문 :

관련 콘텐츠

저작권 관리 안내
섹션별 컨텐츠 바로가기

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

AI-Helper 아이콘
AI-Helper
안녕하세요, AI-Helper입니다. 좌측 "선택된 텍스트"에서 텍스트를 선택하여 요약, 번역, 용어설명을 실행하세요.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.

선택된 텍스트

맨위로