[논문]A Research on Cylindrical Pill Bottle Recognition with YOLOv8 and ORB

Dae-Hyun Kim; Hyo Hyun Choi

doi:10.9708/jksci.2024.29.02.013

A Research on Cylindrical Pill Bottle Recognition with YOLOv8 and ORB 원문보기

韓國컴퓨터情報學會論文誌 = Journal of the Korea Society of Computer and Information, v.29 no.2, 2024년, pp.13 - 20

Dae-Hyun Kim (Dept. of Computer Science and Engineering, Inha Technical College) , Hyo Hyun Choi (Dept. of Computer Science and Engineering, Inha Technical College)

초록
AI-Helper

본 논문은 영상에서 특정 원통형 약통을 식별할 수 있는 모델 이미지 생성 방식을 제시하고 데이터 수집에 대한 기술을 연구한다. 기존 연구들은 객체 인식과 특정 객체 식별이 분리되어 있어 이미지 스티칭(image stitching) 자동화에 적용하기 어려웠으며, 좌표 기반 이미지 추출 방식이 이미지 스티칭 과정에서 객체 영역 외의 정보도 모델 이미지에 포함시키는 문제를 갖고 있었다. 이를 해결하기 위해 본 논문은 최근에 출시된 YOLOv8(You Only Look Once)의 세그멘테이션(segmentation)기법을 수직축 회전하는 약통 영상에 적용하고 특징점 매칭 알고리즘인 ORB(Oriented FAST and Rotated BRIEF)를 활용하여 모델 이미지 생성을 자동화하였다. 연구 결과, 세그멘테이션 기법을 적용할 경우 특정 약통 식별시 인식률이 향상되었으며 특징점 매칭 알고리즘으로 생성된 모델 이미지는 특정 악통을 정확하게 식별해 낼 수 있었다.

Abstract ▼ AI-Helper

This paper introduces a method for generating model images that can identify specific cylindrical medicine containers in videos and investigates data collection techniques. Previous research had separated object detection from specific object recognition, making it challenging to apply automated image stitching. A significant issue was that the coordinate-based object detection method included extraneous information from outside the object area during the image stitching process. To overcome these challenges, this study applies the newly released YOLOv8 (You Only Look Once) segmentation technique to vertically rotating pill bottles video and employs the ORB (Oriented FAST and Rotated BRIEF) feature matching algorithm to automate model image generation. The research findings demonstrate that applying segmentation techniques improves recognition accuracy when identifying specific pill bottles. The model images created with the feature matching algorithm could accurately identify the specific pill bottles.

주제어

표/그림 (12)

그림 Fig. 1. System process structure
그림 Fig. 2. Yolov8 Pill bottle segmentation
그림 Fig. 3. Image Stitching Process
그림 Fig. 4. pill bottle identification recognition test process
그림 Fig. 5. four-frame stitching (left), six-frame stitching(right) feature matching result
그림 Fig. 6. Affine based image movement and rotation test (left), Laplacian test result (right)
그림 Fig. 7. Created model images
그림 Fig. 8. Four object Accuracy test graph
그림 Fig. 9. Comparison between video-based and segment-based query images
표 Table 1. Recognition test result
그림 Fig. 10. Pill bottle stitching result
표 Table 2. Accuracy comparison matrix between pill bottle segments and their model images

AI 본문요약
AI-Helper

문제 정의

그 때문에 약물 섭취 관리에 컴퓨터 기술을 접목하기 위한 다양한 시도가 활발히 이뤄지고 있다. 이 논문은 개별 약통 인식에 초점을 맞추어 약물 섭취 여부를 관리할 수 있는 시스템에 관한 연구를 진행하였다.

제안 방법

FAST의 한계인 점을 극복하기 위해 픽셀 밝기와 픽셀 간 거리를 이용해 모멘텀을 구한 후 이를 통해 centroid 값을 구한다. Centroid를 적용하여 스케일(scale)과 회전(rotation)에 대해 특징점에 파라미터를 추가했다 (3).
ORB는 특징점 검출 알고리즘으로 FAST, descriptor로 BRIEF(Binary Robust Independent Elementary Features)를 적용한 알고리즘이다 [3]. FAST의 한계인 점을 극복하기 위해 픽셀 밝기와 픽셀 간 거리를 이용해 모멘텀을 구한 후 이를 통해 centroid 값을 구한다. Centroid를 적용하여 스케일(scale)과 회전(rotation)에 대해 특징점에 파라미터를 추가했다 (3).
ORB 알고리즘은 Descriptor로 선정한 BRIEF의 회전 시 성능 저하의 문제를 해결하기 위해 BRIEF를 회전시켜 매칭되는 패턴을 찾는 방법인 r-BRIEF 알고리즘을 제안했다.
하지만 정확도 향상을 위해 프레임 수를 늘리면 한 약통당 12장 이상의 이미지가 필요하기 때문에 메모리 공간에 제약이 생길 수 있다. 그렇기 때문에 적은 수의 이미지로 특정약통을 식별할 수 있는 방법으로 스티칭된 이미지의 인식률도 비교한다. Table 2를 살펴보면 이미지에서 약통의 경계 영역도 accuracy에 영향을 미친다.
첫 번째는 프레임 단위로 약통 세그먼트를 추출할 때 추출된 프레임 개수가 인식률에 영향을 주는지 테스트한다. 두 번째는 특징점이 중복되지 않는 부분만 추출하여 stitching한 이미지 데이터와 특정 프레임 단위로 추출한 이미지들을 stitching한 이미지 데이터 간의 인식률을 비교한다. 해당 비교 테스트를 통해 출력 accuracy를 분석하여 특정 객체 식별여부를 판단할 수 있는 임곗값 설정을 최종 목표로 한다.
위에 언급한 연구들은 특징점 매칭과 객체 인식 시스템이 분리되어 있어 통합적인 프로세스에서의 인식률 테스트의 한계가 있었고, 본 연구에서는 영상에서 자동으로 데이터셋을 형성하고 특징점 매칭을 통해 하나의 단일 데이터 이미지를 생성함으로써 프로세스 통합에 대해 연구하였다. 또한 최신 YOLO의 버전인 v8의 세그먼트 추출 기법을 활용하여 특징점 매칭 시 매칭률을 개선하는 설계을 했다. 이를 통해 본 논문은 단일 이미지 생성의 제약조건이었던 데이터 이미지 추출에 대한 대안을 제시하고 통합 프로세스에서 인식률을 테스트하여 자동화 시스템 구축에 방법을 제시하였다.
본 논문은 2장에서 시스템에 활용한 컴퓨터 비전의 핵심 기술과 모델을 소개하고 특정 객체 식별에 관해 사전연구들을 분석한다. 3장은 제안한 시스템과 테스트 방법에 관해 설명하고 4장에서 각 프로세스에서 연구한 결과를 도출한다.
본 논문은 YOLOv8을 사용하여 약통 세그멘테이션을 수행하고, 그 다음 특징점 매칭의 ORB 알고리즘을 활용하여 특정 약통을 식별 과정을 수행하는 방법을 제안한다. 특징점 매칭 정확도를 향상하기 위해 객체 인식 시 바운딩 박스(bounding box) 추출이 아닌 세그멘테이션을 통해 매칭을 진행하고 ORB 알고리즘을 통해 스티칭할 이미지를 자동으로 군집화한다.
해당 연구에서는 위 두 프로세스를 통합하여 특정 객체를 검출할 수 있는 모델 이미지 생성을 구현하고 이를 평가하는 연구를 진행하였다. 본 연구는 사용자가 손으로 약통을 수직 축으로 회전시키는 영상에서 약통 세그먼트를 추출하고 이를 스티칭하여 특정 객체 인식을 위한 이미지 생성하는 과정까지 자동화하였다.
본 연구를 통해 YOLOv8의 세그먼트 인식 기술과 특징점 매칭의 ORB 알고리즘을 결합하는 시스템으로 약통을 인식 및 식별하는 방법을 제안하였다. 이를 통해 자동으로 영상에서 객체를 인식하고 객체에 대한 다각도 이미지가 통합된 단일 이미지를 특정 약통에 대한 식별에 활용할 수 있다는 결과를 얻었다.
본 연구의 실험은 Google의 Colab laboratory 환경에서 python으로 진행하였다. 크게 3가지 프로세스를 진행하였으며 객체 인식 모델로 YOLOv8을 이용하여 약통 객체의 영역 및 세그먼트를 추출하였다.
수직축으로 회전하는 약통을 촬영한 영상에서 YOLOv8에서 Microsoft사의 CoCo(Common Objects in Context) 모델을 활용하여 사전 학습된 모델을 전이 학습하여 세그먼트를 추출한다.
또한 최신 YOLO의 버전인 v8의 세그먼트 추출 기법을 활용하여 특징점 매칭 시 매칭률을 개선하는 설계을 했다. 이를 통해 본 논문은 단일 이미지 생성의 제약조건이었던 데이터 이미지 추출에 대한 대안을 제시하고 통합 프로세스에서 인식률을 테스트하여 자동화 시스템 구축에 방법을 제시하였다.
[13] 그러나 객체 인식 모델일 경우 타겟 객체가 약통인지 아닌지 검출하는 데 용이하나 해당 약통의 제품이 어떤 제품인지 판별하는 데 있어 제약사항이 많다. 이를 해결하고자 특징점 매칭 알고리즘을 객체 인식 모델 프로세스에 추가해 약통이라는 객체를 인식한 후 해당 약통의 특징점 분석을 통한 특정 약통 인식이라는 프로세스를 설계하였다.
세그먼트 a 번째에게 A역할을, a+1 번째에게 B역할을 줌으로서 특징점을 비교하는 방식이다. 이미지 스티칭 과정에서 검출된 특징점에 RANSAC 거리행렬을 적용한 후 x축을 기점으로 오름차순으로 정렬한다. 좌측 이미지에 해당하는 A의 x 좌표 최댓값과 y 좌표 최솟값, 우측 이미지에 해당하는 B의 x좌표 최소값과 y좌표 최소값을 기준으로 이미지 스티칭을 진행한다.
수직축을 중심으로 회전하며 생성된 모델들은 회전축 근방에서 왜곡 현상이 적다. 이에 신뢰도가 높은 회전축을 중심으로 각각의 모델에 관심영역 (ROI, Region of Interest)을 지정하고 일정 크기로 정규화한 후 영역을 병합하여 모델 이미지를 생성하였다.
테스트는 두 가지 목적을 가지고 있다. 첫 번째는 프레임 단위로 약통 세그먼트를 추출할 때 추출된 프레임 개수가 인식률에 영향을 주는지 테스트한다. 두 번째는 특징점이 중복되지 않는 부분만 추출하여 stitching한 이미지 데이터와 특정 프레임 단위로 추출한 이미지들을 stitching한 이미지 데이터 간의 인식률을 비교한다.
추출된 세그먼트들 집합에서 회전 여부를 파악하기 위해 정면 세그먼트 1개와 n개의 전체 세그먼트 집합과의 특징점 매칭을 진행한다. 각 프레임 간의 객체 회전 연속성과 노이즈 검출을 위해 Affine 함수를 사용한다.
본 연구의 실험은 Google의 Colab laboratory 환경에서 python으로 진행하였다. 크게 3가지 프로세스를 진행하였으며 객체 인식 모델로 YOLOv8을 이용하여 약통 객체의 영역 및 세그먼트를 추출하였다. Image dataset 을 구성하기 위해 특징점 매칭의 ORB 알고리즘을 활용했으며 수집된 약통 이미지 데이터들을 stitching 하여 하나의 단일 이미지 데이터를 생성했다.
특정 약통 식별 테스트 시, 이미지 스티칭으로 생성된 모델 이미지와 비교 이미지를 1픽셀 단위로 이동하면서 특정 약통에 대한 전체 프레임에서의 인식률을 테스트한다(Fig 5). 수직 축 회전 영상에서 프레임을 기준으로 스티칭된 model data는 객체의 영역을 기준으로 이동한다.
본 논문은 YOLOv8을 사용하여 약통 세그멘테이션을 수행하고, 그 다음 특징점 매칭의 ORB 알고리즘을 활용하여 특정 약통을 식별 과정을 수행하는 방법을 제안한다. 특징점 매칭 정확도를 향상하기 위해 객체 인식 시 바운딩 박스(bounding box) 추출이 아닌 세그멘테이션을 통해 매칭을 진행하고 ORB 알고리즘을 통해 스티칭할 이미지를 자동으로 군집화한다. 이러한 접근 방식은 카메라를 통해 약통을 빠르게 감지하고, 객채 인식의 인식률을 높일 수 있는 이미지 데이터 수집을 효율적으로 하며, 개별 약통을 식별하여 약물 관리 작업을 자동화하고 개선하는 데 도움이 될 것으로 기대된다.
특징점 매칭을 통해 객체를 인식하는 연구에서는 객체에 대한 전방향적인 정보를 획득하고자 수직축 회전에서의 이미지들을 Shift 알고리즘을 통해 하여 특정 약통 식별을 한 연구 [8]에서는 0도에서 360도 사이에서 각도별 이미지들을 추출하여 n도 간격들의 이미지들을 스티칭했을 때 인식률의 차이를 비교하였다.
해당 연구에서는 위 두 프로세스를 통합하여 특정 객체를 검출할 수 있는 모델 이미지 생성을 구현하고 이를 평가하는 연구를 진행하였다. 본 연구는 사용자가 손으로 약통을 수직 축으로 회전시키는 영상에서 약통 세그먼트를 추출하고 이를 스티칭하여 특정 객체 인식을 위한 이미지 생성하는 과정까지 자동화하였다.
행렬 B는 이동에 대한 이동 벡터이다. 회전성 검출을 위해 현재 프레임과 다음 프레임과 Affine 함수를 활용하여 변환 매개변수(M)을 구한 후 회전과 픽셀 이동을 분석한다. 흔들린 프레임은 라플라시안(Laplacian) 연산자를 통해 제거하였다.

이론/모형

크게 3가지 프로세스를 진행하였으며 객체 인식 모델로 YOLOv8을 이용하여 약통 객체의 영역 및 세그먼트를 추출하였다. Image dataset 을 구성하기 위해 특징점 매칭의 ORB 알고리즘을 활용했으며 수집된 약통 이미지 데이터들을 stitching 하여 하나의 단일 이미지 데이터를 생성했다.
추출된 세그먼트들 집합에서 회전 여부를 파악하기 위해 정면 세그먼트 1개와 n개의 전체 세그먼트 집합과의 특징점 매칭을 진행한다. 각 프레임 간의 객체 회전 연속성과 노이즈 검출을 위해 Affine 함수를 사용한다.
객체 인식을 위해서 특징점 매칭 기술을 접목한 사례[8]에서는 SIFT 알고리즘을 통해 특징점을 분석을 진행하였으며 원통형 객체를 특정 각도로 수직축 회전하여 이미지를 촬영하여 임의의 객체 영상에서 특징점 매칭의 인식률 실험하였다.
분류된 약통 세그먼트 데이터셋은 연속적인 세그먼트들의 특징점들을 순차적으로 비교하여 이미지 스티칭을 진행하기 위해 슬라이딩 윈도우(Sliding Window) 기법으로 프로세스를 진행한다 (Fig. 3).

성능/효과

s4부터 s6은 프레임을 기준으로 추출된 약통 세그먼트 n개를 수평하게 붙혀 생선한 모델 이미지들이고, s6_orb는 프레임을 기준으로 추출된 약통 세그먼트 6개를 이미지 스티칭 과정(Fig. 3)만을 거친 후 생성된 모델 이미지이며, full_orb는 3장에서 설계한 모든 과정을 거쳐 생성된 모델 이미지이다.
그래프의 데이터 추세는 정면 노출이 적어지는 부분을 인식했을 경우 예측률이 급격하게 떨어짐을 알 수 있고 다시 정면이 노출됨에 따라 예측률이 상승하고 있다. Fig 8에서 다른 추세를 보이는 약통은 빛이 반사되는 재질로 제작된 약 성분 표지 지에 의해 특징점이 텍스트나 도형 등 약통 커버가 아닌 빛의 반사 지점에 의해 특징이 추출되어 상대적으로 반사 지점이 적은 약통의 측면부에서 인식률이 높아지고 있음을 알 수 있다.
YOLOv8은 YOLOv5의 아키텍쳐를 보안을 유지한 백본을 사용한다. YOLOv5의 CSPLayer을 C2F 모듈(2개의 convolution이 부분 교차 병목)로 교체하여 인식 정확도를 향상시켰다. 또한, YOLOv8은 분리된 헤드가 있는 anchor-free 프리 모델을 사용하여 오브젝트니스(objectness), 분류(classfication), 회귀(regression) 과정을 독립적으로 처리한다.
Table 2의 video-based는 영상에서 약통이 인식되면 인식 영역의 x,y축을 기준으로 추출한 후 모델 이미지와 비교했을 때의 인식률이고 segment-based는 영상에서 약통이 인식되면 인식된 약통으 세그먼트를 추출한 후에 모델 이미지와 인식률을 비교한 것이다. 각 이미지들의 인식률의 편차를 살펴보았을 때 최대 0.45까지 차이가 나는 것을 볼 수 있다. 이는 뒷 배경이 제거된 약통의 세그먼트를 추출한 후 특징점 매칭을 진행했을 때 정확도가 향상됨을 의미한다.
이는 회전하는 약통에서 특징을 검출할 때 특징점이 많이 분포하고 있는 약통의 정면부 노출이 감소할수록 특징점 분포가 적은 약통 성분표의 노출이 증가할수록 인식률이 떨어지고 있음을 볼 수 있다. 같은 현상으로 정면 프레임 노출이 줄어들고 문자들이 보이기 시작하는 f4의 테스트 결과를 살펴보았을 때, 특징점은 정상적으로 매칭되고 있으나 매칭되는 특징점이 충분하지 않으며 지역적으로 분포되어 있어 두 이미지의 매칭률이 0.147과 0.14로 현저히 떨어졌음을 볼 수 있다. 즉, 특정 약통을 식별의 정확도를 높이기 위해서는 특징점들이 약통의 전범위에 많이 분포해야 한다는 것을 고려해야 한다.
59로 회전 속도와 상관없이 정확도가 50% 이상 기록이 될 경우에 안정적으로 영상에서 약통 정면이 인식되었다고 판단할 수 있다. 그래프의 데이터 추세는 정면 노출이 적어지는 부분을 인식했을 경우 예측률이 급격하게 떨어짐을 알 수 있고 다시 정면이 노출됨에 따라 예측률이 상승하고 있다. Fig 8에서 다른 추세를 보이는 약통은 빛이 반사되는 재질로 제작된 약 성분 표지 지에 의해 특징점이 텍스트나 도형 등 약통 커버가 아닌 빛의 반사 지점에 의해 특징이 추출되어 상대적으로 반사 지점이 적은 약통의 측면부에서 인식률이 높아지고 있음을 알 수 있다.
이를 통해 자동으로 영상에서 객체를 인식하고 객체에 대한 다각도 이미지가 통합된 단일 이미지를 특정 약통에 대한 식별에 활용할 수 있다는 결과를 얻었다. 영상에서 수집한 세그먼트들을 ORB를 통해 스티칭하여 개별 약통에 대한 모델 이미지를 생성하였으며 정면 인식률 0.912, 측면 인식률 0.355으로 특징점 추출에 제약이 있는 약물설명 부분(후면)의 노출도를 낮추면 특정 약통에 대한 식별이 가능함을 보였다. 하지만 약통 전면에 대한 인식률 평균을 높이기 위해서는 시차 연산과 회전 속도를 고려해야 할 필요가 있다.
또한, YOLOv8은 분리된 헤드가 있는 anchor-free 프리 모델을 사용하여 오브젝트니스(objectness), 분류(classfication), 회귀(regression) 과정을 독립적으로 처리한다. 이 설계를 통해 각 작업을 분리함으로써 모델의 전반적인 정확도를 개선하였다.
45까지 차이가 나는 것을 볼 수 있다. 이는 뒷 배경이 제거된 약통의 세그먼트를 추출한 후 특징점 매칭을 진행했을 때 정확도가 향상됨을 의미한다. 하지만 동일하게 위에서 언급 바와 같이 약물 성분 부분의 노출이 증가할수록 인식률이 저하하기 시작하며 인식률의 편차도 0.
테스트 시 f4, f5, f6에서 인식률이 점차 감소하는 것을 확인할 수 있다. 이는 회전하는 약통에서 특징을 검출할 때 특징점이 많이 분포하고 있는 약통의 정면부 노출이 감소할수록 특징점 분포가 적은 약통 성분표의 노출이 증가할수록 인식률이 떨어지고 있음을 볼 수 있다. 같은 현상으로 정면 프레임 노출이 줄어들고 문자들이 보이기 시작하는 f4의 테스트 결과를 살펴보았을 때, 특징점은 정상적으로 매칭되고 있으나 매칭되는 특징점이 충분하지 않으며 지역적으로 분포되어 있어 두 이미지의 매칭률이 0.
3 이상의 정확도를 기록하고 있음을 알 수 있다. 이를 통해 0.3을 임곗값으로 설정하고 스티칭된 특정 약통 이미지와 타 약통의 특징점 매칭을 진행했을 때 0.3 이상의 정확도가 기록되면 특정 약통이 식별되었다는 결론을 도출할 수 있다. 혹은, 특징점 매칭 시 정확도가 가장 높은 약통이 타겟 약통이라고 지정할 시에도 같은 판단의 결과를 보여주고 있다.
본 연구를 통해 YOLOv8의 세그먼트 인식 기술과 특징점 매칭의 ORB 알고리즘을 결합하는 시스템으로 약통을 인식 및 식별하는 방법을 제안하였다. 이를 통해 자동으로 영상에서 객체를 인식하고 객체에 대한 다각도 이미지가 통합된 단일 이미지를 특정 약통에 대한 식별에 활용할 수 있다는 결과를 얻었다. 영상에서 수집한 세그먼트들을 ORB를 통해 스티칭하여 개별 약통에 대한 모델 이미지를 생성하였으며 정면 인식률 0.
YOLO(You Only Look Once)는 워싱턴 대학의 Joseph Redmon과 Ali Farhadi가 개발했으며 2015년에 출시된 YOLO는 속도와 정확성이 균현 잡힌 모델로 인기를 얻게 되었다. 이후 출시된 버전들은 개선된 속도와 정확성을 보여주고 있으며. 특이한 점은 v6가 v7 이후에 출시되었으며 v6, v7, v8은 속도 개선을 위한 알고리즘과 신경망 구조에서 차이가 있으며 각 모델의 업그레이드가 개별적으로 수행되고 있다.
테스트 결과 약통의 수직축 회전 속도에 따라 y축 즉 정확도가 급격하게 떨어지는 부분에 차이가 있음을 알 수 있다. 정확도 고점의 범위는 0.52~0.59로 회전 속도와 상관없이 정확도가 50% 이상 기록이 될 경우에 안정적으로 영상에서 약통 정면이 인식되었다고 판단할 수 있다. 그래프의 데이터 추세는 정면 노출이 적어지는 부분을 인식했을 경우 예측률이 급격하게 떨어짐을 알 수 있고 다시 정면이 노출됨에 따라 예측률이 상승하고 있다.
혹은, 특징점 매칭 시 정확도가 가장 높은 약통이 타겟 약통이라고 지정할 시에도 같은 판단의 결과를 보여주고 있다. 즉 임곗값 설정을 통해 약통을 식별한다면 빠르게 식별 결과를 필터링해나갈 수 있지만 적절한 임곗값을 설정하지 않는다면 잘못된 판단을 할 수 있고 최대 정확도 검출 방법은 시간이 오래 소요되지만 정확한 결과를 얻을 수 있다.
593이다. 타겟 약통과 다른 약통과 대조를 진행했을 때의 정확도의 최댓값은 0.240, 최솟값 0.048, 평균 0.125로 타겟 약통이 아닌 약통을 매칭 했을 때 인식률을 0.3을 넘지 않고, 타겟 약통을 매칭했을 때 최소 인식률인 0.345를 보아 0.3 이상의 정확도를 기록하고 있음을 알 수 있다. 이를 통해 0.
Fig 9는 약통 4개를 정면을 기준으로 테스트했을 때 수직 회전 영상에서 프레임별 인식률 변화를 보여주는 그래프이다. 테스트 결과 약통의 수직축 회전 속도에 따라 y축 즉 정확도가 급격하게 떨어지는 부분에 차이가 있음을 알 수 있다. 정확도 고점의 범위는 0.
Fig 9과 Table 3은 테스트 목적 두 번째인, 스티칭된 약통의 인식률을 비교하는 그림과 표이며, 연구실에서 임의로 수집한 약통 10개의 ORB 스티칭된 이미지들을 통해 정확도를 비교한 결과이다. 테스트 결과 타겟 약통의 특징점 매칭의 최대 정확도는 0.792, 최소 0.345, 평균 0.593이다. 타겟 약통과 다른 약통과 대조를 진행했을 때의 정확도의 최댓값은 0.
테스트의 목적 첫 번째의 프레임 개수별 인식률의 차이를 비교하는 s4~s12의 평균 인식률을 보았을 때 s4 0.2435, s6 0.2255, s8 0.2921, s12 0.2996으로 s12일 경우가 가장 인식률이 좋다고 판단할 수 있다 (Table 1). 하지만 정확도 향상을 위해 프레임 수를 늘리면 한 약통당 12장 이상의 이미지가 필요하기 때문에 메모리 공간에 제약이 생길 수 있다.
이후 출시된 버전들은 개선된 속도와 정확성을 보여주고 있으며. 특이한 점은 v6가 v7 이후에 출시되었으며 v6, v7, v8은 속도 개선을 위한 알고리즘과 신경망 구조에서 차이가 있으며 각 모델의 업그레이드가 개별적으로 수행되고 있다.
이는 뒷 배경이 제거된 약통의 세그먼트를 추출한 후 특징점 매칭을 진행했을 때 정확도가 향상됨을 의미한다. 하지만 동일하게 위에서 언급 바와 같이 약물 성분 부분의 노출이 증가할수록 인식률이 저하하기 시작하며 인식률의 편차도 0.025(절댓값)까지 떨어졌다.
한편으로 세그먼트의 특징점 매칭 인식률의 임곗값으로 분류한 데이터 집합은 영상에서의 약통과 특징점 매칭 분석을 통해 해당 시스템이 객체의 다각도의 데이터를 수집할 수 있음을 보여준다. 데이터 집합 군이 많을수록 인식률이 증가하기 때문에 많은 메모리 공간이 필요하게 되며 모든 이미지 데이터를 순회하면 런타임이 증가하게 된다.
3 이상의 정확도가 기록되면 특정 약통이 식별되었다는 결론을 도출할 수 있다. 혹은, 특징점 매칭 시 정확도가 가장 높은 약통이 타겟 약통이라고 지정할 시에도 같은 판단의 결과를 보여주고 있다. 즉 임곗값 설정을 통해 약통을 식별한다면 빠르게 식별 결과를 필터링해나갈 수 있지만 적절한 임곗값을 설정하지 않는다면 잘못된 판단을 할 수 있고 최대 정확도 검출 방법은 시간이 오래 소요되지만 정확한 결과를 얻을 수 있다.

후속연구

데이터 집합 군이 많을수록 인식률이 증가하기 때문에 많은 메모리 공간이 필요하게 되며 모든 이미지 데이터를 순회하면 런타임이 증가하게 된다. 데이터 집합 군을 형성할 때 객체의 각도와 조도 등을 고려하여 이미지 자료수집 수 있다면 불필요한 이미지를 필터링하여 메모리를 효율적으로 관리할 수 있을 것으로 예측된다.
하지만 약통 전면에 대한 인식률 평균을 높이기 위해서는 시차 연산과 회전 속도를 고려해야 할 필요가 있다. 모델 이미지가 스티칭 되는 과정에서 표본 선정과 전처리 단계에서 이를 개선한다면 봉안된 시스템이 설계될 수 있을 것이라고 기대한다.
본 연구는 Ultralytics 사가 2023년 1월 출시한 YOLOv8 버전을 사용했으며, 이 버전은 통합 프레임워크를 지원하여 객체의 분류, 세그먼트화, 인식 등 활용도가 높다. YOLOv8은 YOLOv5의 아키텍쳐를 보안을 유지한 백본을 사용한다.
위에 언급한 연구들은 특징점 매칭과 객체 인식 시스템이 분리되어 있어 통합적인 프로세스에서의 인식률 테스트의 한계가 있었고, 본 연구에서는 영상에서 자동으로 데이터셋을 형성하고 특징점 매칭을 통해 하나의 단일 데이터 이미지를 생성함으로써 프로세스 통합에 대해 연구하였다. 또한 최신 YOLO의 버전인 v8의 세그먼트 추출 기법을 활용하여 특징점 매칭 시 매칭률을 개선하는 설계을 했다.
특징점 매칭 정확도를 향상하기 위해 객체 인식 시 바운딩 박스(bounding box) 추출이 아닌 세그멘테이션을 통해 매칭을 진행하고 ORB 알고리즘을 통해 스티칭할 이미지를 자동으로 군집화한다. 이러한 접근 방식은 카메라를 통해 약통을 빠르게 감지하고, 객채 인식의 인식률을 높일 수 있는 이미지 데이터 수집을 효율적으로 하며, 개별 약통을 식별하여 약물 관리 작업을 자동화하고 개선하는 데 도움이 될 것으로 기대된다.
355으로 특징점 추출에 제약이 있는 약물설명 부분(후면)의 노출도를 낮추면 특정 약통에 대한 식별이 가능함을 보였다. 하지만 약통 전면에 대한 인식률 평균을 높이기 위해서는 시차 연산과 회전 속도를 고려해야 할 필요가 있다. 모델 이미지가 스티칭 되는 과정에서 표본 선정과 전처리 단계에서 이를 개선한다면 봉안된 시스템이 설계될 수 있을 것이라고 기대한다.
향후 위와 같은 본 식별 시스템의 제약조건인 시차 연산 제약조건을 개선하여 특정 객체 식별 정확도를 향상시킬 수 있는 시스템을 설계할 계획이며 원통형 약통뿐만 아니라 다각형 약통(약상자)의 특정 객체 식별을 위해 해당 시스템을 적용하여 시스템을 개선해나갈 계획이다.

참고문헌 (14)

Joseph Redmon, and Sentosh Divvala, "You Only Look Once:？Unified, Real-Time Object Detection", arXiv:1506.02640, 9 May？2016
Juan Terven, Diana Cordova-Esparza, "YA Comprehensive Review？of YOLO: From YOLOv1 and Beyond", arXiv:2304.00501, 2 Apr？2023
E. Rublee, V. Rabaud, K. Konolige and G. Bradski, "ORB: An？efficient alternative to SIFT or SURF," 2011 International？Conference on Computer Vision, Barcelona, Spain, 2011, pp.？2564-2571, doi: 10.1109/ICCV.2011.6126544.
Calonder, M., Lepetit, V., Strecha, C., Fua, P. (2010). BRIEF:？Binary Robust Independent Elementary Features. In: Daniilidis,？K., Maragos, P., Paragios, N. (eds) Computer Vision - ECCV？2010. ECCV 2010.
Ultralytics, Ultralytics YOLOv8 Docs https://docs.ultralytics.com/
Q. Deng, Y. Luo, and J. Ge, "Dual threshold based unsupervised？face image clustering," Proceedings of the 2nd International？Conference on Industrial Mechatronics and Automation, pp.？436-439, 2010.
Kyuho Sim, & Guihyung Lee (2021). Neural-network-based Object？Recognition and RANSAC-based Three-dimensional Posture？Estimation for Solving the Pickup Problem of Occluded Parts.？Journal of the Korean Society of Manufacturing Technology？Engineers, 30(5), 372-381, 10.7735/ksmte.2021.30.5.372

상세보기
JO, Ikhyeon, SA, Jaemin, KIM, Yongyu, & NAM, Baek (2022).？Improve Ultra-low Latency Vehicle Identification and Traffic？Precision Based Yolo-v4. Journal of Korean Society of？Transportation, 40(6), 908-920, 10.7470/jkst.2022.40.6.908

상세보기
Joo, Seong Moon, and Lee, Chil woo. "3D Object Recognition？Using Appearance Model Space of Feature Point." KIPS？Transactions on Software and Data Engineering 3, no. 2 (February？28, 2014): 93-100. doi:10.3745/KTSDE.2014.3.2.93.

원문보기 상세보기
L. Magalhaes, B. Ribeiro, N. Alves and M. Guevara, "A three-staged？approach to medicine box recognition," 2017 24º Encontro Portugues？de Computacao Grafica e Interacao (EPCGI), Guimaraes, Portugal,？2017, pp. 1-7, doi:10.1109/EPCGI.2017.8124317.
D. Hu and M. Pan, "Research on a Algorithm of Medicine Box？Tracing Code Location," 2023 3rd International Conference on？Consumer Electronics and Computer Engineering (ICCECE),？Guangzhou, China, 2023, pp. 124-128, doi: 10.1109/ICCECE5？8074.2023.10135290
Edward Rosten, Reid Porter, and Tom Drummond, "Faster and？better: a machine learning approach to corner detection" in IEEE？Trans. Pattern Analysis and Machine Intelligence, 2010, vol 32,？pp. 105-119.
Jianfei Zhang, Sai Ke, "Improved YOLOX Fire Scenario？Detection Method", Hindawi Wireless Communications and？Mobile Computing, Volume 2022, Article ID 9666265, 8 pages
L. Magalhaes, B. Ribeiro, N. Alves and M. Guevara, "A three-staged？approach to medicine box recognition," 2017 24º Encontro Portugues？de Computacao Grafica e Interacao (EPCGI), Guimaraes, Portugal,？2017, pp. 1-7, doi: 10.1109/EPCGI.2017.8124317.？

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증