[논문]YOLO알고리즘을 활용한 시각장애인용 식사보조 시스템 개발

이군호; 문미경

doi:10.13067/jkiecs.2021.16.5.1001

초록
AI-Helper

시각이 온전한 사람들은 식사를 할 때 시각에 대한 의존도를 깊게 인지하지 못한다. 그러나 시각장애인은 식단에 어떤 음식이 있는지 알지 못하기 때문에 옆에 있는 보조인이 시각장애인 수저로 음식의 위치를 시계방향 또는 전후좌우 등 일정한 방향으로 설명하여 그릇 위치를 확인한다. 본 논문에서는 시각장애인이 스마트폰의 카메라를 이용하여 자신의 식단을 비추면 각각의 음식 이미지를 인식하여 음성으로 음식의 이름을 알려주는 식사보조 시스템의 개발 내용에 대해 기술한다. 이 시스템은 음식과 식기도구(숟가락)의 이미지를 학습한 YOLO모델을 통해 숟가락이 놓인 음식을 추출해 내고, 이 음식이 무엇인지를 인식하여 이를 음성으로 알려준다. 본 시스템을 통해 시각장애인은 식사보조인의 도움없이 식사를 할 수 있음으로써 자립의지와 만족도를 높일 수 있을 것으로 기대한다.

Abstract ▼ AI-Helper

Normal people are not deeply aware of their dependence on sight when eating. However, since the visually impaired do not know what kind of food is on the table, the assistant next to them holds the blind spoon and explains the position of the food in a clockwise direction, front and rear, left and r...

Normal people are not deeply aware of their dependence on sight when eating. However, since the visually impaired do not know what kind of food is on the table, the assistant next to them holds the blind spoon and explains the position of the food in a clockwise direction, front and rear, left and right, etc. In this paper, we describe the development of a meal assistance system that recognizes each food image and announces the name of the food by voice when a visually impaired person looks at their table using a smartphone camera. This system extracts the food on which the spoon is placed through the YOLO model that has learned the image of food and tableware (spoon), recognizes what the food is, and notifies it by voice. Through this system, it is expected that the visually impaired will be able to eat without the help of a meal assistant, thereby increasing their self-reliance and satisfaction.

주제어

표/그림 (9)

그림 그림 1 검색 이미지와 실제 촬영 이미지의 차이 Fig. 1 The difference between the search image and the actual shot image
그림 그림 2 AiHub의 한식 데이터셋 Fig. 2 Korean food dataset on AiHub
그림 그림 3 음식 결정 프로세스 Fig. 3 Food decision process
그림 그림 4. 시스템 아키텍처 Fig. 4 System architecture
그림 그림 5. 과적합 테스트 결과 Fig. 5 Overfit Test Results
그림 그림 6. 접시에 담긴 쌀밥 감지 테스트 Fig. 6 Plated rice detection test
표 표 1. Custom YOLO 모델 평가 수치 Table 1. Custom YOLO model evaluation results
그림 그림 7. 일반 그릇에 담긴 쌀밥 감지 테스트 Fig. 7 Rice detection test in a regular bowl
그림 그림 8. 음식 검출 테스트 Fig. 8 food detection test

참고문헌 (10)

Korean Consumer Agency, "Investigation of the Safety Status of Walking for the Visually Impaired," Safety Report, Feb. 2021. pp.1-27.
C. Ban, D. H. Kim, and B. Choi, "Design and Implementation of Order Settlement System Using Artificial Intelligence Speaker," J. of The Korea Institute of Electronic Communication Sciences, vol. 14, no. 6, 2019, pp. 1181-1186.

원문보기 상세보기
Y. Han, J. Sim, G. Kim, H. Lee, and J. Sin, "Walking Assistance Device for Prevention of Accidents of Visually Impaired People," J. of The Korea Institute of Electronic Communication Sciences, vol. 14, no. 6, 2019, pp. 1241-1248.

원문보기 상세보기
B. Liyuan and P. Younghuan."Application research on dining experiences of visually impaired users based on FAST method," In Proc. of Ergonomics Society of Korea, Oct. 2020. pp.99-103.
W.-S. Lee, S.-Y. Park, and K.-H. Ye, "A Study on the Quality of Life depending on the Degree of Visual Impairment - With Activities of Daily Living and Instrumental Activities of Daily Living," J. of Korean Ophthalmic Optics Society, vol. 23, no. 3, Sep. 2018. pp.203-212.

상세보기
S. ark, alvanov, C. ee, N. Jeong, Y. ho, and H. Je, "The development of food image detection and recognition model of Korean food for mobile dietary management," Nutrition Research and Practice, vol. 13, no. 6, Dec. 2019, pp. 521-528.

원문보기 상세보기
S. Lee, E. Hong, and J.Lee, "Deep Learning Technology for Smart Diet Management," Kakao Enterprise, TECH&, Oct. 2020.
S. Ruder, "An overview of gradient descent optimization algorithms", arXiv preprint arXiv:1609.04747, 2016.
S. ee and M. ang, "Implementation of Object Detection and Voice Guidance System for The Visually Handicapped using Object Recognition Technology," J. of the Institute of Electronics and Information Engineers, vol. 55, no. 11, Nov. 2018, pp. 65-71.

상세보기
J. oo, D. an, C. Yr, and U. h, "YOLO-based Walking Assistance Application for Blind People," Proc. of the Korean Information Science Society Conference Research and Practice, Jeju, Korea, June 2019, pp. 1776-1778.

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증

YOLO알고리즘을 활용한 시각장애인용 식사보조 시스템 개발
Development a Meal Support System for the Visually Impaired Using YOLO Algorithm 원문보기

초록
AI-Helper

Abstract ▼ AI-Helper

주제어

표/그림 (9)

표/그림 (9)

참고문헌 (10)

이 논문을 인용한 문헌

저자의 다른 논문 :

관련 콘텐츠

원문 보기

원문 URL 링크

오픈액세스(OA) 유형

이 논문과 함께 이용한 콘텐츠

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

선택된 텍스트

연합인증

YOLO알고리즘을 활용한 시각장애인용 식사보조 시스템 개발 Development a Meal Support System for the Visually Impaired Using YOLO Algorithm 원문보기

초록 용어보기논문에서 용어와 풀이말을 자동 추출한 결과로, 시범 서비스 중입니다. AI-Helper

Abstract ▼ AI-Helper

주제어

표/그림 (9) 모든 표/그림 보기

표/그림 (9) 슬라이드로 보기

참고문헌 (10)

이 논문을 인용한 문헌

저자의 다른 논문 :

문미경 (37)

관련 콘텐츠

원문 보기

원문 URL 링크

오픈액세스(OA) 유형

이 논문과 함께 이용한 콘텐츠

AI-Helper ※ AI-Helper는 오픈소스 모델을 사용합니다.

선택된 텍스트

YOLO알고리즘을 활용한 시각장애인용 식사보조 시스템 개발
Development a Meal Support System for the Visually Impaired Using YOLO Algorithm 원문보기

초록
AI-Helper

표/그림 (9)

표/그림 (9)