[논문]시각장애인을 위한 CNN 기반의 점자 변환 및 음성 출력 장치 설계

박승빈; 김봉현

doi:10.20465/kiots.2023.9.3.087

[국내논문] 시각장애인을 위한 CNN 기반의 점자 변환 및 음성 출력 장치 설계
Design of CNN-based Braille Conversion and Voice Output Device for the Blind 원문보기

사물인터넷융복합논문지 = Journal of internet of things and convergence, v.9 no.3, 2023년, pp.87 - 92

박승빈 (서원대학교 정보통신공학과) , 김봉현 (서원대학교 컴퓨터공학과)

초록
AI-Helper

시대가 발전함에 따라 정보가 다양해지고 이를 얻는 방법도 다양해진다. 살아가면서 얻는 정보의 양 중 약 80%는 시각적 감각으로 습득한다. 하지만 시각장애인들은 시각 자료를 해석하는 능력이 제한된다. 그래서 점자라는 시각장애인용 문자가 등장했다. 그러나 시각장애인들의 점자 해독률은 5%에 불과하며 시간에 지남에 따라 다양한 형태의 플랫폼이나 자료를 원하는 시각장애인들의 요구가 늘어나면서 시각장애인들을 위한 개발 및 물품 제작이 이루어지고 있다. 물품 제작의 예로는 점자 도서를 들 수 있는데 이 점자 도서는 장점보단 단점이 많아 보이고 비장애인과 다르게 아직도 정보 접근에 대해서는 많이 어려운 것이 사실이다. 본 논문에서는 시각장애인이 정보를 기존의 방법보다 쉽게 얻을 수 있도록 CNN 기반 점자 변환 및 음성 출력 장치를 설계하였다. 이 장치는 점자로 되어 있지 않고 점자로 제작이 되지 않은 책, 텍스트 이미지나 손글씨 이미지 등을 카메라 인식을 통해 점자로 변환할 수 있도록 하고, 점자로 변환 후 시각장애인들의 요구에 따라서 음성으로 변환해 출력할 수 있는 기능을 설계해 시각장애인들이 정보를 얻을 수 있게 도와주어 삶의 질을 높이고자 한다.

Abstract ▼ AI-Helper

As times develop, information becomes more diverse and methods of obtaining it become more diverse. About 80% of the amount of information gained in life is acquired through the visual sense. However, visually impaired people have limited ability to interpret visual materials. That's why Braille, a text for the blind, appeared. However, the Braille decoding rate of the blind is only 5%, and as the demand of the blind who want various forms of platforms or materials increases over time, development and product production for the blind are taking place. An example of product production is braille books, which seem to have more disadvantages than advantages, and unlike non-disabled people, it is true that access to information is still very difficult. In this paper, we designed a CNN-based Braille conversion and voice output device to make it easier for visually impaired people to obtain information than conventional methods. The device aims to improve the quality of life by allowing books, text images, or handwritten images that are not made in Braille to be converted into Braille through camera recognition, and designing a function that can be converted into voice according to the needs of the blind.

주제어

표/그림 (9)

그림 [Fig. 1] A Braille Shape
그림 [Fig. 2] Braille Specification Plot
그림 [Fig. 3] Typical CNN Structure
그림 [Fig. 4] Convolution Layer
그림 [Fig. 5] Pooling(subsampling)
그림 [Fig. 6] Device Flowchart
그림 [Fig. 7] System Diagram
표 Hardware Parts
그림 [Fig. 8] Hardware, Braille, representation

참고문헌 (18)

S. A. Hwang and S. M. Lee, "A Study on the Utilization？of Alternative Materials for the Visually Impaired？Using Reading Aids Devices," Journal of the Korean？BIBLIA Society for library and Information Science,？Vol.13, No.3, pp.191-211, 2020.
H. J. Kim, J. H. Moon, M. U. Song, S. M. Lee and K.？S. Kong, "OnDot: Braille Training System for the？Blind," The Institute of Internet, Broadcasting and？Communication, Vol.20, No.6, pp.41-50, 2020.
Y. I. Kim and H. W. Moon, "An Examination of the？Current Status and Needs of Braille Literacy？Education for Individuals with Adventitiously Visual？Impairments," The Korean Journal of Visual？Impairment, Vol.33, No.1, pp.1-29, 2017.
M. J. Yoon, J. H. Kang and K. H. Yu, "A Study of？Walking Guide for the Blind by Tactile Display,"？Journal of Institute of Control, Robotics and Systems,？Vol.13, No.8, pp.783-789, 2007.
H. J. Kim, Y. C. Kim, C. J. Park, S. J. Oh and B. J. Lee,？"Auto Braille Translator using Matlab," The Journal of？the Korea institute of electronic communication？sciences, Vol.12, No.4, pp.691-700, 2017.
J. Y. Lee and W. S. Cho, "A Study of Way guide？System Design for a Visual Handicapped in School,"？Journal of the Korea Society of Computer and？Information, Vol.15, No.4, pp.75-82, 2010.
S. H. Seo and S. W. Jang, "Design and Implementation？of a smart shoes module based on Arduino," Journal？of the Korea Institute of Information and Communication？Engineering, Vol.19, No.11, pp.2697-2702, 2015.
H. S. Lee and J. C. Oh, "Design and Implementation？of a Small Server Room Environment Monitoring？System by Using the Arduino," The Journal of the？Korea institute of electronic communication sciences,？Vol.12, No.2, pp.385-390, 2017.
H. Y. Eom and K. H. Lee, "Design of Embodiment-based？Programming Education using Arduino for Middle？School Students," The Journal of the Convergence on？Culture Technology, Vol.6, No.1, pp.471-476, 2020.
Y. G. Kim and E. Y. Cha, "Streamlined GoogLeNet？Algorithm Based on CNN for Korean Character？Recognition," Journal of the Korea Institute of？Information and Communication Engineering, Vol.20,？No.9, pp.1657-1665, 2016.
J. H. Park, J. A. Kim, H. J. Kim and D. H. Kim, "CNN？based modeling and classification for variety of？apples," Journal of D-Culture Archives, Vol.4, No.1,？pp.63-70, 2021.
T. Q. Hieu, S. H. Yeon and J. M. Kim, "Korean？License Plate Recognition Using CNN," Journal of？IKEEE, Vol.23, No.4, pp.1337-1342, 2019.
S. H. Choi, J. H. Kim, J. D. Oh and K. S. Kong, "A？Smart Closet Using Deep Learning and Image Recognition？for the Blind," The Journal of the Institute of Internet,？Broadcasting and Communication, Vol.20, No.6,？pp.51-58, 2020.
H. G. Kim and Y. G. Choi, "Study on the Development？of Working Safety Device for Visually Impaired？Person," The Journal of Korea Institute of Information,？Electronics, and Communication Technology, Vol.9,？No.4, pp.366-372, 2016.
G. Y. Heo, "Implementation of an Arduino Compatible？Modular Kit for Educational Purpose," Journal of the？Korea Institute of Information and Communication？Engineering, Vol.23, No.5, pp.547-554, 2019.
C. G. Kim and J. M. Seo, "An Design and？Implementation of Navigation System for Visually？Impaired Persons Based on Smart Mobile Devices,"？The Journal of the Korea Contents Association,？Vol.15, No.1, pp.24-30, 2015.
S. H. Choi and S. H. Jung, "Performance Improvement？of Fake Discrimination using Time Information in？CNN-based Signature Recognition," Journal of Digital？Contents Society, Vol.19, No.1, pp.205-212, 2018.
N. K. Lee, J. Y. Kim and J. H. Shim, "Empirical Study？on Analyzing Training Data for CNN-based Product？Classification Deep Learning Model," The Journal of？Society for e-Business Studies, Vol.26, No.1,？pp.107-126, 2021.

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증