시각장애인을 위한 IoT 접목의 음성인식을 이용한 딥 러닝 웨어러블 디바이스

이정옥; 김경수; 민병인; 김동섭; 박민성; 황규하; 김용태; 남지승

doi:10.14801/jkiit.2023.21.4.57

주제분류

Top 5%

...

저널정보

한국정보기술학회
한국정보기술학회논문지 학술저널
한국정보기술학회논문지 제21권 제4호(JKIIT, Vol.21, No.4)
2023.4 57 - 65 (9page)
DOI : 10.14801/jkiit.2023.21.4.57

저자정보

이정옥 (아이엠알)
김경수 (아이엠알)
민병인 (아이엠알)
김동섭 (아이엠알)
박민성 (아이엠알)

이용수
내서재: 27

내서재에 추가
되었습니다. 내서재에서
삭제되었습니다.

초록·키워드

오류제보하기

이 논문은 시각장애인을 위한 IoT 웨어러블 디바이스에 음성인식 기능과 딥러닝 알고리즘의 적용에 관한 연구를 다루고 있다. 이 기술은 시각장애인이 일상생활에서 겪는 어려움 개선을 목표로 한다. 본 논문에서 제안하는 웨어러블 디바이스는 얼굴 인식, 물건(객체) 인식, 글자 인식, 바코드 인식, 지폐 분류 그리고 IoT 월패드 메뉴 인식 기능을 가진다. 우리는 스마트폰 앱과 IoT 웨어러블 디바이스 연동을 통해 해당 기능을 구현하였다. 마이크를 통해 입력된 사용자의 음성 명령은 구글의 음성인식 API를 이용해 인식 및 분석하였고, 카메라를 통해 입력된 이미지는 딥러닝 알고리즘을 통해 분석하였다. 테스트 결과 모든 기능이 90% 이상의 인식률을 보였고, 이러한 기술들은 시각장애인들의 일상생활에 편의를 제공하고 적극적으로 활용될 수 있을 것으로 기대된다.

This paper deals with the study of speech recognition and deep learning algorithm apply to IoT wearable devices for people with visual impairment. This technology aims to improve difficulties visually impaired faces in everyday life. The device proposed in this paper has various functions faces recognition, object detection, optical character recognition, barcode recognition, bill classification and IoT wallpad menu recognition. We connect smart phone application and IoT wearable device to implement these functions. Voice commands are analyzed by Google"s voice recognition API and anlalyze input images through deep learning algorithm. As a result, We got more than 90% recognition rate from every functions. It is expected that these technologies can provide convenience and actively used in everyday life for visually impaired.

#machine learning #deep learning #object detection #IoT