YOLO알고리즘을 활용한 시각장애인용 식사보조 시스템 개발

• 영문명: Development a Meal Support System for the Visually Impaired Using YOLO Algorithm
• 발행기관: 한국전자통신학회
• 저자명: 이군호(Gun-Ho Lee) 문미경(Mi-Kyeong Moon)
• 간행물 정보: 『한국전자통신학회 논문지』제16권 제5호, 1001~1009쪽, 전체 9쪽
• 주제분류: 공학 > 전자/정보통신공학
• 파일형태: PDF
• 발행일자: 2021.10.31

국문 초록

시각이 온전한 사람들은 식사를 할 때 시각에 대한 의존도를 깊게 인지하지 못한다. 그러나 시각장애인은 식단에 어떤 음식이 있는지 알지 못하기 때문에 옆에 있는 보조인이 시각장애인 수저로 음식의 위치를 시계 방향 또는 전후좌우 등 일정한 방향으로 설명하여 그릇 위치를 확인한다. 본 논문에서는 시각장애인이 스마트폰의 카메라를 이용하여 자신의 식단을 비추면 각각의 음식 이미지를 인식하여 음성으로 음식의 이름을 알려 주는 식사보조 시스템의 개발 내용에 대해 기술한다. 이 시스템은 음식과 식기도구(숟가락)의 이미지를 학습한 YOLO모델을 통해 숟가락이 놓인 음식을 추출해 내고, 이 음식이 무엇인지를 인식하여 이를 음성으로 알려준다. 본 시스템을 통해 시각장애인은 식사보조인의 도움없이 식사를 할 수 있음으로써 자립의지와 만족도를 높일 수 있을 것으로 기대한다.

영문 초록

Normal people are not deeply aware of their dependence on sight when eating. However, since the visually impaired do not know what kind of food is on the table, the assistant next to them holds the blind spoon and explains the position of the food in a clockwise direction, front and rear, left and right, etc. In this paper, we describe the development of a meal assistance system that recognizes each food image and announces the name of the food by voice when a visually impaired person looks at their table using a smartphone camera. This system extracts the food on which the spoon is placed through the YOLO model that has learned the image of food and tableware (spoon), recognizes what the food is, and notifies it by voice. Through this system, it is expected that the visually impaired will be able to eat without the help of a meal assistant, thereby increasing their self-reliance and satisfaction.

목차

Ⅰ. 서론

Ⅱ. 관련 연구

Ⅲ. 시스템 개발

Ⅳ. 모델 평가 및 테스트

Ⅴ. 결론 및 향후개선 방향

키워드

컴퓨터 비전 딥러닝 YOLO 시각 장애인 공통 영역 안드로이드 음성 합성 시스템 Computer Vision Deep Learning YOLO Visually Impaired Intersection over Union(IoU) Android Text-to-Speech