본문 바로가기
KERD
논문KCI 등재

시각 장애인을 위한 지능형 객체인식 및 음성 서비스 개발 아키텍쳐 연구

A Development Architecture Research of Intelligent Object Recognition and Voice Service for the Visually Impaired

0

조회

0

다운로드

1

인용

0

참고문헌

키워드

주제분류학제간연구

초록

정보기술의 발전으로 일상 생활은 편리해 졌으며 다양한 정보기술 서비스를 통해 문화적 혜택을 누리고 있다. 그러나 장애인들은 정보기술의 접근성 한계로 인해 다양한 정보기술 서비스를 제공 받지 못하고 있다. 이에, 본 논문에서는 장애인에게 정보기술 서비스의 접근성을 높이기 위한 객체인식 및 음성 서비스 아키텍쳐를 제안하고자 한다. 특히 시각장애인이 사물(객체)의 인식 서비스와 음성 서비스를 제공받을 수 있도록 한다. 시각장애인은 모바일 디바이스를 이용하여 원하는 사물을 인식하고, 인식된 객체 정보는 음성으로 서비스하여 시각장애인이 어떤 사물인지를 인식할 수 있도록 한다. 모바일 환경에서 객체를 인식할 수 있도록 딥러닝 기반의 학습된 모델인 모바일넷 모델을 이용하여 객체를 인식할 수 있도록 한다. 객체인식 서비스는 인식된 객체에 대해 음성 서비스를 제공할 수 있도록 음성인식과 음성변환 서비스를 제공하는 아마존의 알렉사 서비스와 연동한다. 본 논문에서는 이러한 객체 인식과 음성 서비스를 기반으로 3가지 측면에서 서비스를 제공할 수 있는 기반 아키텍쳐를 제안한다. 첫째는 인식된 객체에 대한 음성 서비스이며, 둘째는 인식 객체에 대한 개인화 음성 서비스, 마지막으로 알렉사 서비스를 이용하여 인식 객체에 대한 지식 서비스를 제공한다.

Abstract

The development of information technology has made daily life convenient and enjoys cultural benefits through various information technology services. However, due to the limited accessibility of information technology, disabled people do not receive various information technology services. Therefore, in this paper, we propose object recognition and voice service architecture to improve accessibility of information technology service for the disabled. In particular, it enables the visually impaired to receive recognition services and voice services for objects. The visually impaired person recognizes the desired objects using the mobile device, and the recognized object information is provided by voice so that the visually impaired person can recognize the object. In order to recognize the object in the mobile environment, it is possible to recognize the object using the MobileNet model which is a learned model based on the deep learning. The object recognition service works with Amazon's Alexa service, which provides speech recognition and voice conversion services to provide voice services for recognized objects. In this paper, we propose a base architecture that can provide services in three aspects based on object recognition and voice service. The first one is the voice service for the recognized object, the second is the personalized voice service for the recognition object, and finally the knowledge service for the recognition object using the Alexa service.

참고문헌 (16)

  1. "TensorFlow Lite"[URL]
  2. "MobileNets: Open-Source Models for Efficient On-Device Vision"[URL]
  3. C. Szegedy, "Rethinking the inception architecture for computer vision", CVPR (2016)
  4. "On-Device Conversational Modeling with TensorFlow Lite"[URL]
  5. A. G. Howard, "MobileNets:Efficient convolutional neural networks for mobile vision applications", ~ (2017)
  6. J. Jin, "Flattened convolutional neural networks for feedforward acceleration", ~ (2014)
  7. C. Szegedy, "Rethinking the inception architecture for computer vision", ~ (2015)
  8. "Apple Siri"[URL]
  9. "MicroSoft Cortana"[URL]
  10. "Amazon Alexa"[URL]
  11. "Alexa Skills Kit"[URL]
  12. 고병철, "시각장애인 보조를 위한 영상기반휴먼 행동 인식 시스템", 정보과학회논문지, 42(1), pp.138~143 (2015), 한국정보과학회
  13. J. W. Lee, "Design and implementation of a cursor Information Technology", 14(4), pp.181~186 (2016)
  14. 이종원, "객체의 분리와 확대 기능을 이용한 저시력인용 커서의 설계 및 구현", 한국정보기술학회논문지, 13(8), pp.133~138 (2015), 한국정보기술학회[DOI]
  15. "Alexa Voice Service"[URL]
  16. "AWS Lambda"[URL]

관련 논문AI추천

이 간행물의 다른 논문 (9건)