안면 인식 기반의 한국어 입력 인터페이스를 통한 효율적인 모바일 필기 시스템
Efficient Mobile Writing System with Korean Input Interface Based on Face Recognition
0
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
가상 키보드방식의 문자 입력 시스템은 고정된 버튼 위치를 터치하여 입력하는 방식으로 손가락의 움직임이 불편한 사람들이나 노인들은 입력하기가 매우 불편하다. 이러한 문제를 완화시키고자, 본 논문에서는 모바일 디바이스의 RGB 카메라를 통해 얻은 영상과 사용자의 움직임을 통해 자판 입력과 필기 기능이 가능한 효율적인 프레임워크를 제안한다. 이 시스템을 개발하기 위해 얼굴인식을 활용하여 입력 영상으로부터 컨트롤 좌표를 계산하고, 이 좌표 값을 이용하여 한글을 입력하고 조합할 수 있는 인터페이스 개발한다. 얼굴인식을 기반으로 계산된 컨트롤 위치는자판의 글자를 선택하고 전달하는 포인터 역할을 하며, 마지막으로 전달된 글자들을 조합하여 한글 자판 기능을 수행할 수 있도록 통합한다. 본 연구의 결과는 얼굴인식 기술을 활용한 효율적인필기 시스템이며, 이 시스템을 사용하면 일반인 뿐 만 아니라 신체가 불편한 지체장애인의 의사소통 및 특수교육 환경도 개선시킬 수 있을 거라 기대한다.
Abstract
The virtual Korean keyboard system is a method of inputting characters by touching a fixed position. This system is very inconvenient for people who have difficulty moving their fingers. To alleviate this problem, this paper proposes an efficient framework that enables keyboard input and handwriting through video and user motion obtained through the RGB camera of the mobile device. To develop this system, we use face recognition to calculate control coordinates from the input video, and develop an interface that can input and combine Hangul using this coordinate value. The control position calculated based on face recognition acts as a pointer to select and transfer the letters on the keyboard, and finally combines the transmitted letters to integrate them to perform the Hangul keyboard function. The result of this paper is an efficient writing system that utilizes face recognition technology, and using this system is expected to improve the communication and special education environment for people with physical disabilities as well as the general public.
참고문헌 (22)
- S. E. Park, "An Input Method for Hangul Character and Implementation for Personal Digital Assistant", Proc. of Fall Conference of KIISE, 21(2), pp.657~660 (1994)
- W. H. Choi, "Apparatus and Method for Inputting the Korean Alphabet Based on the Character-Generative Principles of HUNMINJUNGEUM, Patent no. 1999-052648", ~ (1999)
- J. W. Kim, "Apparatus for Inputting Key and Method for Inputting Character by Direction Key, Patent no. 2001-0006208", 2001~
- "Share-typing"[URL]
- 강승식, "정보통신 단말기를 위한 한글 모음 입력 시스템", 정보처리학회 논문지, 12(4), pp.507~512 (2005), 한국정보처리학회
- 엄태정, "시각 장애인을 위한 스마트폰 기반 점자형 문자 입력 시스템설계", 융합보안 논문지, 12(1), pp.63~70 (2012), 한국융합보안학회
- 2011 Survey on Impaired People, "Y. C. Byun", ~, pp.Research Report 2011-82 (2012)
- 김현영, "Keyboard 삽입 형 IR 모듈을 이용한 제스처 인식 기반 인터페이스", 석사, 디지털미디어, pp.2011
- D. H. Kim, "A Hangul Input Interface Using Continuous Gestures and Language Models", Proc. of KCC2005, pp.586~588 (2005)
- Won Il Lee, "Natural Language Processing for Korean Speech Recognition", Proc. of KCC2005, pp.586~588 (2005)
- Sang Hun Jeong, "The Study on Phonetical Information for Speech Recognition, The Contents and Language Phenomena of Seokbosangjeol", 49, pp.135~160 (2007)
- "Keyboard for Android"[URL]
- Jared Cechanowicz, "Stylus based text input using expanding CIRRIN", AVI '06 (2006)
- Gennaro Costagliola, "Performances of Multiple-Selection Enabled Menus in Soft Keyboards", DMS'09 - The 15th International Conference on Distributed Multimedia Systems, pp.359~364 (2009)
- Amberkar, Aditya, "Speech Recognition using Recurrent Neural Networks", International Conference on Current Trends towards Converging Technologies, pp.1~4 (2018)
- Lim, Chee Peng, "Speech recognition using artificial neural networks", Proceedings of the First International Conference on Web Information Systems Engineering, 1, pp.419~423 (2000)
- Graves, Alex, "Hybrid speech recognition with deep bidirectional LSTM", IEEE workshop on automatic speech recognition and understanding, pp.273~278 (2013)
- Sundermeyer, Martin, "LSTM neural networks for language modeling", Thirteenth annual conference of the international speech communication association (2012)
- 경왕준, "다중크기 회색계 알고리즘 기반의 통합된 보정 계수를 이용한 바랜 영상 개선", 한국통신학회논문지, 39(8), pp.459~466 (2014), 한국통신학회
- Schneider, Steffen, "wav2vec: Unsupervised pre-training for speech recognition", arXiv preprint arXiv:1904.05862, ~ (2019)
- Tian, Xu, "Deep LSTM for large vocabulary continuous speech recognition", arXiv preprint arXiv : 1703. 07090, ~ (2017)
- Sriram, Anuroop, "Robust speech recognition using generative adversarial networks", 2018 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP), pp.5639~5643 (2017)