시선 깊이 추정 기법을 이용한 OST-HMD 자동 스위칭 방법
Method for Automatic Switching Screen of OST-HMD using Gaze Depth Estimation
1
조회
0
다운로드
2
인용
0
참고문헌
키워드
초록
본 논문에서는 시선 깊이 추정 기술을 이용한 OST-HMD의 자동화면 on/off 기능을 제안한다. 제안하는 방법은 MLP (Multi-layer Perceptron)을 이용하여 사용자의 시선 정보와 보는 물체의 거리를 학습 한 후, 시선 정보만 입력하여 거리를추정한다. 학습 단계에서는 착용 할 수 있는 양안 추적기를 사용하여 시선 관련 특징을 얻는다. 그런 다음 이 특징을 다층 퍼셉트론 (MLP: Multi-layer Perceptron)에 입력하여 학습하고 모델을 생성한다. 추론 단계에서는 안구 추적기로부터 실시간으로시선 관련 특징을 얻고 이를 MLP에 입력하여 추정 깊이 값을 얻는다. 마지막으로 HMD의 화면을 켜거나 끌 것인지 여부를결정하기 위해 이 계산결과를 활용한다. 제안된 방법의 가능성을 평가하기 위해 프로토타입을 구현하고 실험을 수행하였다.
Abstract
In this paper, we propose automatic screen on / off method of OST-HMD screen using gaze depth estimation technique. The proposed method uses MLP (Multi-layer Perceptron) to learn the user's gaze information and the corresponding distance of the object, and inputs the gaze information to estimate the distance. In the learning phase, eye-related features obtained using a wearable eye-tracker. These features are then entered into the Multi-layer Perceptron (MLP) for learning and model generation. In the inference step, eye - related features obtained from the eye tracker in real time input to the MLP to obtain the estimated depth value. Finally, we use the results of this calculation to determine whether to turn the display of the HMD on or off. A prototype was implemented and experiments were conducted to evaluate the feasibility of the proposed method.
참고문헌 (19)
- M. Kassner, "Pupil: An Open Source Platform for Pervasive Eye Tracking and Mobile Gaze-based Interaction", Proc. 2014 ACM Int. J t. Conf. Pervasive Ubiquitous Comput. Adjun. Publ., pp.1151160~ (2014)
- M. L. Mele, "Gaze and eye-tracking solutions for psychological research", Cogn. Process., 13(1 SUPPL) (2012)
- K. Wang, "Deep eye fixation map learning for calibration-free eye gaze tracking", Proc. Ninth Bienn. ACM Symp. Eye Track. Res. Appl. - ETRA '16, pp.47~55 (2016)
- "Gamasutra - Windows to the soul: Fove makes a case for eye-tracking VR games" (2015)[URL]
- S. Julier, "Information filtering for mobile augmented reality", Proc. - IEEE ACM Int. Symp. Augment. Reality, ISAR 2000, pp.3~11 (2000)
- T. Toyama, "A natural interface for multi-focal plane head mounted displays using 3D gaze", Proc. 12th Int. Work. Conf. Adv. Vis. Interfaces (AVI 2014), 2, pp.25~32 (2014)
- Y. M. Kwon, "Experimental researches on gaze-based 3D interaction to stereo image display", Technol. E-Learning Digit. Entertain. Proc., 3942, pp.1112~1120 (2006)
- J. W. Lee, "3D gaze tracking method using Purkinje images on eye optical model and pupil", Opt. Lasers Eng., 50(5), pp.736~751 (2012)[DOI]
- Y. Lee, "Estimating Gaze Depth Using Multi-Layer Perceptron", International Symposium on Ubiquitous Virtual Reality (ISUVR), pp.26~29 (2017)
- B. Benninger, "Google Glass, ultrasound and palpation: The anatomy teacher of the future?", Clin. Anat., 28(2), pp.152~155 (2015)[DOI]
- "IEEE Spectr.", 2016, 21~
- P. Olson, "Epson Smart Glasses Browse YouTube With A Nod And Tilt Of The Head", pp.9~ (2013), Forbes.com
- 박재승, "시선추적형 가상현실기기를 통한 광고분석 시스템", 스마트미디어저널, 5(3), pp.62~66 (2016), (사)한국스마트미디어학회
- 김영상, "증강현실을 적용한 관광지 사물인식 실감체험 앱 콘텐츠 구현", 스마트미디어저널, 5(1), pp.122~129 (2016), (사)한국스마트미디어학회
- 이영천, "마커리스 트래킹 기반 증강현실을 이용한 문화콘텐츠 개발", 스마트미디어저널, 5(4), pp.90~95 (2016), (사)한국스마트미디어학회
- K. Essig, "A neural network for 3D gaze recording with binocular eye trackers", Int. J . Parallel, Emergent Distrib. Syst., 21, pp.79~95 (2006)[DOI]
- A. T. Duchowski, "Measuring gaze depth with an eye tracker during stereoscopic display", Proceedings of the ACM SIGGRAPH Symposium on Applied Perception in Graphics and Visualization - APGV '11, 1(212), pp.15~ (2011)
- Y. Lee, "A Remote Collaboration System with Empathy Glasses", Adjunct Proceedings of the 2016 IEEE International Symposium on Mixed and Augmented Reality, ISMAR-Adjunct 2016, pp.342~343 (2016)
- F. Pedregosa, "Scikit-learn: Machine Learning in Python", J . Mach. Learn. Res., 12, pp.2825~2830 (2012)