동공 움직임, 각막 반사광 및 Kalman Filter 기반 시선 추적에 관한 연구
A Study on Gaze Tracking Based on Pupil Movement, Corneal Specular Reflections and Kalman Filter
0
조회
0
다운로드
3
인용
0
참고문헌
키워드
초록
본 연구에서는 모니터, 카메라 및 눈동자 좌표계간의 복잡한 3차원 관계를 고려하지 않고, 동공의 중심 위치와 모니터의 구석에 설치된 적외선 조명에 의한 네 개의 조명 반사광 사이의 관계를 사용하여 2차원적인 변환 방법으로 사용자의 시선 위치를 파악한다. 동공중심과 조명 반사광을 정확하게 추출하고, 이를 통해 계산된 시선 위치 계산의 정확도에 영향을 줄 수 있는 오차 요소들을 보정하는 것이 본 연구의 목적이다. 이를 위하여, 동공 중심을 통해 계산된 시선위치와 실제 시선 축이 이루는 카파에러를 초기 1회의 사용자 캘리브레이션을 통해 보정하였다. 또한, 칼만 필터를 기반으로 눈의 급격한 움직임 변화에도 각막 조명 반사광을 안정적으로 추적하여 시선 위치를 정확하게 추적한다. 실험 결과, 제안한 연구방법의 시선 위치 추출 오차는 눈의 급격한 움직임 변화에 상관없이 약 1.0°를 나타냈다.
Abstract
In this paper, we could simply compute the user's gaze position based on 2D relations between the pupil center and four corneal specular reflections formed by four IR-illuminators attached on each corner of a monitor, without considering the complex 3D relations among the camera, the monitor, and the pupil coordinates. Therefore, the objectives of our paper are to detect the pupil center and four corneal specular reflections exactly and to compensate for error factors which affect the gaze accuracy. In our method, we compensated for the kappa error between the calculated gaze position through the pupil center and actual gaze vector. We performed one time user calibration to compensate when the system started. Also, we robustly detected four corneal specular reflections that were important to calculate gaze position based on Kalman filter irrespective of the abrupt change of eye movement. Experimental results showed that the gaze detection error was about 1.0 degrees though there was the abrupt change of eye movement.
참고문헌 (30)
- M. Yamato, "Quick Button Selection with Eye Gazing for General GUI Environments", International Conference on Software: Theory and Practice, pp.712~719 (2000)
- 이의철, "눈동자 시선 추적에 의한 3차원 1인칭 슈팅 게임", 정보처리학회논문지B, 12(4), pp.465~472 (2005), 한국정보처리학회
- L. E. Sibert, "Evaluation of Eye Gaze Interaction", Proc. of the CHI’00, pp.281~288 (2000), ACM
- C. H. G. Wright, "Hybrid Eye Tracking for Computer-aided Retinal Surgery", Biomedical Sciences Instrumentation, 32, pp.225~245 (1996)
- Richard S. E. Keefe, "Eye Tracking, Schizophrenic Symptoms, and Schizotypal Personality Disorder", European Archives of Psychiatry and Clinical Neuroscience, 239(1), pp.39~42 (1989)
- A. Azarbayejani, "Visual Controlled Graphics", IEEE Transactions on Pattern Analysis and Machine Intelligence, 15(6), pp.602~605 (1993)
- T. D. Rikert, "Gaze Estimation Using Morphable Models", Proc of the 3rd International Conference on Face and Gesture Recognition, pp.436~441 (1998)
- S. W. Shih, "A Novel Approach to 3-D Gaze Tracking Using Stereo Cameras", IEEE Trans. on SMC, Part B,, pp.234~245 (2004)
- D. H. Yoo, "Non-Intrusive Eye Gaze Estimation without Knowledge of Eye Pose", Proceedings of the Sixth IEEE International Conference on Automatic Face and Gesture Recognition, pp.785~790 (2004)
- 고유진, "적외선 환경에서 얼굴 및 눈동자 움직임이 자유로운 시선 위치 추적에 대한 연구", 2006년 한국 차세대 컴퓨팅 학회 논문 발표회 (2006)
- R. N. Aslin, "Automated Corneal- Reflection Eye Tracking in Infancy: Methodological Developments and Applications to Cognition", Lawrence Erlbaum Associates, Inc., Infancy, 6(2), pp.155~163 (2004)
- You Jin Ko, "A Study on Robust Eye Gaze Tracking System Allowing the Natural Facial Movements", ACCV'07 Workshop on Multi- dimensional and Multi-view Image Processing (2007)
- Y. J. Ko, "A Robust Gaze Detection Method by Compensating for Facial Movements Based on Corneal specular reflections", Pattern Recognition Letters, 29(10), pp.1474~1485 (2008)
- E. C. Lee, "Fake Iris Detection By Using the Purkinje Image", Lecture Notes in Computer Science (ICB’06), 3832, pp.397~403 (2006)
- F. A. Jenkins, "Fundamentals of Optics Fourth edition" (1981), McGraw-Hill
- J. Zhu, "Subpixel Eye Gaze Tracking", in Proc. Fifth IEEE International Conference on Automatic Face and Gesture Recognition, pp.124~129 (2002)
- A Study on Eye Gaze Estimation Method Based on Cornea Model of Human Eye, "E. C. Lee", INRIA, 307~317 (2007)
- D. H. Cho, "A Study on Robust Iris Detection for User Authentication in Mobile Phone", 4th International Conference on Asian Language Processing and Information Technology (ALPIT 2005), pp.61~66 (2005)
- G.A.Baxes, "Digital Image Processing-Principles and Application" (1994), Wiley
- N.Otsu, "A Threshold Selection Method from Gray-Level Histograms", Trans. Systems, Man, and Cybernetics, 9(1), pp.62~66 (1979)
- P. Artal, "The Human Eye is An Example of Robust Optical Design", Journal of Vision, 6(1), pp.1~7 (2006)
- Zhiwei Zhu, "Combining Kalman Filtering and Mean Shift for Real Time Eye Tracking Under Active IR Illumination", Proceedings of the 16th International Conference on Pattern Recognition, 통권 : 4, pp.40318~ (2002)
- 김수찬, "Kalman filter를 이용한 비접촉식 응시점 추정 시스템에서의 빠른 머리 이동의 보정", 전자공학회논문지 - SC, 44(6), pp.35~41 (2007), 대한전자공학회
- Hua Yang, "Model-Based 3D Object Tracking Using an Extended-Extended Kalman Filter and Graphics Rendered Measurements", CVIIE '05: Proceedings of the Computer Vision for Interactive and Intelligent Environment, pp.85~96 (2005)
- A.Gullstrand, "Helmholz's physiological optics", Optical Society of America, pp.350~358 (1924)
- 이의철, "HMD(Head Mounted Display)에서 시선 추적을 통한 3차원 게임 조작 방법 연구", 전자공학회논문지 - SP, 45(2), pp.49~64 (2008), 대한전자공학회
- Sukwon Choi, "Robust Head Tracking Using 3D Ellipdoidal Head Model in Particle Filter Pattern Recognition", Pattern Recognition, 41(9) (2008)