눈동자 시선 추적에 의한 3차원 1인칭 슈팅 게임
3D First Person Shooting Game by Using Eye Gaze Tracking
0
조회
0
다운로드
8
인용
0
참고문헌
키워드
초록
본 논문에서는 HMD(Head Mounted Display) 하단에 눈동자의 움직임 영상을 취득할 수 있는 USB 카메라를 부착한 후, 3차원 1인칭 슈팅(First Person Shooting) 게임에서 게임 캐릭터의 시선방향을 눈동자 움직임에 의해 조작하는 방법을 제안한다. 본 논문에서 제안하는 방법은 다음과 같은 3부분으로 이루어져 있다. 첫 번째는 입력 영상으로부터 눈동자의 중심 위치를 실시간 영상 처리 방법으로 추출하는 부분, 두번째는 HMD 모니터상의 임의 지점을 쳐다볼 때 추출된 눈동자의 위치 정보와 모니터상의 응시 지점사이의 기하학적인 연관관계를 결정하는 캘리브레이션 부분, 그리고 마지막은 캘리브레이션 정보를 기반으로 모니터 상의 최종적인 응시 위치를 결정하고 이 정보에 의해 게임상의 3차원 뷰 방향을 조정하는 부분으로 구성되어 있다. 실험 결과 본 논문의 방법에 의해 손이 불편한 사용자에게 게임을 즐길 수 있는 기회를 제공하고, 게임 캐릭터와 게임 사용자의 시선 방향을 일치시킴으로서 게임의 흥미와 몰입감을 증가시킬 수 있는 결과를 얻음을 알 수 있었다.
Abstract
In this paper, we propose the method of manipulating the gaze direction of 3D FPS game's character by using eye gaze detection from the successive images captured by USB camera, which is attached beneath HMD. The proposed method is composed of 3 parts. At first, we detect user's pupil center by real-time image processing algorithm from the successive input images. In the second part of calibration, when the user gaze on the monitor plane, the geometric relationship between the gazing position of monitor and the detected position of pupil center is determined. In the last part, the final gaze position on the HMD monitor is tracked and the 3D view in game is controlled by the gaze position based on the calibration information.Experimental results show that our method can be used for the handicapped game player who cannot use his(or her) hand. Also, it can increase the interest and the immersion by synchronizing the gaze direction of game player and the view direction of game character.
참고문헌 (14)
- "Advances in Human-Computer Interaction", toward(n-command interfaces), pp.151~190 (1993), Ablex Publishing Co.
- "Evaluation of Eye Gaze Interaction", pp.281~288 (2000)
- "Quick Menu Selection Task with Eye Mark", 40(2), pp.602~612 (1999)
- "Quick Button Selection with Eye Gazing for General GUI Environments"
- "Binocular Eye Tracking in Virtual Reality for Inspection Training" (2002), ACM Press New York
- "Gaze detection system under HMD environment for user interface", pp.513~ (2003)
- "Use of Computer Based Training for Aircraft Inspectors: Findings and Recommend- ations"
- "Subpixel Eye Gaze Tracking", pp.124~129 (2002)
- "A Computer Vision Framework for Eye Gaze Tracking", pp.406~412 (2003)
- "Non-contact Eye Gaze Tracking System by Mapping of Corneal Reflections", pp.101~106 (2002)
- "Study on Eye Gaze Estimation", 32(3), pp.332~350 (2002)
- "A Novel Approach to 3D Gaze Tracking Using Stereo Cameras", 34(1), pp.234~245
- "a Gaze Tracking System for Everyday Gaze Interaction", pp.125~132 (2002)
- "Digital Image Processing-Principles and Application", wiley.