핸드트래킹을 통한 NUI형 체감형 교육훈련 연구
Researching NUI-type experiential training with handtracking
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
본 연구는 핸드트래킹(Hand Tracking) 기술을 활용한 내츄럴 사용자 인터페이스(Natural User Interface, NUI) 기반의 체감형 교육훈련 시스템을 제안한다. 기존의 XR(eXtended Reality) 교육 콘텐츠는 컨트롤러 입력 중심의 상호작용 구조로 인해 몰입도와 실제감이 떨어지는 한계가 있었다. 본 연구에서는 손동작을 직접 인식하여 사용자와 시스템 간의 물리적 매개를 제거하고, 보다 직관적이고 자연스러운 인터랙션 환경을 구현하였다. 연구 방법은 교육훈련 절차 분석 및 학습 목표 정의, 핸드트래킹 기반 제스처 인식 인터페이스 설계, NUI형 실감형 학습 시스템 구현 및 실험적 검증으로 구성된다. 핸드트래킹 기반 NUI는 학습자의 동작 정확도, 반응 피드백, 몰입감 측면에서 기존 입력 방식 대비 향상된 결과를 보일 것으로 기대된다. 본 연구는 향후 XR 산업·군사·의료·기계정비 교육 등 다양한 분야에서 활용 가능한 비접촉·체감형 실감교육 플랫폼의 핵심기초 연구로서 의미를 가진다.
Abstract
This study proposes an immersive education and training system based on a Natural User Interface (NUI) utilizing hand tracking technology. Existing XR (eXtended Reality) educational content has faced limitations in immersion and realism due to its controller-input-centric interaction structure. This study directly recognizes hand gestures, eliminating the physical mediation between the user and the system, thereby implementing a more intuitive and natural interaction environment. The research methodology consists of analyzing educational training procedures and defining learning objectives, designing a hand-tracking-based gesture recognition interface, implementing an NUI-type immersive learning system, and conducting experimental validation. Hand-tracking-based NUI is expected to show improved results compared to existing input methods in terms of learner motion accuracy, response feedback, and immersion. This research holds significance as core foundational work for a non-contact, immersive education platform applicable across diverse fields such as XR industry, military, medical, and machinery maintenance training.