본문 바로가기
KERD
논문KCI 등재

강체 추적 기반의 가상 아바타를 통한 몰입형 가상환경 응용

Application of Immersive Virtual Environment Through Virtual Avatar Based On Rigid-body Tracking

김진모|박명석
(사)한국컴퓨터그래픽스학회 (Korea Computer Graphics Society)|2023.07|한국컴퓨터그래픽스학회논문지 (Journal of the Korea Computer Graphics Society)|제29권 제3호|pp. 69-77

0

조회

0

다운로드

1

인용

0

참고문헌

키워드

가상현실virtual reality모션 캡처Motion capturevirtual avatar가상 아바타강체 추적몰입형 가상환경rigid-body trackingimmersive virtual environment

초록

본 연구는 몰입형 가상환경에서의 가상현실 사용자의 사회적 현존감을 높이고 다양한 경험을 제공하기 위하여 강체 추적 기반의 가상 아바타 응용 방법을 제안한다. 제안하는 방법은 마커를 사용한 모션 캡처 기반의 실시간 강체 추적을 기반으로 역운동학을 통해 가상 아바타의 동작을 추정한다. 이를 통해 현실 세계에서의 간단한 객체 조작으로 몰입감 높은 가상환경을 설계함을 목적으로 한다. 가상 아바타를 통한 몰입형 가상환경에 관한 응용을 실험 및 분석하기 위하여 과학실험 교육 콘텐츠를 제작하고 시청각 교육, 전신 추적, 그리고 제안하는 강체 추적 방법과의 설문을 통해 비교 분석하였다. 제안한 가상환경에서 참가자들은 가상현실 HMD를 착용하고 추정된 동작으로부터 실험 교육 행동을 수행하는 가상 아바타로부터 몰입과 교육 효과를 확인하기 위한 설문을 진행하였다. 결과적으로 강체 추적 기반의 가상 아바타를 활용하는 방법을 통해 전통적인 시청각 교육보다 높은 몰입과 교육 효과를 유도할 수 있었으며, 전신 추적을 위한 많은 작업 없이도 충분히 긍정적인 경험을 제공할 수 있음을 확인하였다.

Abstract

This study proposes a rigid-body tracking based virtual avatar application method to increase the social presence and provide various experiences of virtual reality(VR) users in an immersive virtual environment. The proposed method estimates the motion of a virtual avatar through inverse kinematics based on real-time rigid-body tracking based on motion capture using markers. Through this, it aims to design a highly immersive virtual environment with simple object manipulation in the real world. Science experiment educational contents are produced to experiment and analyze applications related to immersive virtual environments through virtual avatars. In addition, audiovisual education, full-body tracking, and the proposed rigid-body tracking method were compared and analyzed through survey. In the proposed virtual environment, participants wore VR HMDs and conducted a survey to confirm immersion and educational effects from virtual avatars performing experimental educational actions from estimated motions. As a result, through the method of utilizing virtual avatars based on rigid-body tracking, it was possible to induce higher immersion and educational effects than traditional audiovisual education. In addition, it was confirmed that a sufficiently positive experience can be provided without much work for full-body tracking.

참고문헌 (27)

  1. 조윤식, "유니티와 언리얼 엔진 4 에서의 가상현실 개발환경에 관한 비교연구", 한국컴퓨터그래픽스학회논문지, 28(5), pp.1~11 (2022), (사)한국컴퓨터그래픽스학회[DOI]
  2. T. Sweeney, "Foundational principles & technologies for the metaverse", ACM SIGGRAPH 2019 Talks (SIGGRAPH '19), pp.1~ (2019), Association for Computing Machinery
  3. H. Duan, "Metaverse for Social Good : A University Campus Prototype", Proceedings of the 29th ACM International Conference on Multimedia (MM '21), pp.153~161 (2021), Association for Computing Machinery
  4. A. Gaafar, "Metaverse In Architectural Heritage Documentation & Education", Advances in Ecological and Environmental Research, 6(10), pp.66~86 (2021)
  5. N. Xi, "The challenges of entering the metaverse : An experiment on the effect of extended reality on workload", Information Systems Frontiers, 25, pp.659~680 (2023)
  6. A. van Dam, "Post-wimp user interfaces", Communications of the ACM, Association for Computing Machinery, 40(2), pp.63~67 (1997)
  7. 김민규, "모바일 가상현실 환경에서의 시선기반 사용자 인터페이스 상호 작용에 관한 연구", 한국컴퓨터그래픽스학회논문지, 23(3), pp.39~46 (2017), (사)한국컴퓨터그래픽스학회[DOI]
  8. 최준영, "가젯암: 확장현실을 위한 손 제스처 기반 대화형 데이터 시각화 시스템", 한국컴퓨터그래픽스학회논문지, 25(2), pp.31~41 (2019), (사)한국컴퓨터그래픽스학회[DOI]
  9. 홍승현, "모바일 가상현실에서의 이동 인터페이스에 관한 연구", 한국컴퓨터그래픽스학회논문지, 27(3), pp.55~63 (2021), (사)한국컴퓨터그래픽스학회[DOI]
  10. N. Pelechano, "Being a Part of the Crowd : Towards Validating VR Crowds Using Presence", Autonomous Agents and Multiagent Systems, 1, pp.136~142 (2008)
  11. "Motion Capture" (2023)[URL]
  12. D. Mehta, "XNect : real-time multi-person 3D motion capture with a single RGB camera", ACM Transactions on Graphics, 39(4), pp.1~17 (2020)
  13. A. Chatzitofis, "A Low-cost & Realtime Motion Capture System", 2022IEEE, 2022, 21421~21426
  14. L. Zhang, "Digital Protection of Dance of Intangible Cultural Heritage by Motion Capture Technology", Lecture Notes on Data Engineering and Communications Technologies, 85, pp.429~436 (2022)
  15. 김정호, "저가형 모션 캡처 장비를 이용한 실시간 상호작용 애니메이션 시스템", 한국컴퓨터그래픽스학회논문지, 28(2), pp.29~41 (2022), (사)한국컴퓨터그래픽스학회[DOI]
  16. 배태성, "제한된 모션 센서와 애니메이션 데이터를 이용한 캐릭터 동작 제어", 한국컴퓨터그래픽스학회논문지, 25(3), pp.85~92 (2019), (사)한국컴퓨터그래픽스학회[DOI]
  17. A. von der Pütten, ""It doesn’t matter what you are!"Explaining social effects of agents and avatars", Computers in Human Behavior, 26(6), pp.1641~1650 (2010)
  18. "Motive software and Unity Plugin" (2023)[URL]
  19. "Rigid Body Tracking" (2022)[URL]
  20. "UnityTechnologies" (2021)[URL]
  21. "화재·폭발 ‘안전 불감증’ 여전한 학교 실험실" (2017)[URL]
  22. "원주 한 초등학교에서 과학실험 어지러움 호소" (2022)[URL]
  23. "Archviz Laboratory Pack" (2020)[URL]
  24. "Urban Man Character" (2022)[URL]
  25. "위험성 때문에 지금은 교과서에서 사라진 화산실험 (feat. 중크롬산 암모늄)" (2020), 김부영[URL]
  26. "염산과 수산화나트륨수용액의 중화반응" (2019), 행복부자[URL]
  27. B. Witmer, "The factor structure of the presence questionnaire", Presence : Teleoperators and Virtual Environments, 14(3), pp.298~312 (2005)

관련 논문AI추천

HMD에서 사용자와 아바타의 동작 연동에 대한 사용성 연구박의준, 이홍섭, 정형원(사)한국컴퓨터게임학회 · 컴퓨터게임및콘텐츠논문지2015 · 제28권 제3호모션 캡처 기반 가상 아바타를 활용한 혼합현실 대화형 콘텐츠 제작공수민, 김진모, 양현용, 이지원(사)한국컴퓨터그래픽스학회 · 한국컴퓨터그래픽스학회논문지2025 · 제31권 제3호가상 학습 환경에서 아바타 유형이 학습참여도, 학습태도, 사회적 현존감에 미치는 영향성경, 박형성한국지식정보기술학회 · 한국지식정보기술학회 논문지2010 · 제5권 제4호가상공간의 수업유형에 따른 아바타의 실제얼굴제시 여부가 사회적 실재감, 주의집중, 시선응시에 미치는 영향김국현, 류지헌한국교육정보미디어학회 · 교육정보미디어연구2023 · 제29권 제4호XR기반 학습환경에서 디지털트윈을 적용한 아바타와의 협력활동이 사용자의 지각에 미치는 영향류지헌, 양은별한국교육공학회 · 교육공학연구2023 · 제39권 제1호메타버스 학습환경에서 동료와 교사 아바타가 학습실재감과 시각적 주의집중에 미치는 효과류지헌, 양은별한국교육정보미디어학회 · 교육정보미디어연구2021 · 제27권 제4호

이 간행물의 다른 논문 (15건)

3D 메쉬 모델을 이용한 수동 3D 프로젝션 맵핑 과정 분석이정진, 김민아pp. 1-12초박형 라이트필드 카메라를 위한 HDR 이미징 알고리즘 개발김민혁, 유재관, 조용진, 나지웅pp. 13-19초소형 버추얼 프로덕션 환경에서 디지털 휴먼을 이용한 촬영 사례임재호, 김유진, 이수빈, 박민수, 장민정, 전상욱pp. 21-31동작 기반 Autonomous Emotion Recognition 시스템: 감정 유도 자극에 따른 신체 맵 형성을 중심으로정면걸, 조영욱, 김형숙, 김광욱, 배정은pp. 33-43Unity: A Powerful Tool for 3D Computer Animation Production김원태, 윤정식, 에꼴 루드밀라 무쿨라pp. 45-57
원문 보기