본문 바로가기
KERD
논문KCI 등재

가상현실 기반 시나리오의 정서 조건에 대한 음향구현 방식이 가상실재감에 미치는 영향

The Effects of Sound with Emotional Conditions on Virtual Presence in the Virtual Reality-Based Scenario

류지헌|양은별
한국교육공학회 (Korean Society Of Educational Technology)|2021.12|교육공학연구 (Journal of Educational Technology)|제37권 제4호|pp. 917-942|DOI http://dx.doi.org/10.17232/KSET.37.4.917

0

조회

0

다운로드

6

인용

0

참고문헌

키워드

정서시나리오emotionscenario배경음악background musicvirtual presence가상실재감주변음향ambient sound
주제분류교육학

초록

이 연구의 목적은 가상현실 기반 시나리오의 음향구현 방식을 세 가지 정서 조건(슬픔, 공포, 기쁨)에 적용했을 때, 학습자의 가상실재감에 미치는 영향을 확인하기 위한 것이다. 이를 위하여 가장 기본적인 정서 조건에 맞게 실험조건을 구현했다. 이 연구를 통하여 다양한 정서조건 시나리오에 따라서 가상실재감을 촉진할 수 있는 음향구현 방식을 확인할 수 있을 것으로 기대된다. 이 연구의 대상은 대학생 84명(남학생=29명, 여학생=55명)으로 음향에 따른 세 집단(배경음악, 주변음향, 통제집단)에 28명씩 임의 배정되었다. 이들에게는 세 조건(슬픔, 공포, 기쁨)의 정서적 시나리오가 차례로 제시되었다. 배경음악집단에는 각 시나리오의 특징에 맞는 영화음악이 제공되었다. 주변음향집단에는 일반적으로 들을 수 있는 교실소음이 제공되었다. 통제집단에는 음향효과가 제시되지 않았다. 이 연구의 종속변수는 가상실재감이었으며, 공간실재감, 몰두감, 사실성으로 구성되었다. 시나리오가 끝날 때마다 가상실재감이 측정되었다. 이 연구는 1요인 반복설계에 의한 다변량분산분석이 적용되었다. 연구결과에 따르면 음향에 따른 집단에서 유의미한 차이가 나타났으며, 정서 조건에 따라서도 유의한 차이가 나타났다. 특히, 음향과 정서 조건에서 유의미한 상호작용이 나타났다. 결론적으로 주변음향을 적용하는 것이 배경음악을 적용하는 것보다 가상실재감을 지각하는 데 더 효과적인 것으로 나타났다. 연구결과를 바탕으로 시나리오기반 학습을 위한 가상현실 시뮬레이션 설계방법에 대해서 논의했다.

Abstract

This study aims to analyze the effect of the sound and emotional conditions of the scenario on the formation of virtual presence for learners in scenario-based learning. The participants of this study were 84 university students (male students = 29, female students = 55), and we randomly assigned them to three groups (background music, ambient sound, and control group). Sadness, fear, and joy were the emotional conditions. We gave a movie soundtrack fit for each scenario in the background music group. For the ambient sound situation, we used the classroom noise of a recession. No sound was provided to the control group. The dependent variable in this study was the virtual presence and was composed of spatial presence, immersion, and realism. We measured the virtual presence at the end of each scenario. The study results indicated that types of sound had a significant impact on the virtual presence. We found that applying ambient sound is more effective in perceiving virtual reality than background music. There was a significant interaction effect between sound and emotional conditions. The results emphasized that background music was less effective than ambient noise to the virtual presence. We discussed some design considerations for scenario-based learning to improve the virtual presence.

참고문헌 (55)

  1. 두경일, "스크린골프의 몰입 향상을 위한 실감 인터페이스 요소 연구", 산업융합연구, 19(1), pp.71~77 (2021), 대한산업경영학회[DOI]
  2. 류지헌, "가상현실 수업시뮬레이션에서 가상학생과의 정서적 상호작용이 사용자의 시선응시 및 가상실재감에 미치는 영향", 한국콘텐츠학회 논문지, 20(2), pp.581~593 (2020), 한국콘텐츠학회[DOI]
  3. 박세훈, "배경음악의 템포와 호감도가 선한 음식과 악한 음식의 소비에 미치는 효과", 소비자학연구, 29(2), pp.23~43 (2018), 한국소비자학회[DOI]
  4. 양은별, "학습용 에이전트의 성별과 시선응시 방향이 얼굴표정에 대한 감정상태 인식에 미치는 영향", 교육정보미디어연구, 26(1), pp.51~77 (2020), 한국교육정보미디어학회[DOI]
  5. 이세환, "시청각적 이벤트의 표현공간 속성에 따른 앰비언스 사운드와 사용자 몰입감 특성", 한국HCI학회 학술대회, 2017(2), pp.910~913 (2017)
  6. Andersen, F., "Audio influence on game atmosphere during various game events", Procedia Computer Science, 179, pp.222~231 (2021)
  7. Babić, D., "The influence of music genres on the driving behaviour of young drivers and their visual scanning of the environment", Transportation Research Part F : Traffic Psychology and Behaviour, 81, pp.396~407 (2021)
  8. Bardach, L., "The power of feedback and reflection : Testing an online scenario-based learning intervention for student teachers", Computers & Education, 169, pp.104194~ (2021)
  9. Christopher, E. A., "Individual differences in working memory predict the effect of music on student performance", Journal of Applied Research in Memory and Cognition, 6(2), pp.167~173 (2017)
  10. Codreanu, E., "Between authenticity and cognitive demand : Finding a balance in designing a video-based simulation in the context of mathematics teacher education", Teaching and Teacher Education, 95, pp.103146~ (2020)
  11. Dalinger, T., "A mixed reality simulation offers strategic practice for pre-service teachers", Computers & Education, 144, pp.103696~ (2020)
  12. de la Mora Velasco, E., "Improving instructional videos with background music and sound effects : A design-based research approach", Journal of Formative Design in Learning, 5, pp.1~15 (2021)
  13. Deng, M., "Impact of background music on reaction test and visual pursuit test performance of introverts and extraverts", International Journal of Industrial Ergonomics, 78, pp.102976~ (2020)
  14. Etzel, J. A., "Cardiovascular and respiratory responses during musical mood induction", International Journal of psychophysiology, 61(1), pp.57~69 (2006)
  15. Fels, D., "Does bouncy equal happy? Comparing user's interpretations of emotions conveyed by one designed moving object based on the soma-semiotic framework", Applied Ergonomics, 96, pp.103463~ (2021)
  16. Freeman, J., "When presence and emotion are related, and when they are not", 8th annual international workshop on presence, pp.21~23 (2005)
  17. Ghosh, T., "Assessing competencies using scenario-based learning in cybersecurity", Journal of Cybersecurity and Privacy, 1(4), pp.539~552 (2021)
  18. Gür, E. Y., "The effect of cognitive behavioral techniques using virtual reality on birth pain : A randomized controlled trial", Midwifery, 91, pp.102856~ (2020)
  19. Harris, D., "Development and validation of a simulation workload measure : the simulation task load index(SIM-TLX)", Virtual Reality, 24(4), pp.557~566 (2020)
  20. Herget, A. -K., "Soundtrack for reality? How to use music effectively in non-fictional media formats", Psychology of Music (2021)
  21. Huang, Y., "Classroom complexity affects student teachers’ behavior in a VR classroom", Computers & Education, 163, pp.104100~ (2021)
  22. Husain, G., "Effects of musical tempo and mode on arousal, mood, and spatial abilities", Music Perception, 20(2), pp.151~171 (2002)
  23. Jeon, J. Y., "Effects of audio-visual interactions on soundscape and landscape perception and their influence on satisfaction with the urban environment", Building and Environment, 169, pp.106544~ (2020)
  24. Jicol, C, "Effects of emotion and agency on presence in virtual reality", Proceedings of the 2021 CHI Conference on Human Factors in Computing Systems, pp.1~13 (2021)
  25. Juan, M. C., "Comparison of the levels of presence and anxiety in an acrophobic environment viewed via HMD or CAVE", Presence: Teleoperators and virtual environments, 18(3), pp.232~248 (2009)
  26. Kelleci, Ö., "Using game-based virtual classroom simulation in teacher training: User experience research", Simulation & Gaming, 52(2), pp.204~225 (2021)
  27. Kim, S. J., "Presence Effects in Virtual Reality Based on User Characteristics: Attention, Enjoyment, and Memory", Electronics, 10(9), pp.1051~ (2021)
  28. Klassen, R. M., "The development and testing of an online scenario-based learning activity to prepare preservice teachers for teaching placements", Teaching and Teacher Education, 104, pp.103385~ (2021)
  29. Liang, P., "The effect of music tempo and volume on acoustic perceptions under the noise environment", Sustainability, 13(7), pp.4055~ (2021)
  30. Lindquist, M., "The effect of audio fidelity and virtual reality on the perception of virtual greenspace", Landscape and Urban Planning, 202, pp.103884~ (2020)
  31. Mayer, R. E., "Applying the science of learning : Evidence-based principles for the design of multimedia instruction", The American Psychologist, 63(8), pp.760~769 (2008)
  32. Mayer, R. E., "Increased interestingness of extraneous details in a multimedia science presentation leads to decreased learning", Journal of Experimental Psychology : Applied, 14, pp.329~339 (2008)
  33. Mehall, S., "Comparing in-class scenario-based learning to scenario-based eLearning through an interactive, self-paced case study", Journal of Education for Business, pp.1~7 (2021)
  34. Moreno, R., "Learning science in virtual reality multimedia environments : Role of methods and media", Journal of Educational Psychology, 94(3), pp.598~610 (2002)
  35. Nilsson, N. C., "Immersion revisited : A review of existing definitions of immersion and their relation to different theories of presence", Human Technology, 12(2), pp.108~134 (2016)
  36. 박정민, "The Effect of Realistic Sound on User Experience and Aggressive Attitude in Violent Video Game", 한국컴퓨터게임학회논문지, 31(1), pp.53~62 (2018), (사)한국컴퓨터게임학회[DOI]
  37. Park, S. H., "Effects of the aural and visual experience on psycho-physiological recovery in urban and rural environments", Applied Acoustics, 169, pp.107486~ (2020)
  38. Parong, J., "Cognitive and affective processes for learning science in immersive virtual reality", Journal of Computer Assisted Learning, 37(1), pp.226~241 (2021)
  39. Peters, M., "The effect of background music in documentaries on viewers' mood states, risk perception and retention of content", Master, pp.2021
  40. Plutchik, R., "Emotions and life: Perspectives from psychology, biology, and evolution" (2003), American Psychological Association
  41. Que, Y., "Investigate the effects of background music on visual cognitive tasks using multimodal learning analytics", 2021 International Conference on Advanced Learning Technologies (ICALT), pp.445~447 (2021), IEEE
  42. Rey, G. D., "A review of research and a meta-analysis of the seductive detail effect", Educational Research Review, 7(3), pp.216~237 (2012)
  43. Roberts, A. C., "Assessing the suitability of virtual reality for psychological testing", Psychological Assessment, 31(3), pp.318~328 (2019)
  44. Rödel, A. T., "Listening to background music while studying-emotional drive or cognitive overload?", Doctoral, pp.2021
  45. Russell, J. A., "A circumplex model of affect", Journal of personality and social psychology, 39(6), pp.1161~ (1980)
  46. Schrader, C., "The influence of virtual presence: Effects on experienced cognitive load and learning outcomes in educational computer games", Computers in Human Behavior, 28(2), pp.648~658 (2012)
  47. Selzer, M. N., "Effects of virtual presence and learning outcome using low-end virtual reality systems", Displays, 59, pp.9~15 (2019)
  48. Slater, M., "Immersion and the illusion of presence in virtual reality", British Journal of Psychology, 109(3), pp.431~433 (2018)
  49. Stavroulia, K. E., "Emotional experiences in simulated classroom training environments", International Journal of Information and Learning Technology, 33(3), pp.172~185 (2016)
  50. Tamir, M., "Hedonic and instrumental motives in anger regulation", Psychological Science, 19(4), pp.324~328 (2008)
  51. Teasdale, T., "Instructional simulation integrates research, education, and practice", Gerontology & Geriatrics Education, 37(1), pp.62~80 (2016)
  52. Thiparpakul, P, "How can video game atmosphere affect audience emotion with sound", 2021 9th International Conference on Information and Education Technology (ICIET), pp.480~484 (2021), IEEE
  53. van der Weijden, F. N., "The effect of playing background music during dental treatment on dental anxiety and physiological parameters: A systematic review and meta-analysis", Psychology of Music (2021)
  54. Visch, V. T., "The emotional and cognitive effect of immersion in film viewing", Cognition and Emotion, 24(8), pp.1439~1445 (2010)
  55. Xu, C., "Ecological validity of immersive virtual reality(IVR)techniques for the perception of urban sound environments", Acoustics, 3(1), pp.11~24 (2021)

관련 논문AI추천

사실적 효과음이 게임 사용자들의 감정에 미치는 영향노기영, 방영주, 윤주성(사)한국컴퓨터게임학회 · 컴퓨터게임및콘텐츠논문지2014 · 제27권 제4호메타버스 학습환경에서 동료아바타 상호작용과 스크린의 시야각이 가상실재감 및 정서적 학습경험에 미치는 영향류지헌, 임태형, 탁연주한국교육방법학회 · 교육방법연구2022 · 제34권 제4호가상현실 기반 수업 시뮬레이션의 시나리오 내용이 예비교사의 교사효능감과 가상실재감에 미치는 효과류지헌, 유승범한국교육정보미디어학회 · 교육정보미디어연구2016 · 제22권 제3호가상현실에서의 정서 경험: 몰입형 환경이 정서 반응에 미치는 영향김종완, 박채리, 윤혜린한국감성과학회 · 감성과학2025 · 제28권 제4호가상현실 학습환경에서 걷기 동작을 적용한 내비게이션이 가상실재감에 미치는 영향김선, 류지헌, 한승연한국교육방법학회 · 교육방법연구2019 · 제31권 제1호온라인 학습 환경에서 실재감이 학업 성과에 미치는 영향에 대한 메타 분석권회림, 두민영, 문은경한국교육방법학회 · 교육방법연구2017 · 제29권 제1호

이 간행물의 다른 논문 (9건)

학교 역량교육을 위한 수업설계 연구의 체계적 문헌 고찰최정윤, 김현진, 김현영, 김유리pp. 719-765Ranciere의 보편적 가르침에 비추어본 게임기반학습의 존재론적 의미: 학습자에서 플레이어로이은택, 유영만pp. 767-797비대면 플립러닝 환경에서 교수실재감이 인지된 학습성과에 미치는 영향: 팀학습활동과 학습몰입의 매개효과 연구박지원, 한지영, 최경미pp. 799-832실시간 온라인 수업에서의 상호작용과 만족도 간 관계: 지각된 유용성의 조절효과, 학습태도의 매개효과를 중심으로장유진, 송지훈pp. 833-860온라인 그룹 토론활동에서 참여정보에 대한 자동화 피드백과 토론의견 평가에 대한 교수자 피드백의 교육적 효과 비교임고운, 진성희pp. 861-888
원문 보기