비디오 의미 파악을 위한 멀티미디어 요약의 비동시적 오디오와 이미지 정보간의 상호 작용 효과 연구
A Study on the Interactive Effect of Spoken Words and Imagery not Synchronized in Multimedia Surrogates for Video Gisting
0
조회
0
다운로드
2
인용
0
참고문헌
키워드
초록
본 연구는 오디오 및 이미지 정보가 비동시적으로 결합된 오디오/이미지 요약이 오디오 요약 또는 이미지 요약만 사용했을 때 보다 어떤 상호 작용 효과를 가지고 있는지 살펴보았다. 이를 위해서 오디오/이미지 요약, 오디오 요약 및 이미지 요약을 비디오의 의미 추출에 있어서의 정확도 즉, 요약문 및 항목 선택의 정확도와 이용자들의 이 세 가지 요약에 대한 관점을 비교, 분석하였다. 분석 결과, 요약문 정확도에서는 비디오 유형에 관계없이 상호 작용 효과를 확인하였으나 항목 선택의 정확도에서는 상호 작용 효과가 입증되지 못했다. 끝으로 이용자들은 오디오/이미지 요약에 대해 오디오와 이미지 정보를 병행하여 시청함으로서 비디오 내용에 대한 이해를 빠르게 하지만 때로는 이 두 정보간의 비동시성으로 인하여 비디오 의미 파악을 방해하는 경우도 생겨난다고 기술하였다.
Abstract
The study examines the interactive effect of spoken words and imagery not synchronized in audio/image surrogates for video gisting. To do that, we conducted an experiment with 64 participants, under the assumption that participants would better understand the content of videos when viewing audio/image surrogates rather than audio or image surrogates. The results of the experiment showed that overall audio/image surrogates were better than audio or image surrogates for video gisting, although the unsynchronized multimedia surrogates made it difficult for some participants to pay attention to both audio and image when the content they present is very different.
참고문헌 (17)
- 김현희, "비디오 자료의 의미 추출을 위한 영상 초록의 효용성에 관한 실험적 연구", 정보관리학회지, 24(4), pp.53~72 (2007), 한국정보관리학회
- 김현희, "비디오의 오디오 정보 요약 기법에 관한 연구", 정보관리학회지, 26(3), pp.169~188 (2009), 한국정보관리학회
- 이경미, "내용, 감성, 메타데이터의 결합을 이용한 텍스타일 영상 검색", 인터넷정보학회논문지, 9(5), pp.99~108 (2008), 한국인터넷정보학회
- Ding, W, "Multimodal surrogates for video browsing", Proceedings of the fourthACM Conference on Digital Libraries, pp.85~93 (1999), Berkeley
- Gunther, R, "Using 3D sound as a navigational aidin virtual environments", Behaviour and Information Technology, 23(6), pp.435~446 (2004)
- Hughes, A, "Text or pictures? an eye-tracking study of how people view digitalvideo surrogates", Proceedings of CIVR 2003, pp.271~280 (2003)
- Iyer, H, "Prioritization strategies for video storyboard keyframes", Journalof American Society for Information Science and Technology, 58(5), pp.629~644 (2007)
- Audio Surrogation for Digital Video: A Design Framework, "Kristin, B", UNCSchool of Information and Library Science(SILS), ~ (2006)
- Marchionini, G, "Multimedia surrogates for video gisting: Toward combiningspoken words and imagery", Information Processing and Management, 45, pp.615~630 (2009)
- Paivio,A, "Mental Representations" (1986), Oxford University Press
- Schmandt, C, "AudioStreamer: Exploiting simultaneity for listening", CHI 95 Conference Companion 1995, pp.218~219 (1995)
- Song, Y, "Effects of audio and visual surrogates for making senseof digital video", Proceedings of CHI 2007, pp.867~876 (2007)
- Song, Y, "What are the most eye-catching and ear-catchingfeatures in the video?: implications for video summarization", Proceedings of the 19thInternational Conference on World Wide Web 2010 (2010)
- Wildemuth, B, "Alternative surrogates for video objects in a digital library:Users' perspectives on their relative usability", Proceedings of the 6th European Conferenceon Digital Libraries, pp.493~507 (2002)
- Yang,M., "An Exploration of Users’ Video Relevance Criteria", 박사, pp.2005
- Yang, M, "Exploring users' video relevance criteria: A pilot study", Proceedings of the Annual Meeting of the American Society of Information Science andTechnology, pp.229~238 (2004)