본문 바로가기
KERD
논문KCI 등재

텍스트에서의 이미지 정보 역할 연구 - 수용자의 학습이력과 기억력을 중심으로

Individuelle Kompetenz zur Verarbeitung von Texten und Bildern

유덕근
한국독일어문학회 (Koreanische Gesellschaft fuer Deutsche Sprache Und Literatur)|2014.03|독일언어문학 (Zeitschrift f？r Deutsche Sprache und Literatur)|제63호|pp. 131-163|DOI 10.30947/zfdsl.2014..63.131

0

조회

0

다운로드

4

인용

0

참고문헌

키워드

텍스트처리텍스트구성인접성의 원리응집성의 원리이미지와 텍스트TextgestaltungTextverarbeitungKontiguitätsprinzipKohärenzprinzipBilder und Text
주제분류독일어와문학

초록

본 논문은 다매체 텍스트 구성의 인지적 효율성 제고와 관련하여 언어 정보와 이미지 정보의 상보적 활용에 대한 이론 및 경험적 고찰을 시도하였다. Paivio(1986)(1987), Schnotz(2003), Mayer(2005) 등이 이미지 정보의 ‘인지적 우월성’을 강조하고 있는 바와 같이 이미지 정보는 다매체 텍스트의 ‘최적화된’ 구성조건에서 텍스트의 처리와 이해도를 제고하는 수단으로써 활용될 수 있다. 이미지 정보는 언어 정보가 갖는 선형성과 달리 개별 정보들을 포괄할 수 있는 전체성과 통합성을 갖는다는 면에서 한정된 시공간적 환경에서 텍스트에 대한 표상을 인지적으로 선취해 나가는 데 도움이 될 수 있다. 그러나 Mayer(2005)의 다매체 학습이론에서도 확인할 수 있듯이, 최적화된 텍스트 구성은 텍스트의 내재적 특성처럼 항상성(恒常性)을 갖기보다, 텍스트, 텍스트 사용자, 그리고 텍스트 사용맥락에 따라 가변적 양상을 보일 수 있다. 이러한 맥락에서 본 연구의 실험은 텍스트 이해의 주체인 텍스트 사용자를 중심에 두어 다매체 텍스트의 처리가 텍스트 사용자의 기억특성, 지식수준 등에 어떠한 영향을 받는지 살펴보았다. 이 가운데 선행연구들에서 다룬 바 있는 이미지 정보와 언어 정보 간 인접성과 응집성을 변수로 하여, 텍스트 구성 조건들의 처리양상을 대조 분석하였다. 결과에 대한 논의에서 살펴본 바와 같이, 학습이력과 단기기억에 우위를 보인 피험자집단은 선행연구결과와 유사하게 이미지 매체의 인지적 장점을 적절히 활용할 수 있었다. 그러나 학습조건 및 인지조건에 편차를 보인 집단은 텍스트 처리에서 이미지 정보의 효과를 충분히 누리지 못했다. 이러한 결과는 결국 최적화된 텍스트 구성과 수용자의 이해도 제고가 보다 거시적 접근법을 통해 확장될 필요가 있음을 보여주는 것이라 하겠다.

Abstract

Bei der vorliegenden Arbeit handelt es sich um eine kognitive Betrachtung zur Textgestaltung und zur Integration zwischen Texten und Bildern bei der Textverarbeitung. Dabei wird ein neuer Ansatz zur Textgestaltung behandelt, der das Textverstehen als Problem der Textverarbeitung betrachtet und die Interaktion zwischen dem Leser und dem Text in den Vordergrund stellt. Im theoretischen Teil wird vor allem über ein kognitiv angemessenes Modell der Textgestaltung diskutiert, das in der Lage ist, neben textimmanenten Merkmalen auch den Textrezipienten und -produzenten sowie die Situiertheit der Textverarbeitung zu berücksichtigen. Dabei werden verschiedene Maßstäbe für die Textgestaltung diskutiert, wie z.B. das Kontiguitätsprinzip und Kohärenzprinzip. Im empirischen Teil der Arbeit, die mit Hilfe eines Eyetrackings als Online-Messungsmethode durchgeführt wurde, wurden Reaktionen der Versuchspersonen auf unterschiedliche Präsentationen von Text und Bildern und auf Kontiguität zwischen Texten und Bildern und auf deren Kohärenz im Text untersucht. Die vorliegenden Befunde weisen deutlich darauf hin, dass die Effizienz der Textverarbeitung entscheidend von Rezipient- bezogenen Textgestaltungen abhängig ist, d.h. dass Bilder im Text erst dann kognitiv effektiv und angemessen wirken, wenn der Rezipient dazu befähigt ist, ein mentales Modell als Vorwissen zu aktivieren, das sich in die aktuelle Textverarbeitung einmischt.

참고문헌 (54)

  1. 유덕근, "추론과 생략: 초기 문장구조 분석에서 나타나는 문맥정보의 역할", 독어학, (18), pp.161~186 (2008), 한국독어학회
  2. 유덕근, "그림의 위치 및 정보에 따른 텍스트처리 양상", 독어교육, 45(45), pp.163~195 (2009), 한국독어독문학교육학회
  3. 유덕근, "텍스트 구성의 인지적 접근 - 이미지의 활용을 중심으로", 독일어문학, 18(3), pp.147~171 (2010), 한국독일어문학회
  4. 유덕근, "기억의 특성에서 바라본 외국어학습 - 서술기억과 절차기억을 중심으로", 외국어로서의 독일어, (31), pp.79~110 (2012), 한국독일어교육학회
  5. Baddeley, A., "Working Memory", Science, 255, pp.556~559 (1992)
  6. Bransford, J. D., "Sentence memory: A constructive vs. interpretive approach", Cognitive Psychology, 3, pp.193~209 (1972)
  7. Carney, R. N., "Pictorial illustrations still improve students’ learning from text", Educational Psychology Review, 14, pp.5~26 (2002)
  8. Clark, R. C., "E-learning and the science of instruction: proven guidelines for consumers and designers of multimedia learning" (2011), Pfeiffer
  9. Collins, M., "Interhemispheric Communication is via Direct Connections", Brain and Language, 64(1), pp.28~52 (1998)
  10. Engelkamp, J., "Das menschliche Gedächtnis" (1990), Hogrefe
  11. Fisher, J. B., "Improving Reading Comprehension of At-risk Adolecents" (2002)
  12. Fodor, J. A., "The modularity of mind" (1983), MIT Press
  13. "Processing and Integrating Multimodal Material - The Influence of Color-Coding" (2007)[URL]
  14. Gambrell, L. B., "Mental Imagery and the Comprehension-monitoring Performance of Fourth and Fifth Grade Poor Readers", Reading Research Quarterly, 21, pp.454~464 (1986)
  15. Gambrell, L. B., "Improving Comprehension Instruction: Rethinking Research, Theory, and Classroom Practice" (2002), John Wiley & Sons
  16. Groeben N., "Textproduktion. Ein interdisziplinärer Forschungsüberblick" (1989), Niemeyer
  17. Hartmann, E., "In Bildern denken ― Texte besser verstehen. Lesekompetenz strategisch stärken" (2006), Reinhardt
  18. Johnson-Laird, P. N., "Mental models. Towards a cognitive science of language, inference, and consciousness" (1983), Cambridge University Press
  19. Just, M. A., "A capacity theory of comprehension: Individual differences in working memory", Psychological Review, 99, pp.122~149 (1992)
  20. Kelter, S., "Psycholinguistik. Ein internationales Handbuch" (2003), De Gruyter
  21. Klicpera, C., "Psychologie der Lese- und Schreibschwierigkeiten" (1995), Beltz & Psycholgoie Verlags Union
  22. Levie, W. H., "Effects of text illustrations: A review of research", Educational Communication and Technology, 30(4), pp.195~232 (1982)
  23. Levin, J. R., "The psychology of illustration" (1987), Springer
  24. Maria, K., "Reading Comprehension Instruction. Issues and Strategies" (1990), York Press
  25. Mayer, R. E., "Multimedia Learning: Are We Asking the Right Questions?", Educational Psychologist, 32(1), pp.1~19 (1997)
  26. Mayer, R. E., "Multimedia Learning" (2001), Cambridge University Press
  27. Mayer, R. E., "The Cambridge Handbook of Multimedia Learning" (2005), Cambridge University Press
  28. Mayer, R. E., "Animations need narrations: An experimental test of a dual-coding hypothesis", Journal of Educational Psychology, 83, pp.484~490 (1991)
  29. Mayer, R. E., "The instructive animation: Helping students build connections between words and pictures in multimedia learning", Journal of Educational Psychology, 84, pp.444~452 (1992)
  30. Mayer, R. E., "Cognitive constraints on multimedia learning : When presenting more material results in less understanding", Journal of Educational Psychology, 93, pp.187~198 (2001)
  31. Moreno, R., "Interactive Multimodal Learning Environments-Special Issue on Interactive Learning Environments : Contemporary Issues and Trends", Educational Psychological Review, 19, pp.309~326 (2007)
  32. Mueller, S. T., "The PEBL Manual" (2011), Lulu Press
  33. Oakhill, J., "Handbook of psychoinguistics" (1994), Academic Press
  34. Oakhill, J., "Can Imagery Training Help Children Who Have Comprehension Problems?", Journal of Research in Reading, 14, pp.106~115 (1991)
  35. Orsini, A., "Sex and culture differences in children’'s spatial and verbal-memory span", Perceptual and Motor Skills, 53, pp.39~42 (1981)
  36. Paivio, A, "Mental representations: a dual coding approach" (1986), Oxford University Press
  37. Prestin, E., "Sprache, Sinn und Situation. Festschrift für Gert Rickheit zum 60. Geburtstag", pp.223~238 (2001), Deutscher Universitäts-Verlag
  38. Reitbauer, M., "Jetzt fällt es mir wieder ein: Verbesserte Informationsverarbeitung durch Supertexte: Pilotstudie zur Anwendung des Prinzips der kognitiven Plausibilität" (2010), Gunter Narr Verlag
  39. Rickheit, G., "Psycholinguistik" (2009), Stauffenburg Verlag
  40. Rickheit, G., "Sprachrezeption" (1999), Hogrefe
  41. Sadoski, M., "The Natural Use of Imagery in Story Comprehension and Recall", Reading Research Quarterly, 20, pp.658~667 (1985)
  42. Sadoski, M., "Theoretical Models and Processes of Reading" (1994), International Reading Association, Nermark
  43. Sanford, A. J., "Under standing written language" (1981), Wiley
  44. Schnotz, W., "Psycholinguistik. Ein internationales Handbuch" (2003), De Gruyter
  45. Smyth, M. M., "Determining spatial span: The role of movement time and articulation rate", Quarterly Journal of Experimental Psychology, 45, pp.479~501 (1992)
  46. Squire, L. R., "Structure and function of declarative and nondeclarative memory systems", Proceedings of the National Academy of Sciences, USA, 93, pp.13515~13522 (1996)
  47. Stadie, N., "Neurolinguistische Untersuchungen zur Verarbeitung von Bildern und Wörtern" (1999), Hochschulverlag
  48. Stücke, U., "Das Verstehen und Behalten von Texten mit Hilfe von Verstellungsbildern" (2001), Shaker
  49. Sweet, A. P., "Improving Comprehension Instruction: Rethinking Research, Theory, and Classroom Practice" (2002), John Wiley & Sons
  50. Trabasso, T., "Comprehension instruction: Research-based best practices" (2002), Guilford
  51. Tulving, E., "Organization of Memory" (1972), Academic Press
  52. Vilkki, J., "Deficient programming in spatial learning after frontal lobe damage", Neuropsychologia, 27, pp.971~976 (1989)
  53. Weidenmann, B., ""Multimedia": Mehrere Medien, Mehrere Codes, mehrere Sinneskanäle?", Unterrichtswissenschaft, 25, pp.197~206 (1997)
  54. Zwaan, R. A., "Situation models: The mental leap into imagined worlds", Current Directions in Psychological Science, 8, pp.15~18 (1999)

관련 논문AI추천

텍스트 최적화를 위한 다매체 텍스트 구성 연구 - 학습이력에 따른 매체 간 ‘인접성’과 ‘전환 수월성’ 효과유덕근한국독일어문학회 · 독일언어문학2013 · 제62호텍스트 구성의 인지적 접근 - 이미지의 활용을 중심으로유덕근한국독일어문학회 · 독일어문학2010 · 제18권 제3호멀티미디어 학습에서 인지양식과 제시 순서가 파지와 이해에 미치는 영향도경수, 황혜란한국인지과학회 · 인지과학2006 · 제17권 제3호학습자의 작업기억 특성, 공간적 근접원리, 멀티미디어원리가 파지와 이해에 미치는 효과이현정한국교육정보미디어학회 · 교육정보미디어연구2015 · 제21권 제1호그림과 텍스트의 이해과정에서 텍스트의 줄 길이와 교수효율성 수준의 상호작용효과류지헌한국교육공학회 · 교육공학연구2012 · 제28권 제1호멀티미디어 학습 환경에서 통합촉진 전략이 인지부하에 미치는 효과오선아, 진화봉한국교육공학회 · 교육공학연구2003 · 제19권 제4호

이 간행물의 다른 논문 (14건)

ARCS 동기이론의 독일어 학습 적용강명희pp. 1-21종속절이 있는 담화에서 토픽의 변화와 대명사 해결한경남pp. 23-42L2 습득에 대한 기능주의적 접근남윤주, 홍우평pp. 43-64독일어 영화제목을 활용한 학습활동 과제개발이원경pp. 65-89독일 인문학의 기후변화 적응과 방향 제시남유선, 김인숙pp. 91-107
원문 보기