본문 바로가기
KERD
논문KCI 등재

절대평가 도입 후 수능 영어 듣기 및 읽기 지문의 난이도 비교: 통사적 복잡성, 소재, 이독성을 중심으로

Comparison between difficulty level of both listening and reading passages in CSAT with absolute grading scale: focusing on syntactic complexity, domains, and readability

정요한
한국멀티미디어언어교육학회 (Korea Association of Multimedia-Assisted Language Learning)|2020.08|멀티미디어 언어교육 (Multimedia-Assisted Language Learning)|제23권 제3호|pp. 206-232|DOI 10.15702/mall.2020.23.3.206

0

조회

0

다운로드

24

인용

0

참고문헌

키워드

difficultydomaincorpus analysisKSATreadabilitysyntactic complexitycriterion-referenced evaluationabsolute gradingL2SCA
주제분류영어와문학

초록

As an absolute grading scale was implemented on CSAT (College Scholastic Ability Test), it is entirely necessary that each test be consistent in the level of difficulty. This study assessed the difficulty level of each listening and reading passage in CSAT conducted over the recent three years, focusing on the syntactic complexity and the domains where more studies are required. Furthermore, the readability referring to FRE, FKGL, and GFI, which is the most widely used method to assess how difficult it is, was also applied for the assessment. The readability was aimed to compare the difficulty level of CSAT’s passages with that of EBS prep books’ for they have been propounded to affect the difficulty level of the CSAT texts by the precedent research. The following shows the results: First, the 14 measures of syntactic complexity did not demonstrate any difference in CSAT passages that were given each year. Next, no difference in difficulty level was observed in the aspect of the domains where hypothetical scores are given. Finally, there was no significant yearly variance in passages of CSAT and EBS prepbooks, and the interaction between them was not found as well.

Abstract

As an absolute grading scale was implemented on CSAT (College Scholastic Ability Test), it is entirely necessary that each test be consistent in the level of difficulty. This study assessed the difficulty level of each listening and reading passage in CSAT conducted over the recent three years, focusing on the syntactic complexity and the domains where more studies are required. Furthermore, the readability referring to FRE, FKGL, and GFI, which is the most widely used method to assess how difficult it is, was also applied for the assessment. The readability was aimed to compare the difficulty level of CSAT’s passages with that of EBS prep books’ for they have been propounded to affect the difficulty level of the CSAT texts by the precedent research. The following shows the results: First, the 14 measures of syntactic complexity did not demonstrate any difference in CSAT passages that were given each year. Next, no difference in difficulty level was observed in the aspect of the domains where hypothetical scores are given. Finally, there was no significant yearly variance in passages of CSAT and EBS prepbooks, and the interaction between them was not found as well.

참고문헌 (33)

  1. 교육과학기술부, "영어과 교육과정(교육과학기술부 고시 제 2011-361호 별책 14)", 교육과학기술부, ~ (2011)
  2. 고나은, "Coh-Metrix를 이용한 수능 영어 읽기 영역 지문 난이도 비교: EBS-수능 연계 정책 전후", 중등영어교육, 10(4), pp.3~24 (2017), 한국중등영어교육학회
  3. 권서경, "EBS 연계정책에 따른 대학수학능력시험 영어영역 어휘 난이도 변화 분석", 영어교과교육, 13(4), pp.97~121 (2014), 한국영어교과교육학회[DOI]
  4. 김재은, "고등학교 영어 교과서, EBS 수능 연계 교재, 대학수학능력시험의 코퍼스기반 난이도 비교 분석", 멀티미디어 언어교육, 18(1), pp.59~92 (2015), 한국멀티미디어언어교육학회[DOI]
  5. 김정렬, "수능영어 읽기 지문에 대한 통시적 Coh-Metrix 분석", 초등교과교육연구, 27, pp.63~78 (2017)
  6. 김정태, "대학수학능력시험 영어영역 절대평가제의 타당성 검증과 성공적 정착을 위한 제언", 영어평가, 14(1), pp.41~59 (2019), 한국영어평가학회[DOI]
  7. 김제우, "코퍼스기반 고등학교 어휘 사용 연구: 영어 I·II 교과서, 대학수학능력시험, EBS 교재 읽기 지문을 중심으로", 언어과학연구, (80), pp.51~74 (2017), 언어과학회[DOI]
  8. 문지현, "대학수학능력시험 영어 읽기 지문의 언어적 요소 분석", 현대영어교육, 18(1), pp.193~211 (2017), 현대영어교육학회
  9. 양수영, "영어 교과서, EBS 교재, 대학수학능력시험의 읽기 지문에 대한 코퍼스 기반 소재별 어휘 사용 양상 분석", 학습자중심교과교육연구, 19(4), pp.711~729 (2019), 학습자중심교과교육학회[DOI]
  10. 이나래, "영어 교과서와 EBS 수능 연계 교재 및 대학수학능력시험 독해지문 소재 분석", 석사, pp.2017
  11. 이병천, "수능 영어영역의 실용·기초학술영어에 대한 소재 명세화", 영어어문교육, 19(2), pp.291~313 (2013), 한국영어어문교육학회
  12. 이승환, "코메트릭스(Coh-Metrix)를 이용한 고등학교 영어1과 영어2 교과서 문어 텍스트의 코퍼스 언어학적 난이도 분석", 외국어교육연구, 27(2), pp.131~148 (2013), 외국어교육연구소[DOI]
  13. 장지연, "절대평가 도입 전후 수능 영어 독해 지문의 통사적 복잡성 비교", 영어교과교육, 18(2), pp.161~188 (2019), 한국영어교과교육학회[DOI]
  14. 장지연, "평가 유형(상대평가 대 절대평가)에 따른 2016-2019 수능 영어 독해 지문의 어휘 복잡성 비교", The SNU Journal of Education Research, 28(3), pp.85~110 (2019), 교육종합연구원[DOI]
  15. 전문기, "Coh-Metrix를 이용한 중학교 1학년과 2학년 개정 영어교과서 읽기 자료의 코퍼스 언어학적 연계성 분석", 언어과학연구, (56), pp.201~218 (2011), 언어과학회
  16. 전문기, "코메트릭스(Coh-Metrix)를 이용한 중학교 1학년 개정 영어 교과서의 코퍼스 언어학적 비교 분석", 영어교육연구, 21(4), pp.265~292 (2009), 팬코리아영어교육학회[DOI]
  17. 전문기, "고등학교 영어 교과서 읽기 자료의 코퍼스 언어학적 비교 분석", Foreign Languages Education, 17(1), pp.209~233 (2010), 한국외국어교육학회
  18. 조민수, "고등학교 영어 교과서, EBS 수능 연계 교재, 대학 수학 능력 영어 시험의 어휘 수준 및 이독성 비교 연구", 학습자중심교과교육연구, 16(7), pp.215~233 (2016), 학습자중심교과교육학회
  19. 황이수, "수학능력시험 영어 영역 읽기 지문의 이독성 및 어휘 정보와 문항 난이도 간의 상관관계", 인문사회 21, 11(2), pp.389~400 (2020), 인문사회 21
  20. Aijmer, K., "Corpus linguistics" (1991), Longman
  21. Aston, G., "Principle and Practice in Applied Linguistics: Studies in Honour of H. G. Widdowson" (1995), Oxford University Press
  22. Bachman, L. F., "Language testing in practice: Designing and developing useful language tests" (1996), Oxford University Press
  23. Biber, D., "Corpus linguistics" (1998), Cambridge University Press
  24. Estaire, S., "Planning classwork: A task based approach" (1994), Heinemann
  25. Ellis, R., "Task-based Janguage Jearning and teaching" (2003), Oxford University Press
  26. Kayaoğlu, M. N., "The use of corpus for close synonyms", The Journal of Language and Linguistic Studies, 9(1), pp.128~144 (2013)
  27. Kennedy, G., "An introduction to corpus linguistics" (1998), Longman
  28. 김차현, "A Corpus-Based Comparative Analysis of CSAT English from 2015 to 2020 on the Basis of Criterion-Referenced Assessment", 멀티미디어 언어교육, 23(2), pp.98~120 (2020), 한국멀티미디어언어교육학회[DOI]
  29. Lu, X., "Automatic analysis of syntactic complexity in second language writing", International Journal of Corpus Linguistics, 15(4), pp.474~496 (2010)
  30. Lu, X., "A corpus-based evaluation of syntactic complexity measures as indices of college-level ESL writers’ language development", TESOL Quarterly, 45(1), pp.36~62 (2011)
  31. Norris, J. M., "Towards an organic approach to investigating CAF in instructed SLA : The case of complexity", Applied Linguistics, 30(4), pp.555~578 (2009)
  32. Ortega, L., "Syntactic complexity measures and their relationship to L2 proficiency : A research synthesis of college-level L2 writing", Applied Linguistics, 24(4), pp.492~518 (2003)
  33. Wolfe-Quintero, K., "Second language development in writing: Measures of fluency, accuracy, and complexity" (1998), University of Hawaii Press

관련 논문AI추천

절대평가 도입 전후 수능 영어 독해 지문의 통사적 복잡성 비교장지연한국영어교과교육학회 · 영어교과교육2019 · 제18권 제2호절대평가 도입 전후수능 영어 3점 문항 지문의 난이도 분석나은정, 이영주한국영어교과교육학회 · 영어교과교육2024 · 제23권 제2호절대평가 도입 전⦁후 수학능력시험 영어 읽기 지문의 어휘 분석 비교김가현, 김지영외국학연구소 · 외국학연구2021 · 제58호전국연합학력평가와 대학수학능력시험의 영어 읽기 지문 언어적 비교 분석김해동, 염영희21세기영어영문학회 · 영어영문학212023 · 제36권 제3호대학수학능력시험 영어 듣기와 읽기 지문의 어휘, 통사, 담화적 특성 비교김진영, 김해동현대영어교육학회 · 현대영어교육2021 · 제22권 제1호대학수학능력시험 영어영역 읽기 문항 난이도 요인 탐색: EBS 연계정책 변화를 중심으로권서경, 신동광한국영어교과교육학회 · 영어교과교육2022 · 제21권 제2호

이 간행물의 다른 논문 (18건)

Efficacy of Learning-Oriented Diagnostic Assessment based on Process-oriented Automated Error Analysis장승호, 최인철pp. 11-44Understanding of Technological Pedagogical Content Knowledge (TPACK) in South Korea: Does Experience Make a Difference?지향은, 신혜원pp. 45-67Lexical Bundles as Criterial Features in L2 Academic Writing: Structural Differences between CEFR A2 and B2 Essays박광현, 남대현pp. 68-86Korean EFL Learners’ Approach to and Perception of Computer-Sugpported Collaborative Writing김성연, 배주경pp. 87-109모바일 앱 영어 어휘학습에 대한 한국 성인 학습자의 인식박지현, 임효정, 민주영pp. 110-134
원문 보기