초·중학생 대상 빈칸 메우기 검사를 통한 교사의 교육용 텍스트 이독성 수준 평정의 타당성 분석
A Study on the Validation of Teacher's Educational Text readability Evaluation through a Cloze Test for Elementary and Middle School Students
0
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
본 연구는 교사가 교육용 텍스트의 이독성 수준을 평정한 결과가 학생 입장에서의 이독성 수준을 적절하게 반영하고 있는지 검증하는 것을 목적으로 한다. 이를 위해 다음과 같은 일련의 절차를 거쳤다. 먼저 교사가 이독성 수준을 평정한 텍스트 중에서 검사용 텍스트를 선정한 후 서답형의 빈칸메우기 검사지를 개발하였다. 이어서 초등학교 6학년과 중학교 3학년 학생을 대상으로 예비검사 총 286명 및 본검사 총 421명을 대상으로 빈칸메우기 검사를 시행하고, 교사 채점단이 서답형 답안을 채점하도록 하였다. 평정 및 채점 결과에 대한 통계 분석으로는 Rasch 모형을 통해 교사의 텍스트 수준 평정 서열을 도출한 다음, Spearman’s Rho를 활용한 서열 상관관계 분석을 통해 교사의 텍스트 수준 평정 서열과 학생 대상 이독성 검사의 문항 난이도 서열 간의 상관관계를 분석하였다. 그 결과 초등학생 대상 본검사 결과는 0.8154, 중학생 대상 본검사 결과 0.8374로 상관관계가 높게 나타나 교사의 텍스트 이독성 수준 평정의 타당성이 확보되었음을 확인할 수 있었다. 이를 토대로 향후 더 발전적인 이독성 지수 개발의 타당성을 확보하기 위해서 학생 대상 이독성 검사를 다각화하여 활용하는 방안에 대해 제언하였다.
Abstract
The goal was to determine whether the teacher's evaluation of text readability aligns with the students' perspective. Two sets of cloze tests were created and administered to measure the agreement between teacher-evaluated text readability and the difficulty derived from students' test results. A total of 286 students for field trial and 421 students for main survey those who are 6th grade elementary school and 3rd grade middle school participated in the tests. Rasch model analysis was used to examine the distribution of text difficulty, which was found to be evenly distributed. Spearman's Rho was employed to analyze the correlation between the teacher's evaluation sequence and the text difficulty sequence in the students' tests. The results indicated a high correlation of 0.8154 for elementary school students and 0.8374 for middle school students, confirming the validity of the text readability test and evaluation conducted in this study.
참고문헌 (25)
- 김지은, "읽기 교과서의 설명 텍스트 난도에 대한 교사와 학생의 인식 차이에 관한 연구", 한국초등국어교육, (49), pp.33~64 (2012), 한국초등국어교육학회[DOI]
- 김해인, "중학생들의 설명텍스트 난도 평가", 문화와융합, 41(4), pp.1255~1278 (2019), 한국문화융합학회
- 류수경, "교사의 이독성 평가 전문성 신장을 위한 평가자 훈련 워크숍 사례연구", 독서연구, (62), pp.141~185 (2022), 한국독서학회[DOI]
- 박수자, "읽기 지도의 이해" (2001), 서울대학교출판부
- KICE 이독성 지수 (KICE Readability In dex) 자동측정 프로그램 설계 및 개발 연구(Ⅰ), "박태준", 한국교육과정평가원, ~ (2022)
- 이성영, "초등 교과서의 이독성 비교 연구 －국어, 사회, 과학 교과서를 중심으로－", 국어교육학연구, (41), pp.169~193 (2011), 국어교육학회[DOI]
- 조용구, "읽기 능력 측정을 위한 빈칸 메우기 검사 도구의 개발", 독서연구, (30), pp.465~491 (2013), 한국독서학회
- 조용구, "독자에게 적합한 글을 선정하기 위한 이독성 공식의 개발", 박사, pp.2016
- 조현재, "생물 교과서의 이독성(易讀性) 측정 도구로서 Cloze 검사의 적용 방법에 대한 연구", 생물교육, 28(4), pp.348~355 (2000)
- 최소영, "교육용 텍스트의 이독성 질적 평가 준거 개발 및 타당화 연구", 국어교육, (176), pp.1~57 (2022), 한국어교육학회[DOI]
- 최소영, "텍스트 이독성 질적 평가 요인의 설명력 분석- 교육용 정보 텍스트를 중심으로 -", 국어교육, (179), pp.251~294 (2022), 한국어교육학회[DOI]
- 교육용 텍스트의 이독성 평가 준거 개발 연구, "최소영", 한국교육과정평가원, ~ (2021)
- Development of Standards of Readability : Toward a Rational Cri terion of Passage Performance, "Bormuth, J. R", ~ (1971)
- Chall, J. S., "Readability revisited: the new Dale & Chall readability for mula" (1995), Brookline Books
- Dale, E., "A formula for predicting readability : Instructions", Educati onal research bulletin, 27(2), pp.37~54 (1948)
- Fan, J., "Applying Rasch measurement in language assessment: Unidi mensionality and local independence. Quantitative Data Analysis for Language As sessment Volume I" (2019), Routledge
- Hambleton, R. K., "Fundamentals of item respo nse theory" (1991), Sage Publications, Inc
- Lively, B. A., "A method for measuring the vocabulary burden of textbooks", Educational administration and supervision, 9(7), pp.389~398 (1923)
- McNamara, T. F., "Measuring second language performance" (1996), Longma n Publishing Group
- Mesmer, H. A. E., "Tools for matching readers to texts: Research-based practices" (2008), Guilford Press
- Development of the ATOS readability formula, "Milone, M.", Renaissance Learning, ~ (2014)
- Measures of text difficulty: Testing their predictive value for grade levels and student performance, "Nelson, J.", Council of Chief State School Officers, ~ (2012)
- The Lexile scale in theory and practice: Final report for NIH Grant HD-19448, "Smith, D.", Met aMetrics, Inc, ~ (1989)
- Wright, B. D., "Reasonable mean-square fit values", Rasch Measu rement Transactions, 8(3), pp.370~ (1994)
- Yen, W. M., "Effects of local item dependence on the fit and equating performan ce of the three-parameter logistic model", Applied Psychological Measurement, 8(2), pp.125~145 (1984)