초등학교 국가수준 학업성취도 평가의 결과타당도
Consequential Validity of National Assessment of Educational Achievement in Elementary Schools
0
조회
0
다운로드
6
인용
0
참고문헌
키워드
초록
결과타당도는 평가 시행에 따른 결과가 본래 목적과 부합되는지, 평가 결과의 직ㆍ간접적인 사회/교육적 영향은 어떠한지에 대한 가치판단을 반영한다. 그러므로 국가차원에서 공교육의 질 관리를 위해서 대규모 평가를 활용하는 경우, 평가도구의 결과타당도는 더욱 강조되어야 한다. 이 연구는 초등학교 국가수준 학업성취도 평가의 결과타당도를 단위학교 교사의 관점에서에서 논의하기 위하여, 성취수준 진술문에 대한 교사의 분류 일치도, 국가수준 학업성취도 평가 결과와 교사의 예측 성취수준의 일치도, 단위학교의 교육 활동 속에서 평가 목적의 구현 정도를 분석하였다. 이 연구의 주요 결과는 다음과 같다. 첫째, 성취수준 진술문에 대한 교사의 분류는 국어과와 수학과 모두에서 국가수준 학업성취도 평가의 성취수준 분류에 대한 일치율이 낮았다. 둘째, 개별 학생의 국가수준 학업성취도 평가 결과와 교사의 예측 성취수준은 우수학력과 기초학력 미달에서는 상대적으로 일치율이 높았지만, 기초학력과 보통학력에서는 낮게 나타났다. 셋째, 학업성취도 평가 목적의 구현에 대하여 교사는 전반적으로 낮은 인식을 보였다. 구체적으로, 단위학교 교사들은 평가 시행 결과가 학업 성취수준 파악, 학업 성취 추이 분석, 교수ㆍ학습 개선, 배경변인 정보 활용, 평가 전문성 신장에 미치는 영향은 중립적 또는 부정적으로 인식하고 있으나, 기초학력 보장에 미치는 영향에 대해서는 긍정적인 가치를 부여하는 것으로 판단된다. 이러한 연구 결과로 볼 때, 현재 국가수준 학업성취도 평가의 개선(초등학교 재시행 포함)에 대한 논의에서는 평가 절차(학년, 과목, 전수/표본조사 등) 뿐만 아니라 평가 결과의 교육적 활용(결과타당도) 측면에서도 타당성이 지속적으로 검토되어야 한다.
Abstract
The purpose of this study was to examine the consequential validity of NAEA(National Assessment of Educational Achievement) in terms of school practices. To accomplish the research purposes, the consistency of teacher’s classification of NAEA achievement level descriptions, the accuracy of predicted achievement levels for each student, and teachers’ application of NAEA results for teaching were evaluated. The research results were found that 1) teachers categorized achievement level descriptions somewhat differently from NAEA, 2) teachers expected more below-basic level students compared with NAEA, and 3) NAEA results were far less used than expected in school practices. Also, teachers kept focusing on the national curriculum regardless of the implementation of NAEA. In sum, we found the impacts of NAEA on schools were not in the intended directions and degrees, in terms of consequential validity defined by Messick. Based on research results, we discussed issues on the recent cessation of Elementary School NAEA and suggested several research points for further studies.
참고문헌 (33)
- 2011년 국가수준 학업성취도 평가 기본계획, "교육과학기술부", 교육과학기술부, ~, pp.교육과학기술부 교육정보기획과-646 (2011)
- 2012년 국가수준 학업성취도 평가 기본계획, "교육과학기술부", 교육과학기술부, ~, pp.교육과학기술부 교육정보기획과-4940 (2012)
- 교육부, "2013년 국가수준 학업성취도 평가 기본계획 발표", 2013. 4. 23. 교육부 보도자료, ~ (2013)
- 국가수준 학업성취도 평가 개선 연구, "김경성", 교육부, ~, pp.수탁과제 2013-1 (2013)
- 국가수준의 기초학력 점검을 위한 초등학교 학업성취도 평가 방안, "김경희", 한국교육과정평가원, ~, pp.CRE2014-2 (2014)
- 국가수준 학업성취도 평가에 나타난 우리나라 학력 향상의 특성 분석, "김경희", 한국교육과정평가원, ~, pp.연구보고 RRE 2011-2-4 (2011)
- 2011국가수준 학업성취도 평가 결과 : 초등학교 학업성취도 변화 추이 분석, "김경희", 한국교육과정평가원, ~ (2012)
- 국가수준 학업성취도 평가의 전수시행에 따른 교육맥락 변인 탐색과 설문지 개발, "김성숙", 한국교육개발원, ~, pp.연구보고 RRE2009-1 (2009)
- 2009년 국가수준 학업성취도 평가 전수분석 결과 -초등학교 6학년-, "김성숙", 한국교육과정평가원, ~, pp.연구보고 RRE2010-7-2 (2010)
- 김신영, "학교평가에서의 대규모 학업성취도 평가 결과 활용 방안", 교육평가연구, 24(1), pp.1~30 (2011), 한국교육평가학회
- 남현우, "국가수준 학업성취도 평가 체제 재구조화 방안", 국가수준 학업성취도 평가 체제 재구조화 방안을 위한 공청회, 국가수준 학업성취도 평가 개선 연구팀, ~ (2014)
- 국가수준 학업성취도 평가-외국 사례와 비교-, "민경석", 한국교육개발원, ~, pp.연구보고 OR 2010-04-3 (2010)
- 민경석, "한국과 미국 국가수준 학업성취도 평가의 성취수준 비교", 중등교육연구, 61(1), pp.111~136 (2013), 사범대학부속중등교육연구소
- 국가수준 학업성취도 평가 -기술보고서-, "박정", 교육과정평가원, ~, pp.연구보고 PRO 2006-4 (2006)
- 서울시교육청, "국가수준 학업성취도평가 교감 및 담당 부장 연수 자료" (2011), 서울시교육청
- 성태제, "교육평가 방법의 변화와 결과타당도에 대한 고려", 교육학연구, 37(1), pp.197~218 (1999)
- 성태제, "검사나 평가활동에 대한 메타평가적 관점에서의 결과타당도", 교육학연구, 41(1), pp.5~110 (2003), 한국교육학회
- 신혜진, "초등학교 국가수준 학업성취도평가자료 활용정책", 교육평가연구, 27(5), pp.1157~1188 (2014), 한국교육평가학회
- 국가수준 학업성취도 평가의 설문지 모음집 - 2003년∼2009년-, "이상하", 한국교육과정평가원, ~, pp.연구보고 RRE2010-12-5 (2010)
- 이원석, "타당도에 대한 통합적 관점", 교육평가연구, 21(4), pp.67~79 (2008), 한국교육평가학회
- 이원석, "타당도 분석을 위한 평가적 접근 모형: 통합적 관점", 교육평가연구, 22(4), pp.1079~1099 (2009), 한국교육평가학회
- 국가수준 학업성취도 평가 결과추이(2003년∼ 2008년)-초등학교6학년-, "정은영", 한국교육과정평가원, ~, pp.연구보고 RRE2009-8-1 (2009)
- 좌혜정, "2002학년도 대학수학능력시험 언어, 수리영역 결과타당도 분석과 2003학년도 출제 방향", 교육학연구, 41(1), pp.15~361 (2003), 한국교육학회
- Cronbach, L. J., "Educational Measurement", pp.443~507 (1971), American Council on Education
- Kane, M. T., "Educational Measurement", pp.2006, American Council on Education
- Lane, S., "Strategies For Examining The Consequences Of Assessment and account ability programs", Educational Measurement : Issues and Practice, 21(1), pp.23~30 (2002)
- Linn, R. L, "Evaluating the validity of assessments : the consequences of use", Educational Measurement : Issues and Practice, 16(2), pp.14~15 (1997)
- Mehrens, W. A., "The consequences of consequential validity", Educational Measurement : Issues and Practice, 16(2), pp.16~18 (1997)
- Mertler, C., "Teachers' Perceptions of the Influence of No Child Left Behind On Classroom Practices", Current Issues in Education, 13(3) (2011)
- Messick, S, "Educational Measurement", pp.13~103 (1989), American council on education & National council on Measurement in education
- Messick, S., "Validity of Test Interpretation and Use" (1990), Educational Testing Service
- Popham, W. J., "Consequential Validity : right concern-wrong concept", Educational Measurement : Issues and Practice, 16(2), pp.9~13 (1997)
- Shepard, L. A, "The Centrality of test use of consequences for test validity", Educational Measurement : Issues and Practice, 16(2), pp.5~8 (1997)