본문 바로가기
KERD
논문KCI 등재

학업성장 정보 산출을 위한 수직척도 활용 방안 고찰

Theoretical Reviews on Interpreting and Reporting Students' Academic Growth Based On Vertically Scaled Scores

이현숙|송미영
한국교육과정평가원 (Korea Institute for Curriculum and Evaluation)|2012.11|교육과정평가연구 (The Journal of Curriculum and Evaluation)|제15권 제3호|pp. 251-276

0

조회

0

다운로드

1

인용

0

참고문헌

키워드

국가수준 학업성취도 평가National Assessment of Educational Achievement수직척도학업성장Vertical scalingAcademic growth
주제분류교육학

초록

2008년부터 국가수준 학업성취도 평가가 전수평가로 전환되면서 동일 학생들에 대한 초6ㆍ중3ㆍ고2, 세 시점의 학업성취도 자료를 종단적으로 수집할 수 있는 틀이 마련되었다. 이와 같이 수집된 학생수준의 종단자료를 이용하면 적어도 두 시점 이상에서 학생들의 학업성취도 변화를 종합적으로 파악하여 교육의 질적 향상과 교육의 책무성 제고를 위한 교육적 지원 및 정책 결정의 근거 자료를 산출할 수 있다. 학생수준의 종단자료를 활용하여 학업성장 정보를 다양한 접근 방법으로 유연하고 정교하게 분석하기 위해서는 평가시점별 학업성취도 점수가 수직적으로 연계된 점수체계 기반이 요구된다. 본 연구에서는 향후 국가수준 학업성취도 평가의 초—중—고 간 수직척도가 개발되어 본격적으로 적용되면 수직척도화된 종단자료를 어떻게 분석하고 해석하여 보고할 것인지와 각 모형을 적용할 경우 고려해야 할 사항들을 이론적으로 고찰하고 학생 및 학교수준에서 효과적인 학업성장 정보를 산출할 수 있는 방안을 제안하였다. 또한 국가단위의 대규모 평가에 대한 수직척도 개발 연구의 초기 단계인 현 시점에서 향후 수직척도의 효과적인 활용을 위해 고려해야 할 사항들에 관해 논의하였다.

Abstract

Transition in administration of the National Assessment of Educational Achievement (NAEA) from a sample-based to the entire population-based assessment for target grades since 2008 has provided opportunities to collect longitudinal achievement data at an individual student level. In order to maximize the utility of the panel data, research has been conducted on feasibility and validity of constructing vertical scales for the NAEA Korean and Math subjects so that student achievement could be compared across a single continuum of the construct being measured. At the outset of constructing the vertical scales linking scores on the 6th-9th-11th grades, the present study theoretically investigated how student-level longitudinal data can be analyzed and interpreted before empirical studies can be carried out. For this purpose, the present study explored several growth models applicable to student- level longitudinal data, such as models based on simple gain scores, multilevel growth models, layered mixed effect model, and discussed issues that should be considered in application of each model to the NAEA vertical scale scores. In addition, exemplary score reports for students and schools were presented in order to propose appropriate information to be included and recorded. Finally, suggestions that should be considered were made in developing valid vertical scales and making effective uses of the vertically scaled scores.

참고문헌 (32)

  1. 국외 학업성취도 평가 비교와 교육정보 공시를 위한 학교 향상도 지표 개발, "김경희", 한국교육과정평가원, ~, pp.연구보고 CRE 2011-11 (2011)
  2. 국가수준 학업성취도 평가 결과 향상도 지표 개발, "김경희", 한국교육과정평가원, ~, pp.연구자료 ORM 2011-53-24 (2011)
  3. 우리나라 초ㆍ중ㆍ고 학생의 학업성취 특성 분석-2009년 국가수준 학업성취도 평가 전수 결과 중심-, "김성숙", 한국교육과정평가원, ~, pp.연구보고 RRE 2010-7-1 (2010)
  4. 국가수준 학업성취도 평가 활용 체제 구축 연구, "김양분", 한국교육개발원, ~, pp.연구보고 RR 2009-28 (2009)
  5. 김준엽, "대규모 학업성취도 평가 자료를 활용한 학교 부가가치 지수 설정 방법", 대규모 학업성취도 평가 자료의 활용 방안 탐색 세미나 자료집 (2009), 한국교육과정평가원
  6. 김준엽, "대규모 학업성취도 평가 자료를 활용한 학교 부가가치 추정모형의 비교", 교육평가연구, 23(1), pp.101~124 (2010), 한국교육평가학회
  7. 송미영, "학업성장 분석을 위한 국가수준 학업성취도 평가의 종단척도 구축", 개별 학생의 학업성장과 학교교육 성과 분석 방안 세미나 자료집 (2011), 한국교육과정평가원
  8. 학교교육 성과 평가를 위한 학업성취 지표와 평가모형 개발 - 국가수준 학업성취도 평가의 종단척도 구축-, "송미영", 한국교육과정평가원, ~, pp.연구보고 RRE 2011-6-1 (2011)
  9. 학교교육 성과 평가를 위한 학업성취지표와 평가모형 개발: 학교효과 추정 모형과 평가 체제를 중심으로, "이상하", 한국교육과정평가원, ~, pp.연구보고 RRE 2010-10 (2010)
  10. 이현숙, "종단척도를 활용한 학업성장 정보 산출 방안", 개별 학생의 학업성장과 학교교육 성과 분석 방안 세미나 자료집 (2011), 한국교육과정평가원
  11. 학교교육 실태 및 수준 분석(III): 중학교 연구, "임현정", 한국교육개발원, ~, pp.연구보고 RR 2010-23 (2010)
  12. 국가수준 학업성취도 평가 결과 추이(2003년~2008년)-고등학교 1학년-, "정은영", 한국교육과정평가원, ~, pp.연구보고 RRE 2009-8-3 (2009)
  13. 고교 유형에 따른 학교효과 분석을 위한 패널조사 설계: 자율형 고교를 중심으로, "차성현", 한국교육개발원, ~, pp.연구보고 RR 2010-01 (2010)
  14. Australian Curriculum, Assessment, and Reporting Authority, "2010 NAPLAN Principals Handbook" (2010)
  15. Ballou, D., "Controlling for student background in value-added assessment of teachers", Journal of Educational and Behavioral Statistics, 1(2), pp.127~155 (2004)
  16. Blank, R. K., "State Growth Models for School Accountability: Progress on Developing and Reporting Measures of Student Growth", Paper presented at the Council of Chief State School Officers (2010)
  17. Braun, H. I., "Using Student Progress To Evaluate Teachers: A Primer on Value- Added Models", Educational Testing Service, ~ (2005)
  18. Bryk, A. S., "Assessing school academic productivity : The case of Chicago school reform", Social Psychology of Education, 2, pp.103~142 (1998)
  19. Carey, K., "Growth Models and Accountability: A Recipe for Remaking ESEA", Education Sector, ~ (2011)
  21. Goldschmidt, P., "Policymakers’ Guide to Growth Models for School Accountability: How do Accountability Models Differ?", The Council of Chief State School Officers, ~ (2005)
  22. Lissitz, R. W., "Vertical equating for state assessments: issues and solutions in determination of adequate yearly progress and school accountability", Practical Assessment, Research & Evaluation, 8(10) (2003)[DOI]
  23. McCaffrey, D. F., "Value-Added Assessment in Practice: Lessons from the Pennsylvania Value-Added Assessment System Pilot Project", RAND Corporation, ~ (2007)
  24. National Research Council and National Academy of Education, "Getting Value Out of Value-Added: Report of a Workshop", Committee on Value-Added Methodology for Instructional Improvement, Program Evaluation, and Accountability (2010), Center of Education, Division of Behavioral and Social Sciences and Education
  25. Patz, R. J., "Vertical Scaling in Standards-Based Educational Assessment and Accountability Systems", the Council of Chief State School Officers. Stanford Learning First, ~ (2007)
  26. Raudenbush, S. W., "What are value-added models estimating and what does this imply for statistical practice?", Journal of Educational and Behavioral Statistics, 29(1), pp.121~129 (2004)
  27. Ray, A., "The use of national value-added models for school improvement in English schools", Revista de Educación, 348, pp.47~66 (2009)
  28. Sanders, W. L., "Comparison among various educational assessment value-added models", Paper presented at the power of two national value-added conference (2006)
  29. Sanders, W. L., "The Tennessee value-added assessment system(TVAAS) : Mixed model methodology in educational assessment", Journal of Personnel Evaluation in Education, 8, pp.299~311 (1994)
  30. Texas Education Agency, "2010 Accountability Manual: The 2010 Accountability System for Texas Public Schools and School Districts", ~ (2010)
  31. Yen, W. M., "Measuring Student Growth With Large-Scale Assessments in an Education Accountability System", Paper presented at the Exploratory Seminar: Measurement Challenges Within the Race to the Top Agenda (2010), Center for K–12 Assessment & Performance Management
  32. Wise, L., "Assessing vertical alignment" (2006), Council of Chief State School Officers

관련 논문AI추천

국가수준 학업성취도 평가에 기초한 학교평가 통계 모형의 고찰김성열, 최길찬한국교육과정평가원 · 교육과정평가연구2010 · 제13권 제2호수직 척도점수를 이용한 학년 간 비교의 타당성 - 초등학생용 ICT 리터러시 검사 -민경석한국교육과정평가원 · 교육과정평가연구2010 · 제13권 제1호학생들의 성취도 변화점수에 기초한 학교효과 평가 모형 개발 연구: 학교책무성평가를 위한 다양한 접근 방법 비교성기선한국교육사회학회 · 교육사회학연구2008 · 제18권 제4호가교문항 수직적 동등화 방법을 통한 중학생의 학년별 수학 학력 변화 탐색김선희, 김재철한국교육과정평가원 · 교육과정평가연구2006 · 제9권 제1호검사 길이 변화에 따른 국가수준 학업성취도 평가의 안정성 분석김성훈, 김희경한국교육과정평가원 · 교육과정평가연구2023 · 제26권 제1호초등학생용 ICT 리터러시 검사의 수직 척도화민경석, 서순식한국교육정보미디어학회 · 교육정보미디어연구2009 · 제15권 제3호

이 간행물의 다른 논문 (12건)

중학교 국어과 교과서 선정 기준 설정 실태 연구김은성, 김호정, 남가영, 박재현pp. 1-28학생이 원하는 국어 교과서 체제 연구박진용pp. 29-48쟁점 중심 사회과 교육과정의 원류를 찾아서: Harold Rugg의 통합 사회과 교과서의 설계 및 개발 탐색배영민pp. 49-765세 누리과정과 초등 저학년 교육과정의 소통 가능성 탐색박순경pp. 77-97Dictogloss 수업활동의 영어 학습 효과 고찰정미화pp. 99-124
원문 보기