본문 바로가기
KERD
논문KCI 등재

Rasch 모형을 활용한 국어 교사 평가 전문성 척도개발 및 타당화 연구

Developing and Validating the Scale of Korean Language Teacher’s Assessment Professionality Using Rasch Measurement Model

최숙기
청람어문교육학회 (Cheongram Korean Language Education Association)|2015.12|청람어문교육 (Journal of CheongRam Korean Language Education)|제56호|pp. 313-340|DOI 10.26589/jockle..56.201512.313

0

조회

0

다운로드

10

인용

0

참고문헌

키워드

scale validationRasch model척도 타당화Rasch 모형성취평가제평가 전문성국어 교사korean language teacherassessment professionalitystandard－based assessment system

초록

본 연구는 『학사관리선진화방안(교육과학기술부, 2011)』에 따라 성취평가제가 학교 현장에 적용된 이래로 국어 교사의 평가 전문성에 대한 중요성이 부각되기 시작하면서 국어 교사들을 대상으로 하여 평가 전문성을 측정하기 위한 척도를 개발하고 Rasch 모형을 적용하여 척도를 타당화 하는 데 그 목적이 있다. 국어 평가 문항 개발에 관한 전문성과 국어 평가 수행에 관한 전문성이라는 2개의 평가 변인으로 구성된 총 10개의 문항을 개발하고 이에 대해 전국에 분포한 219명의 현직 국어 교사가 응답한 결과를 바탕으로 문항의 적절성과 응답 범주의 적합성을 분석하였다. WINSTEPS 프로그램을 통한 분석에서 10개 문항은 적합도 측정치(MNSQ)가 0.5에서 1.5 범위에 분포하여 국어 교사의 평가 전문성을 측정하는 데 적합한 문항으로 검증되었다. 그러나 문항의 모수 추정값이 －1∼+2 logit 범위에 집중되어 있어 +2 logit를 초과하는 국어 교사의 평가 전문성 문항의 추가 개발이 요구된다. 또한 5점 응답 범주에 대한 재검토도 동시에 요구된다. 본 척도의 결과를 통해 나타난 국어 교사의 평가 전문성과 관련하여 국어 교사들은 국어과 성취기준과 연계한 국어 평가 도구 개발에 대한 전문성은 낮은 반면, 국어 수행 평가의 실제 시행과 관련한 평가 전문성은 높은 것으로 나타났다. 국어 교사 평가 전문성 개발을 위해 국어 평가 도구 개발에 관한 연수 및 지원을 위한 후속 논의가 이루어질 필요가 있다.

Abstract

The aim of this study is to develop and validate the scale of korean language teacher’s assessment professionality by applying the Rasch measurement model. The scales consisted of 10 items and 2 sub－dimensions of ‘korean language assessment tool professionality’ and ‘korean language assessment practice professionality’ and had 5－point likert scale. The first dimension was related to korean language teacher’s professionality about korean language assessment tool(item, task, rubric etc) development. The second dimension was related to korean language teacher’s professionality about korean language assessment actual practice(grading, Interpretation and use of scoring criteria, rater’s assessment severity control etc). the scale was administered to 219 korean language teacher of secondary school in korea. The result of validation by rasch analysis using WINSTEPS program is showed that all items were valid for measuring korean language teacher’s assessment professionality because fit statistics(INFIT an OUTFIT) for items were between 0.5～1.5 suggesting that items fit the Rasch measurement. The reliability of the scale was found to be satisfactory(Cronbach α=0.903). And the category statistics from the Rasch analysis indicated that the average measures advance monotonically with 2－4 point category. But estimated measures of all items were distributed between －1∼+2 logit and then it should be developed additional items measuring korean language teacher’s assessment professionality over +2 logit range. And the 5－point likert scale should be reexamined. This study revealed that Korean language teachers tent to have the lower level of assessment professionality in developing korean language assessment tool and to have the higher level of the in participating korean language performance assessment practice.

참고문헌 (24)

  1. 교육과학기술부, "창의․인성교육 강화를 위한 중등학교 학사관리 선진화방안", 교과부 보도자료, ~ (2011)
  2. 권태현, "쓰기 채점 방식에 따른 국어교사의 채점 신뢰도 비교 연구 -고등학생의 비평문 채점을 중심으로-", 교원교육, 28(3), pp.113~134 (2012), 교육연구원[DOI]
  3. 중등학교 성취평가제 운영과 안정적 정착을 위한 과제, "김성숙", 한국교육과정평가원, ~, pp.연구자료 ORM 2012-16-3 (2012)
  4. 김석우, "성취평가제에 대한 중학교 교사의 관심수준 분석", 수산해양교육연구, 26(1), pp.81~97 (2014), 한국수산해양교육학회
  5. 김신영, "교실 내 평가의 특성과 교사의 평가 전문성", 한국외국어대학교 논문집, 34, pp.541~558 (2002)
  6. 김신영, "학생평가에 대한 교사의 인식과 실천", 교육평가연구, 27(1), pp.141~161 (2014), 한국교육평가학회
  7. 박영민, "현직 국어교사와 예비 국어교사의 쓰기평가 지식의 차이 분석", 작문연구, (19), pp.331~352 (2013), 한국작문학회
  8. 박종임, "쓰기 평가 전문성 신장을 위한 온라인 채점자 훈련 프로그램 개발 방향 연구", 작문연구, (17), pp.413~440 (2013), 한국작문학회
  9. 박준용, "국어과 평가 전문가의 문항 개발 전문성 탐색－국어과 문항 개발협의 과정을 중심으로", 한국어문교육, 13, pp.57~89 (2013)
  10. 요구 분석 결과에 따른 성취평가제 교사 역량 강화 지원 방안, "박은아", 한국교육과정평가원, ~, pp.연구자료 ORM 2014-27-14 (2014)
  11. 이정애, "Rasch 모형을 통한 대학생의 이문화 적응 태도 분석", 이중언어학, (57), pp.125~147 (2014), 이중언어학회
  12. 지은림, "Rasch 모형의 이론과 실제：교육, 심리, 사회, 연구법 총서" (2001), 교육과학사
  13. 지은림, "교사의 형성평가 피드백 수행 척도 개발 및 타당화-Rasch 모형의 적용-", 교육평가연구, 23(1), pp.79~100 (2010), 한국교육평가학회
  14. 채선희, "문항반응이론의 이론과 실제：외국어 수행 평가를 중심으로" (2003), 서현사
  15. 최숙기, "Rasch 평정척도 모형을 이용한 쓰기불안 척도 분석", 새국어교육, (87), pp.273~301 (2011), 한국국어교육학회
  16. Andrich, D., "A rating formulation for ordered response categories", Psychometrika, 43, pp.561~573 (1978)
  17. Black, P., "Assessment and classroom learning. Assessment in Education：Priciples", Policy & Practice, 5(1), pp.7~74 (1998)
  18. Kim H. Koh., "Improving teacher’s assessment literacy through professional development", Teaching Education, 22(3), pp.255~276 (2011)
  19. Linacre, J. M., "WINSTEPS (Version 3.81.0)" (2014), Winsteps.com
  20. Pomeranz et al, "Rasch analysis as a technique to examine the psychometric properties of a Career Ability Placement Survey subtest", Rehabilitation Counseling Bulletin, 51(4), pp.251~259 (2008)
  21. Saddler. D. R., "Formative assessment：revisiting the territory", Assessment in Education, 5(1), pp.77~84 (1998)
  22. Stiggins, R. J., "Assessment literacy", Phi Delta Kappan, 72, pp.534~539 (1991)
  23. Stiggins, R. J., "Assessment literacy for the 21st century", Phi Delta Kappan, 77(3), pp.238~245 (1995)
  24. Wolfe, E. W., "Rasch Measurement：Advanced and Specialized Applications", pp.243~290 (2007), JAM Press

관련 논문AI추천

Rasch 모형을 통한 <독서와 문법> 평가 문항 분석심재우, 이정애국어문학회 · 국어문학2016 · 제63권 제63호전문교과 교사의 평가 전문성 진단도구 개발 연구김민정, 이수정한국직업교육학회 · 직업교육연구2019 · 제38권 제2호Rasch 모형을 활용한 예비 국어교사의 수업지도안 작성에 나타난 문제 양상 분석김지수, 최숙기청람어문교육학회 · 청람어문교육2020 · 제73호국내 교사 평가 전문성 기준과 측정도구 분석송명섭, 송주범, 우필희한국교육과정평가원 · 교육과정평가연구2021 · 제24권 제1호Rasch 모형을 활용한 국어교사의 논설문 평가에 나타난 논증 영역별 평가 특성 분석김형성청람어문교육학회 · 청람어문교육2019 · 제71호다국면 Rasch 모형을 활용한 예비 국어교사와 현직 국어교사의 쓰기 평가 특성 차이 분석박영민, 백유진청람어문교육학회 · 청람어문교육2023 · 제92호

이 간행물의 다른 논문 (14건)

국어 교과서 단원 구성 방식과 체제에 대한교사 인식 연구－2011 고등 『국어Ⅰ, Ⅱ』를 중심으로－김동욱pp. 7-36쓰기 간접평가에 대한 비판적 고찰－중등 성취도 평가 쓰기 선다형 문항을 중심으로－박찬흥pp. 37-662015 개정 국어과 교육과정의 주요 쟁점과 향후 과제–공통 교육과정 ‘국어’를 중심으로 －서영진pp. 67-106초등학교 5·6학년의 경험적 내러티브 분석 연구－학급 내 발표 상황에서 생성된 담화를 중심으로－서현석pp. 107-130인지 면담(Cognitive Interview)을 통 한국어 교과 설문 도구의 타당화 연구－초등학생 디지털 리터러시 태도 평가 문항 개선을 중심으로－김종윤, 김지연, 고진아, 오은하pp. 131-172
원문 보기