수업전문성 측정도구(ICALT)의 문항별 신뢰도 및 타당도에 관한 연구
On the reliability and validity of ICALT(International Comparative Analysis of Learning and Teaching) classroom observation tool
0
조회
0
다운로드
7
인용
0
참고문헌
키워드
초록
본 연구는 Van de Grift(2007)의 ICALT 도구가 한국적 상황에서 수업전문성을 측정하는 도구로 적용 가능한가를 확인하는 데 연구목적을 두고 진행되었다. ICALT 수업전문성 관찰도구는 6개의 교사의 수업행동 도메인과 1개의 학생의 수업참여도 도메인을 구성하는 총 35개의 문항으로 구성되어 있다. 본 연구에서 사용된 자료는 2014, 2016, 2017년에 진행된 총 855개의 초등 및 중등 수업관찰이며, 주요 연구 결과는 다음과 같다. 첫째, ICALT의 요인구조와 각 문항이 한국 교사의 수업전문성을 측정하기에 적합한지를 분석하고자 확인적 요인분석을 실행한 바, 모델 적합도를 나타내는 추정치의 값이 RMR 037, RMSEA .057, IFI .921, TLI .912, CFI .921 등 모두 통계적으로 유의한 것으로 검증되었다. 둘째, 모델 적합도를 떨어뜨리는 문항을 찾아 도구의 신뢰도와 타당도를 높일 수 있는 방법을 찾기 위해 탐색적 요인분석을 하였다. ‘전체(중등+초등)’ 집단과 ‘중등’ 집단은 4개 요인, ‘초등’ 집단은 3개 요인이 추출되었고, 문항별 용어 번역의 적합성을 개선함으로써 관찰도구의 문화 간 타당도를 높일 수 있을 것으로 판단되었다.
Abstract
This article is a report of the study which aimed to investigate how to improve the ICALT classroom observation tool of teaching behavior by analysing the model fitness together with reliability and validity of individual 32 items under 6 domains. Total 855 classroom observation data collected for three years, 2015,2016 and 2017, were used, and the observation was conducted by trained master teachers with over 20 years of teaching experience. Major findings are: First, confirmatory factor analysis showed the ICALT tool has a good level of model fitness for every item under respective domain: major parameters are verified statistically meaningful, RMR 037, RMSEA .057, IFI .921, TLI .912, CFI .921. Second, exploratory factor analysis was done to identify latent factors and examine how they are compatible with six ICALT domains. For the mixed group of elementary and secondary teachers and the separate secondary teachers showed four factor grouping, while the separate elementary three. Such this variation within factors are found to get better reliability and validity of each items by translating the original English and Dutch words into more relevant Korean and local.
참고문헌 (26)
- 김민성, "교사전문성의 ‘연계(連繫)’적 특성과 교사교육의 방향", 교육심리연구, 26(1), pp.39~61 (2012), 한국교육심리학회
- 김정환, "수업의 질 개선을 위한 교사 수업능력 자기평가 방략에 관한 논리적 고찰", 교육평가연구, 18(3), pp.19~38 (2005), 한국교육평가학회
- 김주환, "구조방정식모형으로 논문 쓰기" (2009), 커뮤니케이션북스
- 김지선, "교사전문성을 위한 자기평가 준거 개발 연구", 한국교원교육연구, 31(4), pp.167~196 (2014), 한국교원교육학회[DOI]
- 백순근, "중등학교 교사의 교수역량 구성요인에 대한 이론적 고찰", 아시아교육연구, 8(1), pp.47~69 (2007), 교육연구소[DOI]
- 안미화, "초등학교 교사의 전문성 개발 척도", 한국교원교육연구, 22(3), pp.281~306 (2005), 한국교원교육학회
- 유한구, "수업 전문성의 두 측면; 기술과 이해", 한국교원교육연구, 18(1), pp.69~84 (2001)
- 윤근영, "초등교사의 수업 전문성 탐색을 위한 이론적 고찰", 초등교육학연구, 14(1), pp.81~97 (2007)
- 이대용, "Delphi와 AHP 기법을 적용한 초등학교 교사의 교수역량 평가기준 탐색 및 분석", 초등교육연구, 28(4), pp.219~239 (2015), 한국초등교육학회
- 임찬빈, "수업평가 기준 개발 연구Ⅲ" (2006), 한국교육과정평가원
- 정민수, "예비 초등교사의 수업전문성 측정도구 개발 및 타당화", 교육종합연구, 11(3), pp.185~200 (2013), 교육종합연구원
- 천세영, "ICALT 관찰도구를 활용한 교사의 교실수업전문성 분석 연구", 교육공학연구, 33(2), pp.517~536 (2017), 한국교육공학회[DOI]
- 홍우림, "수업전문성의 중요도와 실행도에 대한 초등교사의 인식", 한국초등교육, 28(2), pp.1~17 (2017), 초등교육연구원[DOI]
- 황은희, "중등교사의 실천적 교수역량에 대한 자기평가와 전문가평가의 비교 연구", 교육평가연구, 21(2), pp.53~74 (2008), 한국교육평가학회
- Ambady, N., "Thin slices of expressive behavior as predictors of interpersonal consequences : A meta-analysis", Psychological bulletin, 111(2), pp.256~274 (1992)
- Ambady, N., "Half a minute : Predicting teacher evaluations from thin slices of nonverbal behavior and physical attractiveness", Journal of personality and social psychology, 64(3), pp.431~441 (1993)
- Fuller, F. F., "Concerns of teachers : A developmental conceptualization", American Educational Research Journal, 6(2), pp.207~226 (1969)
- Fuller, F. F., "Becoming a teacher", pp.25~52 (1975), National Society for the Study of Education
- Kraft, M. A., "The effect of teacher coaching on instruction and achievement : A meta-analysis of the causal evidence", Review of Educational Research, 88(4), pp.547~588 (2018)
- Marzano, R. J., "수업장학" (2015), 학지사
- Marzano, R. J., "Classroom instruction that works: Research-based strategies for increasing student achievement. Ascd" (2010), 시그마프레스
- Tas, T., "Learning to teach : Effects of classroom observation, assignment of appropriate lesson preparation templates and stage focused feedback", Studies in Educational Evaluation, 58, pp.8~16 (2018)
- Van de Grift, W., "Quality of teaching in four European countries : A review of the literature and application of an assessment instrument", Educational research, 49(2), pp.127~152 (2007)
- Van de Grift, W. J., "Measuring teaching quality and student engagement in South Korea and The Netherlands", School effectiveness and school improvement, 28(3), pp.337~349 (2017)
- Van de Grift, W., "Teaching skills of student teachers : Calibration of an evaluation instrument and its value in predicting student academic engagement", Studies in educational evaluation, 43, pp.150~159 (2014)
- Van den Hurk, H. T. G., "Fostering effective teaching behavior through the use of data-feedback", Teaching and Teacher Education, 60, pp.444~451 (2016)
