교직 인성 검사에서의 문항 프로파일 분석
Item Profile Analysis of the Personality Test for Teaching Profession
0
조회
0
다운로드
8
인용
0
참고문헌
키워드
초록
본 연구의 목적은 수정 및 보완이 필요한 문항에 대해 구체적인 정보를 제공해주지 못한다는 일반화가능도 이론의 제한점을 문항 점수와 영역 점수의 상관계수와 기대 상관계수의 프로파일 비교를 통해 비정형적인 문항을 탐색하는 방법을 제시하는 데 있다. 이를 위해 수도권의 한 교육대학원에서 실시한 268명의 교직 인성 검사 자료에 다변량 일반화가능도 분석을 수행하였다. 주요 분석 결과는 다음과 같다. 첫째, 다변량 G-연구 분석 결과, 심리적 안정성과 공감·포용력 영역에서는 문항의 난이도 보다 피험자들의 인성 차이가 교직 인성 검사 점수에 더 큰 영향을 미치는 것으로 나타났다. 둘째, 다변량 D-연구 분석 결과, 적정 수준의 신뢰도에 도달하기 위해서 문항 수를 78개에서 72개로 줄일 수 있는 것으로 나타났다. 셋째, 각 영역 별로 정형적인 문항과 비정형적인 문항들에 대한 정보를 제공하였다. 본 연구에서 사용한 분석 방법과 절차는 검사의 측정학적 특성을 바탕으로 기존 검사의 축소본 개발 시 효율적인 측정 조건과 비정형적인 문항을 탐색하는데 적용 가능하다.
Abstract
As a limitation of using a generalizability theory does not provide specific information about the items that need to be revised or supplemented, this study illustrates the method of profile comparisons of observed and expected correlations of item scores with category scores to detect atypical items. For this study, we analyzed the scores of the teacher personality test of 268 students at Graduate School of Education located in the Seoul metropolitan area by performing a multivariate generalizability analysis. The main results were as follows: First, multivariate G-study showed that variability due to individual personality differences among graduate students served as a larger contributor than the variability due to difficulties among items to observed score variance in the psychological stability domain and the empathy· tolerance domain. Second, multivariate D-study showed that the number of items could be reduced from 78 to 72 to ensure high satisfactory reliability. Third, specific information about both typical and atypical items was provided within each domain. Based on measurement traits, the methodology and the procedures referred to in this study can be applied to find efficient measurement conditions and atypical items in developing a short form of a test that has already been used.
참고문헌 (32)
- 강애남, "학생들의 동료평가를 활용한 수행평가 결과의 일반화가능도 분석", 교육평가연구, 19(3), pp.107~121 (2006), 한국교육평가학회
- 강재원, "교직적성과 검사지 도출", 교사교육연구, 53(2), pp.245~259 (2014), 과학교육연구소[DOI]
- 교육과학기술부, "교원자격검정령" (2012), 교육인적자원부
- 교육부, "교직과목, 교직 적성 및 인성검사 등 교원양성과정 철저 운영 안내", 교육부, ~ (2015)
- 김경령, "예비교사의 교직인성 자기점검도구 개발 연구", 한국교원교육연구, 31(1), pp.117~139 (2014), 한국교원교육학회
- 김남순, "교직 적격자 선발을 위한 평가도구 개발", 고등교육연구, 5(1), pp.203~230 (1993)
- 김성희, "일반화가능도 이론을 적용한 최순자의 유아 사회도덕성 검사의 효율적인 측정 조건 탐색", 미래유아교육학회지, 24(1), pp.325~342 (2017), 미래유아교육학회[DOI]
- 김성연, "미국의 수업관찰평가 분석을 통한 우리나라 교원능력개발평가에서의 다변량 일반화가능도 이론 활용성 탐색", 한국교육, 41(1), pp.5~29 (2014), 한국교육개발원
- 김성연, "수학적 창의성 태도 검사에서 수학영재와 일반학생의 다집단일반화가능도 분석", 수학교육 논문집, 31(1), pp.49~70 (2017), 한국수학교육학회
- 김정환, "교직 적성․인성 검사도구 개발연구" (2012), 교육과학기술부
- 류춘렬, "일반화가능도 이론을 이용한 집단논리적사고력검사 (GALT)의 신뢰도 분석", 한국지구과학회지, 31(1), pp.95~105 (2010), 한국지구과학회
- 서경혜, "예비교사 교직 인성 평가도구 개발 및 타당화", 교육과학연구, 44(1), pp.147~176 (2013), 교육과학연구소
- 송인섭, "다변량 일반화가능도 이론을 통한 인식론적 신념 검사 타당화 연구", 교육방법연구, 24(1), pp.107~130 (2012), 한국교육방법학회
- 이선영, "다변량 일반화가능도 이론을 활용한 창의성 예비검사의 신뢰도 분석", 창의력교육연구, 15(3), pp.83~107 (2015), 한국창의력교육학회
- 조영남, "교사 자실 선정 및 평가 준거에 관한 기초 연구", 한국교원교육연구, 17(3), pp.171~189 (2000)
- 교직적성․인성 검사도구 개발, "조주연", 교육인적자원부, ~ (2004)
- 조주연, "초등 교직적성검사(TAPST) 타당화 연구", 초등교육연구, 20(2), pp.161~182 (2007), 한국초등교육학회
- 홍기칠, "교직적성 및 인성을 갖춘 우수학생 선발을 위한 심층면접방안 연구", 초등교육연구논총, 19(2), pp.301~343 (2003)
- Brennan, R. L., "Generalizability Theory" (2001), Springer
- Brennan, R. L., "Manual for mGENOVA" (2001), Iowa Testing Programs, University of Iowa
- Cronbach, L. J., "The dependability of behavioral measurements. theory of generalizability of scores and profiles" (1972), Wiley
- Dunbar, S. B., "Quality control in the development and use of performance assessments", Applied measurement in education, 4(4), pp.289~303 (1991)
- Jarjoura, D., "A variance components model for measurement procedures associated with a table of specifications", Applied Psychological Measurement, 6(2), pp.161~171 (1982)
- Jarjoura, D., "New Directions for Testing & Measurement. Generalizability theory: Inferences and practical applications" (1983), Jossey-Bass
- Henrysson, S., "Gathering, analyzing, and using data on test items. Educational measurement" (1971), American Council on Education
- Kolen, M. J., "Item profile analysis for tests developed according to a table of specifications", Applied psychological measurement, 8(3), pp.321~331 (1984)
- A multi-group generalizability analysis of a large-scale reading comprehension test, "Li, D.", Center for Advanced Studies in Measurement and Assessment, University of Iowa, ~, pp.CASMA Research Report, 25 (2007)
- Linn, R. L., "Test design and analysis for measurement of educational achievement", New Directions for Testing and Measurement, 5, pp.81~92 (1980)
- Murphy, K. R., "Psychological testing: Principles, and Applications" (1988), PrenticeHall
- Rajaratnam, N., "Generalizability of stratified-parallel tests", Psychometrika, 30(1), pp.39~56 (1965)
- Shavelson, R. J., "Sampling variability of performance assessments", Journal of Educational Measurement, 30(3), pp.215~232 (1993)
- Shavelson, R. J., "Generalizability theory: A primer" (1991), Sage