인지진단모형을 적용한 초등학생 어휘능력 부진 평가의 Q행렬 타당화 연구
Q-matrix Validation of Vocabulary Knowledge Test for Elementary Students
0
조회
0
다운로드
1
인용
0
참고문헌
키워드
초록
본 연구에서는 초등학교 3학년 학생들의 어휘능력을 인지진단모형으로 분석하기 위해 개발된 어휘능력 부진 평가의 Q행렬을 타당화 하는데 있다. 어휘능력 부진 평가는 국내외 어휘관련 문헌조사 및 초등학교 1학년 1학기부터 3학년 2학기까지 국어과 교과서에서 다루고 있는 어휘지식을 바탕으로 10명의 전문가들의 협의를 통해 인지요소를 추출하고, 공통어휘 목록을 중심으로 개발하였다. 이후 15명의 전문가들이 4차례에 걸친 정교화 과정을 통해 80% 이상이 동의한 Q행렬을 통계적으로 타당화한 결과는 다음과 같다. 자카드 계수 분석 결과 인지요소간의 유사성이 기준을 초과하지 않았으며, 중다회귀분석 결과 정답률에 부적관계를 보이는 인지요소가 없음을 확인하였다. 마지막으로 Fusion 모형의 문항 모수 추정치를 통해 Q행렬을 검토하였다. 이상의 연구 결과를 토대로 인지진단모형의 Q행렬 타당화에 관한 논의 및 추후연구를 위한 교육적 시사점을 제안하였다.
Abstract
This study e xamined the Q-matrix validation for a vocabulary test in order to diagnose students in 3rd grade using cognitive diagnostic model. For developing a vocabulary test, ten content experts extracted attributes related to vocabulary ability from the review of textbooks and literatures about vocabulary ability. After then, 15 experts coded items independently and they discussed any discrepancies until 80% of experts reached a consensus. Q-matrix is validated statistically using the jaccard coefficient, multiple regression analysis and Fusion Model parameter estimates. Jaccard similarity index between attributes is below .50 and multiple regression analysis showed that there is no negati ve relations between attributes. The results of parameter estimates were explored to review Q-matrix de veloped by experts. Implications of validation for Q-matrix and suggestions for follow-up studies were discussed.
참고문헌 (70)
- 교육과학기술부, "외국인을 위한 한국어교육과정", 교육과학기술부, ~ (2012)
- 국립국어원, "한국어 학습용 어휘" (2003), 국립국어원
- 국민의 기초 문해력 조사, "국립국어원", 국립국어원, ~ (2008)
- 초등학교 교과서 어휘조사연구, "국립국어원", 국립국어원, ~ (2009)
- 김경리, "인지진단을 위한 진단적 준거설정과 교육적 활용", 박사, 교육학과, pp.2012
- 김경리, "진단적 준거설정을 활용한 인지진단", 교육평가연구, 26(2), pp.369~390 (2013), 한국교육평가학회
- 김광해, "국어 어휘론 개설" (1993), 집문당
- 김광해, "등급별 국어교육용 어휘" (2003), 박이정
- 김동일, "읽기 저성취 초등학생의 언어 지식과 독해력과의 관계", 학습장애연구, 7(1), pp.27~45 (2010), 한국학습장애학회
- 김선희, "수학 평가 결과의 분석을 위한 인지 진단 이론의 활용", 학교수학, 10(2), pp.259~277 (2008), 대한수학교육학회
- 김성은, "인지진단모형 Q행렬 타당화 방법 간의 회복률 비교", 교육평가연구, 28(3), pp.731~751 (2015), 한국교육평가학회
- 김성훈, "인지구조모형에 근거한 학생의 지식상태의 진단-규칙장이론(Rule-space theory)의 적용-", 교육학연구, 43(1), pp.81~107 (2005), 한국교육학회
- TIMSS 2011 결과에 따른 수학 과학 교육 현황 국제비교, "김수진", 한국교육과정평가원, ~, pp.연구보고 PRE 2013-7-2 (2013)
- 김수진, "Fusion Model에 의한수학 능력 진단을 위한 Q-행렬의 정교화", 교육평가연구, 21(2), pp.115~139 (2008), 한국교육평가학회
- 김애화, "초등학생의 읽기이해 능력 예측변인에 관한 연구", Communication Sciences and Disorders, 15(3), pp.357~380 (2010), 한국언어청각임상학회
- 김애화, "초등학교 고학년의 읽기능력에 영향을 미치는 읽기관련변인에 관한 연구", Communication Sciences and Disorders, 13(1), pp.1~25 (2008), 한국언어청각임상학회
- 김지영, "인지진단이론에 근거한 TIMSS 2011의 과학 결과 분석을 통한인지 속성의 국제비교", 한국과학교육학회지, 35(2), pp.267~275 (2015), 한국과학교육학회[DOI]
- 김지효, "DINO 모형에서 응시생 분류 정확성에 영향을 미치는 요인 탐구: 응시생 분류방법을 중심으로", 교육종합연구, 11(3), pp.201~223 (2013), 교육종합연구원
- 김태호, "인지진단모형을 활용한 대학수학능력시험 국어 영역 독서 문항의 Q행렬 타당화 연구-2018학년도 대학수학능력시험 대비 6월 모의평가를 중심으로-", 청람어문교육, (63), pp.201~232 (2017), 청람어문교육학회[DOI]
- 인지진단모형을 적용한 학업성취 프로파일 분석 및 결과 보고 방안, "김희경", 한국교육과정평가원, ~, pp.연구보고 RRE 2012-7 (2012)
- 박상우, "한문과 평가에서 인지진단모형의 필요성과 Q행렬 개발의 예시- 2016학년도 수학능력평가 한문(Ⅰ) 문항을 중심으로 -", 漢字漢文敎育, 1(43), pp.135~161 (2017), 한국한자한문교육학회[DOI]
- 인지진단모형을 통한 국가수준 학업성취도 평가 결과 분석 및 성적보고 방법 탐색, "송미영", 한국교육과정평가원, ~, pp.연구보고 RRE 2011-8 (2011)
- 송승하, "읽기능력 관련 요소에 대한 연구 : 언어 능력을 중심으로", 석사, 언어병리학, pp.2002
- 이기연, "어휘 교육 내용 설계를 위한 낯선 어휘의 의미 처리 양상 연구", 석사, 국어교육, pp.2006
- 이기연, "국어 어휘 평가 내용 연구", 박사, 국어교육과 국어교육전공, pp.2012
- 이기연, "초등학교 교과서 수록 어휘 양상 연구", 학습자중심교과교육연구, 15(6), pp.669~689 (2015), 학습자중심교과교육학회
- 이승왕, "초등학교 국어과 어휘 교육 평가의 개선 방향", 어문학교육, 41, pp.33~63 (2010)
- 이영주, "인공신경망에 근거한 인지진단모형 Q 행렬의 타당성 평가", 박사, 교육학과, pp.2014
- 이재호, "Fusion 모형을 활용한 초등학교 6학년의 읽기이해 능력 진단을 위한 Q 행렬 타당화 연구", 교육평가연구, 29(2), pp.325~355 (2016), 한국교육평가학회
- 이필영, "초등학생의 구어에 나타난 어휘 빈도와 분포도 조사", 국어교육학연구, (33), pp.557~595 (2008), 국어교육학회[DOI]
- 인보란, "인지진단모형에 의한 성별에 따른 수학 성취 특성 차이 분석", 석사, 교육학과, pp.2014
- 임지룡, "어휘력 평가의 기본 개념", 국어교육연구, 30, pp.1~42 (1998)
- 정미란, "초등학교 3-6학년 읽기이해부진학생의 읽기이해력 예측변인 탐색", 학습장애연구, 10(3), pp.79~103 (2013), 한국학습장애학회
- 조영희, "인지진단모형을 활용한 읽기장애 위험학생의 어휘 인지상태 진단:DINA 모형 적용", 특수교육학연구, 51(4), pp.143~165 (2017), 한국특수교육학회
- Anderson, R. C., "Theoretical models and processes of reading" (1985), LEA
- Anglin, J. M., "Vocabulary development: A morphological analysis", Monographs of the society for research in child development, 1~186 (1993)
- Beck, I. L., "The handbook of reading research (Vol. 2)" (2011), Longman
- Berchin, J., "Spontaneous comparative behavior and categorization: The links between mediated interaction and reading comprehension", Advances in cognition, education, and deafness, 265~270 (1991)
- Brown, D., "What aspects of vocabulary knowledge do textbooks give attention to?", Language Teaching Research, 15(1), pp.83~97 (2011)
- Buck, G., "Application of the rule-space procedure to language testing:Examining attributes of a free response listening test", Language testing, 15(2), pp.119~157 (1998)
- Buck, G., "The Subskills of Reading: Rule‐space Analysis of a Multiple‐choice Test of Second Language Reading Comprehension", Language Learning, 47(3), pp.423~466 (1997)
- Catts, H. W., "Early prediction of reading comprehension within the simple view framework", Reading and Writing, 28(9), pp.1407~1425 (2015)
- Chall, J. S., "Stages of reading development" (1983), McGraw-Hill
- Chiu, C. Y., "Statistical Refinement of the Q-matrix in Cognitive Diagnosis", Applied Psychological Measurement, 37(8), pp.598~618 (2013)
- Cromley, J. G., "Testing and refining the direct and inferential mediation model of reading comprehension", Journal of Educational Psychology, 99(2), pp.311~325 (2007)
- Cunningham, A. E., "Tracking the unique effects of print exposure in children : Associations with vocabulary, general knowledge, and spelling", Journal of Educational Psychology, 83(2), pp.264~274 (1991)
- Cunningham, A. E., "Early reading acquisition and its relation to reading experience and ability 10 years later", Developmental psychology, 33(6), pp.934~945 (1997)
- de la Torre, J., "An empirically-based method of Q-Matrix validation for the DINA model : Development and applications", Journal of Educational Measurement, 45, pp.343~363 (2008)
- de La Torre, J., "Higher-order latent trait models for cognitive diagnosis", Psychometrika, 69(3), pp.333~353 (2004)
- DeCarlo, L. T., "Recognizing Uncertainty in the Q-Matrix via a Bayesian Extension of the DINA Model", Applied Psychological Measurement, 36(6), pp.447~468 (2012)
- Hartz, S., "A Bayesian Framework for the Unified Model for Assessing Cognitive Abilities:Blending Theory with Practicality", Doctoral, pp.2002
- Cluster-wise assessment of cluster stability, "Henning, C.", Department of Statistical Science, University of College London, ~ (2004)
- Jang, E. E., "Cognitive diagnostic assessment of L2 reading comprehension ability: Validity arguments for Fusion Model application to LanguEdge assessment", Language Testing, 26(1), pp.31~73 (2009)
- Joshi, R., "Vocabulary: A critical component of comprehension", Reading & Writing Quarterly, 21(3), pp.209~219 (2005)
- Lee, Y. W., "Cognitive diagnosis approaches to language assessment: An overview", Language Assessment Quarterly, 6(3), pp.172~189 (2009)
- Li, H., "Constructing and Validating a Q-Matrix for Cognitive Diagnostic Analyses of a Reading Test", Educational Assessment, 18(1), pp.1~25 (2013)
- Liu, H. Y., "The development of computerized adaptive testing with cognitive diagnosis for an English achievement test in China", Journal of classification, 30(2), pp.152~172 (2013)
- McKeown, M. G., "The nature of vocabulary acquisition" (2014), Psychology Press
- Nation, I. S. P., "Learning Vocabulary in Another Language" (2001), Cambridge University Press
- Nation, K., "Factors influencing syntactic awareness skills in normal readers and poor comprehenders", Applied psycholinguistics, 21(2), pp.229~241 (2000)
- Nelson-Herber, J., "Expanding and refining vocabulary in context areas", Journal of Reading, 5, pp.24~41 (1986)
- OECD, "Skills Outlook 2013: First Results from the Survey of Adult Skills" (2013), OECD Publishing
- Oslund, E. L., "How vocabulary knowledge of middle-school students from low socioeconomic backgrounds influences comprehension processes and outcomes", Learning and Individual Differences, 45, pp.159~165 (2016)
- Roussos, L. A., "The fusion model skills diagnosis system", Cognitive diagnostic assessment for education: Theory and applications, 275~318 (2007)
- Rupp, A. A., "Diagnostic assessment: Theory, methods, and applications" (2010), Guilford
- Stahl, S. A., "Vocabulary development" (1999), Brooline Press
- Stanovich, K. E., "Matthew effects in reading: Some consequences of individual differences in the acquisition of literacy", Reading research quarterly, 21, pp.360~407 (1986)
- Tatsuoka, K. K., "Rule space: An approach for dealing with misconceptions based on item response theory", Journal of educational measurement, 20(4), pp.345~354 (1983)
- Templin, J. L., "Measurement of psychological disorders using cognitive diagnosis models", Psychological methods, 11(3), pp.287~305 (2006)
- Yovanoff, P., "Grade‐level invariance of a theoretical causal structure predicting reading comprehension with vocabulary and oral reading fluency", Educational Measurement : Issues and Practice, 24(3), pp.4~12 (2005)
