국어과 평가 문항의 양호도 분석틀 개발을 위한 기초 연구
A Study on development of the framework for item quality in Korean Education
0
조회
0
다운로드
3
인용
0
참고문헌
키워드
초록
본 연구의 목적은 ‘국어과 평가 문항의 양호도 분석틀’을 개발하고 이를 바탕으로 좋은 국어과 평가 문항 개발의 기준점을 제공하는 데에 있다. 이를 위해 국어과 평가론 분야의 국내외 선행 연구와 CRESST의 문항 특성 분석(FA) 방법을 검토한 뒤 국가 수준의 국어과 평가 경험이 많은 전문가 6인의 패널 토의를 거쳐 최종적으로 국어과 평가 문항 양호도 분석틀을 4범주 13개 하위 요소로 도출하였다. 4범주는 ‘교육과정과의 부합도’, ‘문제 풀이 과정에서의 학습 효과’, ‘지문 구성의 적절성’, ‘문항 구조 및 형식의 적절성’으로 구성되며, 다시 각 범주별로 ‘성취기준 수준 및 범위의 적정성/역량 측정 가능성/과목별 특성 반영’, ‘교과 핵심 개념 이해/문제 해결 과정 관련 사고력/배경 지식 활성화’, ‘적정 길이와 어휘 수준/소재의 참신성 및 적절성/정보 구조 및 제시 방식의 명료성/표현 및 어법의 적절성’, ‘문항 구조의 완성도/문항 구조의 참신성/매체 활용의 적절성’의 하위 요소를 설정하였다. 국어과 평가 문항의 양호도 분석틀은 국어과 평가 전문성을 갖추어야 할 현장 교사들에게 ‘좋은 국어과 평가 문항’에 대한 일종의 기준점을 제공한다는 데 의미가 있으며, 추후 현장 전문가 검증 및 실제 문항 분석을 통한 타당화 연구를 후속적으로 개진할 필요가 있다.
Abstract
The purpose of this study is to develop the analytical frameworks for item quality expecially based of Feature Analysis(FA) approach, and to suppose how to design assessment items in Korean Education. For this purpose, it reviewed various literatures and FA approach, developed by CRESST, and then through several times of discussion with six specialties, we developed the framework with 4 categories and 13 factors. Mainly, the 4 categories are as follows. Relevance to national curriculum, Learning effects in problem solving process, Relevance of passage construction, Relevance of item structure and its form. Then, these categories are sub-categorized into 13 factors in details. For example, ‘Relevance to national curriculum’ is divided into ‘levels and scope of standards’, ‘competency assessment’, ‘content area’s features’. This Framework for item quality can provide teachers the criterion and essential factors of ‘good item’ in Korean language assessment. Extended follow-up researches should be proceeded for its validation such as content validity and items analysis.
참고문헌 (18)
- 권태현, "수능 국어 영역 `화법과 작문` 평가 문항의 양호도 조사 연구", 청람어문교육, (71), pp.161~194 (2019), 청람어문교육학회[DOI]
- 권태현, "수능 국어 영역 독서 평가 문항의 양호도 조사 연구", 독서연구, (45), pp.131~159 (2017), 한국독서학회[DOI]
- 남민우, "수능 문학 영역 평가 문항의 양호도와 개선 방안에 대한 조사 연구", 문학교육학, (51), pp.9~48 (2016), 한국문학교육학회[DOI]
- 문영진, "대학수학능력시험 출제 매뉴얼: 언어 영역", 한국교육과정평가원 대수능 CAT 2004-22-2, ~ (2004)
- 학생 평가의 타당도 제고를 위한 문항 특성분석(Feature Analysis) 기법 활용 방안, "박지현", 한국교육과정평가원, ~ (2020)
- 송현정, "대학수학능력시험 언어 영역 난이도 관련 변인에 대한 연구", 국어교육, (113), pp.233~262 (2004), 한국어교육학회
- 역량 함양 국어과 교육과정 재구조화 연구 최종보고서, "정혜승", 교육부, ~ (2021)
- 조재윤, "국가수준 국어과 학업성취도 평가의적합성 검토 연구：국어과 평가의 적합성 검토 VRUT 모형을 사용하여", 한국초등국어교육, (46), pp.349~377 (2011), 한국초등국어교육학회[DOI]
- 천경록, "국어과 평가의 정합성 분석의 기초", 국어교육, (129), pp.113~142 (2009), 한국어교육학회
- Bachman, L. F., "Language Testing in Practice" (1996), Oxford U. P
- Baker, E. L., "Functional validity:Extending the utility of state assessments", Presentation at the 2015 National Conference on Student Assessment (NCSA) (2015)
- Baker, E. L., "Feature analysis approach: uses for national and international assessments", Presented to the Chilean Delegates (2019)
- Bennett, R. E., "Cognitively based assessment of, for, and as learning : A preliminary theory of action for summative and formative assessment", Measurement : Interdisciplinary Research and Perspectives, 8, pp.70~91 (2010)
- Brown, H. D., "Language Assessment : Principles and Classroom Practices" (2004), Pearson
- Toward a qualitative approach to assessment, In Report of the Commission on Tests II, Briefs, "Gordon, E. W.", College Entrance Examination Board, 42~46 (1970)
- Jonassen, D. H., "Learning to Solve Problems : A Handbook for Designing Problem-Solving Learning Environments" (2011), Routledge
- Madni, A., "Feature analysis qualitative and quantitative results for tests of mathematics and english language arts, Grades 4, 8, and 11", UCLA, CRESST, ~ (2015)
- McMillan, J. H., "Classroom Assessment : Principles and Practice for Effective Standards-Based Instruction" (2011), Pearson