대학생 기초학력평가 수학교과 문항 분석 및 성취수준 설정 사례 연구
A Case Study on Item Analysis and Standard setting of the Mathematics Basic Ability Test for College Students
0
조회
0
다운로드
3
인용
0
참고문헌
키워드
초록
본 연구에서는 학부교육 질 제고를 위해 신입생 대상 기초학력평가 문항 분석 및 성취수준 설정을 통해 학생들의기초학력 도달 여부에 대한 타당화를 제고하는데 주요 목적이 있다. 이를 위하여 K 대학의 2021학년도 신입생 대상수학교과 기초학력평가의 사례를 들어 분석하였으며, 수학 교과는 이공계 학생들의 성공적인 전공 교과 수강을 위한필수적인 학습 역량이라 할 수 있다. 본 연구에서는 첫째 대학생 수학 기초학력평가 도구에 대한 측정학적 분석을위해 고전검사이론과 문항반응이론으로 문항 특성 정보(난이도와 변별도)를 파악하여 문항의 적절성을 파악하였다. 둘째, 문항 특성 정보를 기반으로 대학 신입생의 수학 기초학력 도달 정도를 분석적·체계적으로 파악하고자 수준설정을수행하였다. 수학교과 및 평가 전문가들과 기초학력 도달·미도달의 경계를 설정하기 위한 최소능력자 특성을 진술하고, 이를 기반으로 변형된 Angoff 및 Bookmark 방법을 적용하여 수준 설정을 통해 도달과 미도달의 분할점수를 산출하였다. 수학 기초학력평가의 검사정보함수 산출 결과 학생 능력의 중하 수준에 적절한 평가 도구로 파악되었으며, 수학의기초학력 도달을 위한 최소능력자 특성으로 K대학교 수학 기초학력평가의 도출된 분할점수를 기반으로 Angoff 기준2021년 신입생의 약 8%가 기초학력수준에 도달하지 못한 것을 확인하였다. 이 연구는 해당 대학 신입생들에게 요구되는수학에 대한 기초학력의 개념을 논의하고 수학 기초학력 진단도구의 타당성을 파악하여 향후 매년 신입생의 수준을체계적으로 파악하고 기초학력평가 결과를 활용하여 학생들에게 피드백을 제공하고 맞춤형 학습 방안의 토대를마련하였다.
Abstract
In order to improve the quality of undergraduate education, the purpose of this study is to improve the validity of an college assessment measuring students’ basic proficiency. Thus, his study conducted item analyses and performed standard settings with empirical data. Given that mathematics is essential for science and engineering students, we analyzed mathematics data measured in the 2021 freshman year of K University. First, item analysis was conducted using the classical test theory and item response theory. Then using the item an test information, we conducted s standard setting using a modified Angoff method and Bookmark method. As a result, about 8% of freshman students were identified as students who did not meet the threshold to reach the basic level. This study defined the basic academic ability in mathematics required of college freshmen, evaluates the assessment instrument, and discussed the usability of the basic academic assessment results. Lastly, the basis for providing customized learning paths to students in the long term was discussed.
참고문헌 (14)
- 김석우, "교육평가의 이해" (2015), 학지사 2판
- 김성숙, "고등학교 성취평가에서의 고정분할점수와 수준설정방법 적용 결과의 비교 분석", 교육평가연구, 27(1), pp.1~22 (2014), 한국교육평가학회
- 김성숙, "문항구성 모의실험을 통한 온라인 학업성취도 평가 시스템 분할점수 자동설정 방안 탐색", 교육평가연구, 31(3), pp.631~651 (2018), 한국교육평가학회[DOI]
- 김희진, "대학 입학예정자를 위한 기초수학 수준별 학습지도 방안", 한국학교수학회논문집, 14(3), pp.343~358 (2011), 한국학교수학회
- 정미강, "대학생의 기초학습능력 지원을 위한 교수-학습 참여자의 인식과 요구", 교육문화연구, 22(2), pp.101~126 (2016), 교육연구소[DOI]
- 이상우, "대학생의 특성과 학업 중도 탈락의 상관성 분석", 학습자중심교과교육연구, 19(11), pp.1185~1210 (2019), 학습자중심교과교육학회[DOI]
- 이선경, "Rasch 방법과 Extended-Angoff 방법을 적용한 인성검사 준거설정 비교 연구", 교육평가연구, 30(4), pp.761~789 (2017), 한국교육평가학회
- 이종승, "현대교육평가" (2016), 학지사
- 임이랑, "대학생의 학업성취에 영향을 미치는 심리적, 학습역량, 환경", 지지 요인 탐색, 2016, pp.17(4), 285~309[DOI]
- 임의진, "유럽 언어 공통기준 연계를 통한 영어 독해 시험의 수준설정: 수정된 앙고프 방법과 북마크 방법 비교", 교육평가연구, 32(3), pp.523~548 (2019), 한국교육평가학회[DOI]
- 장윤선, "문항반응이론에 기초한 준거설정 방법 비교", 교육평가연구, 22(3), pp.659~680 (2009), 한국교육평가학회
- 황정규, "교육평가의 이해" (2017), 학지사
- Cizek, G. J., "Standard setting: A guide to establishing and evaluating performance standards on tests" (2006), SAGE Publications, Inc
- Hambleton, R. K., "Fundamentals of item response theory" (1991), Sage Publications, Inc.