본문 바로가기
KERD
논문KCI 등재

컴퓨터 기반 평가와 지필 기반 평가 간 점수 비교: 성별과 학습능력에 따른 차이분석을 중심으로

The score comparability of CBT and PBT: Focusing on difference related to gender and learning ability

정한호
한국교육공학회 (Korean Society Of Educational Technology)|2010.09|교육공학연구 (Journal of Educational Technology)|제26권 제3호|pp. 81-104

1

조회

0

다운로드

9

인용

0

참고문헌

키워드

Gender성별학습능력컴퓨터 기반 평가Learning abilityComputer Based Test(CBT)지필 기반 평가Paper Based Test(PBT)
주제분류교육학

초록

본 연구는 학생의 성별 및 학습능력이 평가도구(CBT vs. PBT)에 주는 영향을 탐색하기 위해 실시하였다. 본 연구에서는 동일한 난이도로 구성된 컴퓨터 기반 평가와 지필 기반 평가 점수를 비교하였다. 본 연구는 초등학교 6학년 학생(남 61, 여 57)을 대상으로 실시하였다. 본 연구에서는 1) 컴퓨터 기반 평가와 지필 기반 평가 간 점수 차이, 2) 성별에 따른 컴퓨터 기반 평가와 지필 기반 평가 간 점수 차이, 3) 학습능력에 따른 컴퓨터 기반 평가와 지필 기반 평가 점수 간 차이를 분석하였다. 연구결과, 학생의 성별은 CBT 및 PBT 평가결과에 유의미한 영향을 미치지 않았지만 학습능력은 평가도구에 관계없이 평가결과에 유의미한 영향을 미친다는 점을 파악할 수 있었다. 본 연구를 통해, 학교현장에서 이루어지는 컴퓨터 기반 평가의 발전 가능성을 탐색할 수 있었다. 선형 동등화식에 의해 도출된 동등화 점수를 분석한 결과, 학생들이 가정에서 CBT 프로그램에 접속하여 평가를 수행한 점수와 교실에서 교사 감독 하에 이루어지는 지필평가를 통해 도출된 점수 간에 차이가 나타나지 않았다. 비록 본 연구가 학교현장에서의 CBT 적용이라는 준실험설계를 기반으로 하고 있지만, 본 연구결과를 통해 CBT가 PBT에 준하는 평가결과를 도출할 수 있다는 가능성을 엿볼 수 있었다. 본 연구는 교실과 가정에서 실시되는 평가를 연계하여 효과적인 CBT를 구현할 수 있다는 점과 사이버가정학습에서의 CBT 활용에 대한 시사점을 제공하고 있다.

Abstract

The purpose of this study was to analyze the effects of gender and learning ability on two assessment versions(CBT vs. PBT). This study focused on comparison of the scores in computer version and in paper-pencil version of the same test. Participants were selected randomly among sixth grade students of one elementary school. The number of male students was sixty-one, and the number of female students was fifty-seven. The current study was attempt to analyze 1) the difference between CBT scores and PBT scores, 2) the effect of gender on CBT and PBT, 3) the effect of learning ability on CBT and PBT. The result showed that the scores between CBT and CBT were not affected by gender, but the scores were affected by learning ability. Through the current study, we could explore the potential of CBT in school situation. The result from the current study showed that there were no difference between CBT scores and PBT scores. Although the current study was based on semi-experimental design for the application of CBT in school, we could find the potential of CBT. The current study shows that effective test can be implemented in conjunction with CBT at classroom and home. Also it indicates that we can use CBT effectively with Cyber Home Learning Systems.

참고문헌 (42)

  1. 강병련, "중학교 지필 평가 분석 : 이차방정식과 이차함수를 중심으로", 수학교육 논문집, 23(3), pp.923~951 (2009), 한국수학교육학회
  2. 권형규, "온라인 상호작용 및 사용자 인터페이스에 따른 자기 주도적 평가 및 운영을 위한 웹 기반 평가 시스템의 설계 및 구현", 교육공학연구, 18(2), pp.123~155 (2002)
  3. 김은정, "웹기반 학습 시스템의 평가 문제에 대한 출제 방법 및 난이도 재조정에 대한 연구", 정보처리학회논문지D, 12(3), pp.471~480 (2005), 한국정보처리학회
  4. 김인석, "컴퓨터 기저 영어 테스트의 국내·외 연구 동향과 수행형 초등영어 CALT 듣기 평가도구 개발 방향의 제시", 인문과학연구 (2003)
  5. 김재철, "가교문항 수직적 동등화 방법을 통한 중학생의 학년별 수학 학력 변화 탐색", 교육과정평가연구, 9(1), pp.275~298 (2006), 한국교육과정평가원
  6. 류지헌, "학습자의 전문성 수준과 과제난이도가 인지부하요인 및 과제수행에 미치는 영향", 교육정보미디어연구, 15(4), pp.1~19 (2009), 한국교육정보미디어학회
  7. 류지헌, "성별에 따라서 사전지식과 ICT활용능력이 디지털교과서의 학업성취에 미치는 영향", 교육과학연구, 40(2), pp.51~75 (2009), 교육과학연구소
  8. 서울시교육연구정보원, "사이버자율평가 안내 자료", ~ (2008)
  9. 염용철, "정보 교육에서의 사용성(Usability) 향상을 위한 웹기반 평가시스템 PAS의 설계 및 구현", 컴퓨터교육학회 논문지, 11(1), pp.1~10 (2008), 한국컴퓨터교육학회
  10. 이종승, "검사점수의 동등화", 교육평가연구, 6(1), pp.169~196 (1993)
  11. 정한호, "교육현장에서 이루어지고 있는 컴퓨터 기반 평가(CBT)에 대한 질적 연구: 학생 경험을 중심으로", 교육공학연구, 25(4), pp.73~100 (2009), 한국교육공학회
  12. 정한호, "CBT(Computer Based Test)에 대한 초등학생들의 만족도 및 문제점 인식 분석", 초등교육연구, 22(3), pp.185~215 (2009), 한국초등교육학회
  13. 주영주, "ICT활용수업에서 수업통제방식과 학습자의 초인지, 컴퓨터 활용능력이 학업성취도와 만족도에 미치는 영향", 초등교육연구, 19(2), pp.145~172 (2006), 한국초등교육학회
  14. Akdemir, O., "Computer-based testing:An alternative for the assessment of Turkish undergraduate students", Computers & Education, 51(3), pp.1198~1204 (2008)
  15. Anderson, N., "Because it’s boring, irrelevant and I don’t like computers’: Why high school girls avoid professionally-oriented ICT subjects", Computers & Education, 50(4), pp.1304~1318 (2008)
  16. Barker, L., "The state of research on girls and IT. in: Women and information technology: Research on under representation", pp.3~54 (2006), MIT Press
  17. Björnsson, J. K., "Changing Icelandic national testing from traditional paper and pencil based tests to computer based assessment: Some background, challenges and problems to overcome. in: Toward a research agenda on computer based assessment: Challenges and needs for European Educational Measurement", pp.10~14 (2008), European Commission
  18. Cerillo, T. L., "Comparison of paper-based and computer based administrations of high-stakes, high-school graduation tests", the Annual Meeting of the American Education Research Association (2004)
  19. Choi, S. W., "Evaluating comparability of paper-and-pencil and computer-based assessment in a K-12 setting", The Annual Meeting of AERA (2002)
  20. Clariana, R., "Paper-based versus computer-based assessment: Key factors associated with the test mode effect", British Journal of Educational Technology, 33(5), pp.593~602 (2002)
  21. Eid, G. K., "An investigation into the effects and factors influencing computer-based online math problem-solving in primary schools", Journal of Educational Technology Systems, 33(3), pp.223~240 (2004)
  22. Gardner, J., "Assessment and Learning" (2006), Sage Publications
  23. Huang, Y. M., "An adaptive testing system for supporting versatile educational assessment", Computers & Education, 52(1), pp.53~67 (2009)
  24. Hwang, G. J., "A tabu search approach to generating test sheets for multiple assessment criteria", IEEE Transactions on Education, 49(1), pp.88~97 (2006)
  25. Keng, L., "Item-level comparative analysis of online and paper administrations of the Texas assessment of knowledge and skill", Applied Measurement in Education, 21(3), pp.207~226 (2008)
  26. Krantz, J. H., "Tell me, what did you see the stimulus on computers", Behavior Research Methods, Instruments & Computers, 32(2), pp.221~229 (2000)
  27. Kveton, P., "Computer-based tests: The impact of test design and problem of equivalency", Computers in Human Behavior, 23(1), pp.32~51 (2004)
  28. Lee, J., "The effects of past computer experience on computerized aptitude test performance", Educational and Psychological Measurement, 46, pp.727~733 (1986)
  29. Luvai, F. M., "Mobile learning: A framework and evaluation", Computers & Education, 49(3), pp.581~596 (2007)
  30. Martin, R., "New possibilities and challenges for assessment through the use of technology. in: Toward a research agenda on computer based assessment: Challenges and needs for European Educational Measurement", pp.6~9 (2008), European Commission
  31. Meelissen, M., "Gender differences in computer attitudes: Does the school matter?", Computers in Human behavior, 24, pp.969~985 (2008)
  32. Moss, G. A., "Gender differences in web site production and preference aesthetics: preliminary implications for ICT in education and beyond", Behavior & Information Technology, 28(5), pp.447~460 (2009)
  33. Nakazawa, S., "Association between duration of daily VDT use and subjective symptoms", American Journal of Industrial Medicine, 10(5) (2002)
  34. Recent trends in comparability studies, "Paek, P.", ~, pp.PEM Research Report 05-05 (2005)
  35. Pomplun, M., "The score comparability of computerized and paper-and-pencil formats for K-3 reading tests", Journal of Educational Computing Research, 32(2), pp.153~166 (2005)
  36. Russo, A., "Mixing technology and testing", The School Administrator, 59(4), pp.6~12 (2002)
  37. Sanders, J., "Gender and technology: A research review. in: Handbook of gender and education" (2006), Sage
  38. Segall, N., "A usability comparison of PDA-based quizzes and paper-and-pencil quizzes", Computers & Education, 45(4), pp.417~432 (2005)
  39. Smith, B., "The development of the attitude towards computerized assessment scale", Journal of Educational Computing Research, 31(4), pp.407~422 (2004)
  40. Smoline, D. V., "Some problems of computer-aided testing and interview-like tests", Computers & Education, 51(2), pp.745~756 (2008)
  41. Thelwall, M., "Computer-based assessment: a versatile educational tool", Computers & Education, 34(1), pp.37~49 (2000)
  42. Vekiri, I., "Gender issues in technology use: Perceived social support, computer self-efficacy and value beliefs, and computer use beyond school", Computers & Education, 51(3), pp.1392~1404 (2008)

관련 논문AI추천

차별적 검사 기능 분석을 통한 컴퓨터 기반 검사의 양식 효과 연구김선미, 박찬호교육문제연구소 · 교육연구2025 · 제92권 컴퓨터 기반 평가와 지필평가 간 학생 응답 특성 탐색 -컴퓨터 기반 국가수준 학업성취도 평가 병행 시행 결과를 중심으로-구자옥, 백종호, 이재봉한국과학교육학회 · 한국과학교육학회지2023 · 제43권 제1호국가수준 학업성취도 평가의 시행 매체 변화가 학업성취도에 미치는 영향구남욱, 김용남, 이소라한국교육과정평가원 · 교육과정평가연구2022 · 제25권 제1호‘ICT 활용능력’과 ‘사회과 학습 자기효능감’이 컴퓨터 기반 사회과 평가 결과에 미치는 영향박은아, 성경희한국사회과교육학회 · 시민교육연구2014 · 제46권 제1호초등학교 교사의 컴퓨터 기반 평가(Computer Based Test) 경험에 대한 질적 고찰정한호한국교육과정평가원 · 교육과정평가연구2009 · 제12권 제3호TIMSS 2019 과학 문항에서 컴퓨터 기반 평가와 지필 평가 간의 검사 매체 차이 탐색김현경대한화학회 · 대한화학회지2021 · 제65권 제1호

이 간행물의 다른 논문 (6건)

대학 프로젝트 수업 환경에서 분업화, 상호작용, 공유정신모형이 팀 수행성과와 개인 학습에 미치는 영향조일현pp. 1-20숙련된 교사의 수업설계 활동에 토대한 수업설계모형 개발박기용pp. 21-52웹기반 협력학습에서 학습자특성과 학습자 간 상호작용이 학습성과에 미치는 영향강명희, 엄소연, 이정민pp. 53-79컴퓨터 기반 협력 스크립트에서 협력모형의 제공 유형이 협력부하와 학습성과에 미치는 영향정효정, 김동식pp. 105-124텍스트 중심의 읽기자료에서 화면배치유형과 동기 메시지가 인지부하에 미치는 영향임태형, 류지헌pp. 125-157
원문 보기