본문 바로가기
KERD
논문KCI 등재

초등학교 교사의 컴퓨터 기반 평가(Computer Based Test) 경험에 대한 질적 고찰

A Qualitative Study on Computer Based Test in Elementary School - Focusing on Teachers’Experiences

정한호
한국교육과정평가원 (Korea Institute for Curriculum and Evaluation)|2009.11|교육과정평가연구 (The Journal of Curriculum and Evaluation)|제12권 제3호|pp. 55-82

2

조회

0

다운로드

5

인용

0

참고문헌

키워드

이러닝학습효과Learning effect컴퓨터 기반 평가e-learningCBT(Computer Based Test)
주제분류교육학

초록

본 연구의 목적은 초등학교 교사들의 CBT 활용경험을 기술하며 이를 평가준비, 평가환경, 평가 수행, 평가와 학습과의 관계로 정교화 하여 고찰하는 것이다. 본 연구는 초등학교 교육현장에서 이 루어지고 있는 CBT에 대한 교사들의 체험적 경험을 탐색하고 그것의 교육적 의미를 이해하기 위하 여 실시하였다. 이를 위해, CBT를 활용하여 평가를 수행하고 있는 초등학교 교사 6명을 대상으로 심층면담을 실시하였다. 연구결과, 34개의 소주제와 8개의 주제, 그리고 이를 통해 4개의 기본 구조를 발견하였다. 본 연구를 통해, CBT가 학습의 한 과정으로 실시될 수 있다는 가능성을 밝힐 수 있었다. CBT가 교육 환경에서 올바로 적용되고 활용되기 위해서는 CBT의 평가결과에 대한 신뢰도를 높이며 시스템의 문제점을 최소화하기 위한 노력이 필요하다는 사실을 파악할 수 있었다. 또한 학습효과를 극대화시 키는 방향으로 CBT 시스템을 설계할 필요가 있음을 알 수 있었다. 본 연구가 앞으로 학교환경에서 CBT가 올바른 방향으로 발전하는데 유용한 자료를 제공해 줄 수 있을 것으로 기대한다.

Abstract

The purpose of this study was to describe the CBT activities and experiences of teachers. The CBT activities and experiences of teachers were investigated into 4 aspects, such as evaluation preparation, evaluation environment, evaluation accomplishment, and evaluation-learning relations. This study was to analyze teachers' use of CBT and to explore the educational meanings of theirs experience. Data were in-depth interviews from the six elementary school teachers. Findings indicated that the CBT experiences of elementary school teachers clustered into 32 specific themes, 8 themes, and 4 general structures. The results indicated the CBT has new potentialities as the process of learning for students. The activation of the CBT depends on the reliability of CBT and the efforts for minimizing the CBT system problems in school environment. The CBT systems are in need of design directions that reduce teacher's assessment workloads and specially, maximize the learning effectiveness. The results of this study will help to develop CBT in the right direction and furnish useful information to the CBT interested.

참고문헌 (61)

  1. 김대현, "내러티브 탐구의 이론적 기반 탐색", 교육과정연구, 24(2), pp.111~134 (2006), 한국교육과정학회
  2. 김남희, "웹 기반 학습 및 평가시스템 구현", 한국콘텐츠학회 종합학술대회 논문집, 3(1), pp.31~35 (2005)
  3. 김은정, "웹기반 학습 시스템의 평가 문제에 대한 출제 방법 및 난이도 재조정에 대한 연구", 정보처리학회논문지D, 12(3), pp.471~480 (2005), 한국정보처리학회
  4. 김인석, "컴퓨터 기저 영어 테스트의 국내·외 연구 동향과 수행형 초등영어 CALT 듣기 평가도구 개발 방향의 제시", 인문과학연구, 9, pp.55~87 (2003)
  5. 김희배, "대학에서의 이러닝", 한국교육공학회 이러닝 학술 세미나 자료집, pp.35~49 (2004)
  6. 김희배, "학교현장에서의 e-러닝에 대한 수요자 요구 분석-교사와 학생의 인식 및 태도를 중심으로-", 교육정보미디어연구, 11(4), pp.221~249 (2005), 한국교육정보미디어학회
  7. 박인우, "초등학교 교실수업에서 e-러닝에 대한 교사, 학생, 학부모 인식", 교육정보미디어연구, 12(3), pp.197~230 (2006), 한국교육정보미디어학회
  8. 서울시교육연구정보원, "사이버자율평가 안내 자료", ~ (2008)
  9. 서덕희, "“여유”의 교육적 의미: 홈스쿨링의 시간 체험에 관한 현상학적 연구", 교육과정연구, 25(2), pp.63~90 (2007), 한국교육과정학회
  10. 염용철, "정보 교육에서의 사용성(Usability) 향상을 위한 웹기반 평가시스템 PAS의 설계 및 구현", 컴퓨터교육학회 논문지, 11(1), pp.1~10 (2008), 한국컴퓨터교육학회
  11. 유선경, "교수방법 효율화를 위한 웹 기반 진단평가 시스템 설계 및 구현", 컴퓨터교육학회 논문지, 6(3), pp.197~205 (2003), 한국컴퓨터교육학회
  12. 이명희, "웹기반 일본어 청해력 향상을 위한 자율학습 평가시스템", 日本語文學, (20), pp.87~110 (2004), 한국일본어문학회
  13. 이수정, "하이데거" (1999), 서울대학교출판부
  14. 이의길, "온라인교육에 대한 교수자 인식 및 수업전략", 교육정보미디어연구, 12(1), pp.87~105 (2006), 한국교육정보미디어학회
  15. 이원규, "정보교육론" (2007), 홍릉과학출판사
  16. 장승주, "VoiceXML 기반 영어 교육 평가 시스템 설계 및 구현", 컴퓨터교육학회 논문지, 8(6), pp.75~83 (2005), 한국컴퓨터교육학회
  17. 정한호, "초등학교 교실수업과 e-러닝의 부조화: 생태학적 관점에서의 수업관찰을 통하여", 교육정보미디어연구, 13(2), pp.5~51 (2007), 한국교육정보미디어학회
  18. 정한호, "교실수업에서 나타나는 이러닝에 대한 생태학적 고찰", 교육공학연구, 24(2), pp.31~69 (2008), 한국교육공학회
  19. 정한호, "CBT(Computer Based Test)에 대한 초등학생들의 만족도 및 문제점 인식 분석", 초등교육연구, 22(3), pp.185~215 (2009), 한국초등교육학회
  20. 조성호, "컴퓨터 적응형 알고리즘을 이용한 웹기반 시험 시스템 설계 및 구축", 컴퓨터교육학회 논문지, 7(6), pp.69~76 (2004), 한국컴퓨터교육학회
  21. Akdemir, O, "Computer-based testing: An alternative for the assessment of Turkish undergraduate students", Computers & Education, 51(3), pp.1198~1204 (2008)
  22. Alderson, C, "Learning-centered assessment using information technology", Symposium conducted at the 23rd Annual Language Testing Research Colloquium (2001)
  23. Bugbee, A. C, "The equivalence of paper-and-pencil and computer-based testing", Journal of Research on Computing in Education, 28(3), pp.282~299 (1996)
  24. Bunderson, C. V, "The four generations of computerized educational measurement. In Educational measurement (3rd ed.)", American Council on Education–Macmillan, 367~407 (1989)
  25. Choi, S. W, "Evaluating comparability of paper-and-pencil and computer-based assessment in a K-12 setting", Paper presented at The Annual Meeting of AERA (2002)
  26. Chua, S. L, "Computer anxiety and its correlates: A meta-analysis", Computers in Human Behavior, 15, pp.609~623 (1999)
  27. Clariana, R, "Paper-based versus computer-based assessment: Key factors associated with the test mode effect", British Journal of Educational Technology, 33(5), pp.593~602 (2002)
  28. Eid, G. K, "An investigation into the effects and factors influencing computer-based online math problem-solving in primary schools", Journal of Educational Technology Systems, 33(3), pp.223~240 (2004)
  29. Gadamer, H. G, "Truth and method" (1982), CrossRoad
  30. Gu, L, "Differential item functioning of GRE mathematics items across computerized and paper-and-pencil testing media", Journal of Technology, Learning, and Assessment, 5(4) (2006)
  31. Guzmán, E, "Self-assessment in a feasible, adaptive web-based testing system", IEEE Transactions on Education, 48(4), pp.688~695 (2005)
  32. Heideggar,M, "존재와 시간" (1998), 까치
  33. Ho, R. G, "Design and evaluation of an XML-based platform-independent computerized adaptive testing system", IEEE Transactions on Education, 48(2), pp.230~237 (2005)
  34. Huang, Y. M, "An adaptive testing system for supporting versatile educational assessment", Computers & Education, 52(1), pp.53~67 (2009)
  35. Huff, K. L, "Validity issues in computer-based testing", Educational Measurement: Issues and Practice, 20(3), pp.16~25 (2001)
  36. Hwang, G. J, "A tabu search approach to generating test sheets for multiple assessment criteria", IEEE Transactions on Education, 49(1), pp.88~97 (2006)
  37. Johnson, M, "On-line mathematics assessment: The impact of mode on performance and question answering strategies", Journal of Technology, Learning, and Assessment, 4(5) (2006)
  38. Jones, V, "Ubiquitous learning environment: an adaptive teaching system usingubiquitous technology", Proceedings of the 21st ASCILITE Conference (2004)
  39. Krantz, J. H, "Tell me, what did you see the stimulus on computers", Behavior Research Methods, Instruments & Computers, 32(2), pp.221~229 (2000)
  40. Kveton, P, "Computer-based tests: The impact of test design and problem of equivalency", Computers in Human Behavior, 23(1), pp.32~51 (2004)
  41. Lee, J, "The effects of past computer experience on computerized aptitude test performance", Educational and Psychological Measurement, 46, pp.727~733 (1986)
  42. Lilley, M, "The development and evaluation of a computer-adaptive testing application for English language", 6th Computer Assisted Assessment Conference (2002)
  43. Lilley, M, "An evaluation of a computer adaptive test in a UKuniversity context", 7th Computer Assisted Assessment Conference (2003)
  44. Lockyer, L, "ICT in higher education: Evaluating outcomes for health education", Journal of Computer Assisted Learning, 17, pp.275~283 (2001)
  45. Luvai, F. M, "Mobile learning: A framework and evaluation", Computers & Education, 49(3), pp.581~596 (2007)
  46. Mahar, D, "The effects of computer anxiety, and computer experience on users’ performance of computer based tasks", Personal and Individual Differences, 22(5), pp.683~692 (1997)
  47. The equivalence of scores from automated and conventional educational and psychological tests, "Mazzeo, J", College Entrance Examination Board, ~, pp.College Board Report No. 88-8 (1988)
  48. Meng, A, "Genetic algorithm based multi-agent system applied to test generation", Computers & Education, 49(4), pp.1205~1223 (2007)
  49. Merriam, S. B, "Qualitative research and case study applications in education" (1998), Jossey-Bass
  50. Mills, C. N, "Computer-based testing: Building the foundation for future assessment" (2002), Lawrence Erlbaum
  51. "Recent trends in comparability studies: Pearson educational measurement/<"[URL]
  52. Pomplun, M, "The score comparability of computerized and paper-and-pencil formats for K-3 reading tests", Journal of Educational Computing Research, 32(2), pp.153~166 (2005)
  53. Russell, M, "Testing writing on computers: A follow-up study comparing performance on computer and on paper", Educational Policy Analysis Archives, 7(20) (1999)
  54. Russell, M, "Testing writing on computers: An experiment comparing student performance on tests conducted via computer and via paper-and-pencil", Educational Policy Analysis Archives, 5(3) (1997)
  55. Segall, N, "A usability comparison of PDA-based quizzes and paper-and-pencil quizzes", Computers & Education, 45(4), pp.417~432 (2005)
  56. Smith, B, "The development of the attitude towards computerized assessment scale", Journal of Educational Computing Research, 31(4), pp.407~422 (2004)
  57. Smoline, D. V, "Some problems of computer-aided testing and interview-like tests", Computers & Education, 51(2), pp.745~756 (2008)
  58. Threlfall, J, "Implicit aspects of paper and pencil mathematics assessment that come to light through the use of the computer", Educational Studies in Mathematics, 66(3), pp.335~348 (2007)
  59. Triantafillou, E, "The design and evaluation of a computerized adaptive test on mobile devices", Computers & Education, 50(4), pp.1319~1330 (2008)
  60. Wang, T. H, "What strategies are effective for formative assessment in an e-learning environment?", Journal of Computer Assisted Learning, 23(3), pp.171~186 (2007)
  61. Wise, S. L, "Computer-based testing in higher education", Measurement and Evaluation in Counseling and Development, 23, pp.3~10 (1990)

관련 논문AI추천

교육현장에서 이루어지고 있는 컴퓨터 기반 평가(CBT)에 대한 질적 연구: 학생 경험을 중심으로정한호한국교육공학회 · 교육공학연구2009 · 제25권 제4호초등학교 사회과 학업성취도평가를 위한 컴퓨터기반검사의 개발 및 적용김종훈, 남경희초등교육연구원 · 한국초등교육2007 · 제17권 제2호컴퓨터 기반 평가와 지필 기반 평가 간 점수 비교: 성별과 학습능력에 따른 차이분석을 중심으로정한호한국교육공학회 · 교육공학연구2010 · 제26권 제3호초등영어 맞춤형 학업성취도 평가에 대한 교사의 인식강정진과학교육연구소 · 교사교육연구2023 · 제62권 제2호학교현장에서 이루어지는 ICT 활용에 대한 질적 고찰정한호한국교육개발원 · 한국교육2009 · 제36권 제4호인공지능 기반 학습자료 활용에 대한 교사의 경험 연구강태훈, 김준엽, 박주형, 박찬호, 오민아교육문제연구소 · 교육연구2025 · 제93권

이 간행물의 다른 논문 (12건)

학교 교육과정과 방과후학교 연계에 관한 사례 연구김평국pp. 1-29초등교육의 예술적 성격 - 플라톤의『국가』에 기초한 탐색 -임현정, 양은주pp. 31-53선행지식과 교재친숙도가 독해의 사고구술 반응에 미치는 효과남경임, 문선모pp. 83-1072007 개정 초등학교 국어과 1학년 교육과정과 유치원 교육과정 언어생활영역의 체계 비교윤진주, 김영실pp. 109-123성취기준의 개념 혼란과 도덕과 성취기준 및 평가기준의 설정 원리와 방법김국현pp. 125-151
원문 보기