본문 바로가기
KERD
논문KCI 등재

비대면 대학강의평가 영역 및 문항 탐색 연구

Exploring Factors and Indicators for Measuring Quality of Non-Contact University Lectures

0

조회

0

다운로드

21

인용

0

참고문헌

키워드

주제분류교육학

초록

코로나바이러스로 인한 대학 비대면 수업의 확산에 따라 대학 강의의 질 관리에 대한 관심이 높아지고 있으나, 비대면 대학강의의 차별성을 고려한 강의 평가문항의 개발이 거의 이루어지지 않고있다. 이에 본 연구에서는 비대면 대학강의의 질 관리를 위해 비대면 대학강의에 사용될 수 있는강의평가 도구를 개발하고 이를 타당화하려는 데 목적이 있다. 이를 위해 선행연구검토와 전문가회의를 토대로 비대면 강의를 평가할 수 있는 영역들과 문항들로 13개 영역, 17개 문항을 추출하였다. 도출된 강의평가 문항은 2020년 비대면 대학강의 수강 경험이 있는 대학생 112명을 대상으로Rasch 측정모형을 적용하여 문항 타당화를 검증하였다. 문항 적합도는 타당한 것으로 나타났으며,평정척도 결과 4점 척도가 적합한 것으로 나타났다. 탐색적 요인분석 결과 도출된 강의평가 영역들은 한 개요의 요인으로 수렴되는 것으로 확인하였다. 본 연구에서 개발된 평가문항은 향후 비대면대학 강의의 강의 질 개선을 위해 개별 교수자 및 대학 차원에서 적용할 수 있다는 점에서 의의가있다.

Abstract

With the spread of university non-face-to-face classes due to the coronavirus, interest inmanaging the quality of university lectures is increasing, but the development of course evaluationitems considering the differentiation of non-contact university lectures has been rarely made. Therefore, the purpose of this study is to develop and validate a lecture evaluation items thatcan be used for non-contact university a lecture to monitor the quality of non-face-to-faceuniversity lectures. For this purpose, 13 areas and 17 questions were extracted as areas and itemsfor evaluating non-face-to-face lectures based on reviews of previous studies and expert reviews. The derived lecture evaluation items were validated by applying the Rasch measurement model to112 college students who took non-face-to-face university lectures in 2020. The item fit wasfound to be reasonable, and the result of the rating scale showed that a 4-point scale wasappropriate. It was confirmed that the lecture evaluation areas derived from the exploratoryfactor analysis converged to the one factor. The evaluation items developed in this study aremeaningful in that they can be applied at the level of individual professors and universities toimprove the quality of lectures in non-contact university lectures.

참고문헌 (59)

  1. Ahn, M. L., "Development of quality assurance model and guiding principles for effective cyber education", The Journal of Korean Association of Computer Education, 4(1), pp.1~10 (2001)
  2. Andrich, D., "A rating formulation for ordered response categories", Psychometrika, 43(4), pp.561~573 (1978)[DOI]
  3. Bojović, Ž., "Education in times of crisis: Rapid transition to distance learning", Computer Applications in Engineering Education, 28(6), pp.1~23 (2020)[DOI]
  4. Cheung, D., "Developing a student evaluation instrument for distance teaching", Distance Education, 19(1), pp.23~42 (1998)[DOI]
  5. 최금진, "대학 강의평가 운영에 대한 교수 인식 분석-A대학을 중심으로-", 학습자중심교과교육연구, 18(3), pp.415~437 (2018), 학습자중심교과교육학회[DOI]
  6. 정희정, "코로나위기에서의 온라인수업에 대한 대학생의 인식유형 연구", 학습자중심교과교육연구, 20(18), pp.1359~1381 (2020), 학습자중심교과교육학회[DOI]
  7. 도재우, "면대면 수업의 온라인 수업 전환과정에서 발생하는 설계 장애물에 대한 탐색", 교육문화연구, 26(2), pp.153~173 (2020), 교육연구소[DOI]
  8. Fehring, R. J., "Methods to validate nursing diagnoses", Heart and Lung, 16(6), pp.625~629 (1987)
  9. Freddoline, P., "A general model for evaluating distance education programs. competition, connection, collaboration", Proceedings of the 13th Annual Conference on Distance Teaching & Learning, pp.81~85 (1997)
  10. Hair, J. E. Jr., "Multivariate data analysis" (1995), Prentice Hall
  11. 한신일, "한국대학의 강의평가실태 분석", 교육행정학연구, 23(3), pp.379~404 (2005), 한국교육행정학회
  12. Harroff, P., "Dimensions of program quality in web-based adult education", American Journal of Distance Education, 20(1), pp.7~22 (2006)[DOI]
  13. Jo, M. S, "Operation condition of cyber lectures and students' estimation in OCU and cheju university", Social Development Review, 18(1), pp.213~236 (2003)
  14. Jo, Y. S, "Development and validation of an organizational change readiness scale", doctoral, pp.2018
  15. 조인옥, "비대면 실시간 온라인 한국어 수업의 운영 사례와 개선 방향 - 한국어 교육기관의 전면적 운영 사례를 중심으로 -", 외국어로서의 한국어교육, 58, pp.241~265 (2020), 언어연구교육원 한국어학당[DOI]
  16. 주영주, "기업 이러닝 강좌평가를 위한 측정도구 개발 및 양호도 검증", 기업교육과인재연구, 10(2), pp.1~20 (2008), 한국기업교육학회
  17. 주영주, "공무원 사이버 강좌 만족도 평가를 위한 타당화 연구", 교육과학연구, 38(3), pp.75~91 (2007), 교육과학연구소
  18. 주영주, "사이버대학에서의 강좌평가를 위한 측정도구 개발 및 양호도 검증", 정보교육학회논문지, 12(1), pp.109~120 (2008), 한국정보교육학회
  19. 정영란, "학습분석학 기반의 사이버대학의 중도탈락 예측 분석", 교육방법연구, 32(2), pp.205~232 (2020), 한국교육방법학회
  20. 정향기, "코로나19 상황의 대학교육에 있어서 전면적 온라인 수업 실행 및 평가에 대한 학습자 만족도", 멀티미디어 언어교육, 23(3), pp.392~412 (2020), 한국멀티미디어언어교육학회[DOI]
  21. 정희연, "한국어 온라인 동영상 수업에 대한 학습자 인식 조사 연구", 인문사회 21, 11(3), pp.1305~1318 (2020), 인문사회 21
  22. Kaiser, H. F., "An index of factorial simplicity", Psychometrika, 39(1), pp.31~36 (1974)[DOI]
  23. 김학일, "이공계 강의평가 결과의 실증적 분석을 통한 강의평가제도 개선방안", 공학교육연구, 10(4), pp.58~77 (2007), 한국공학교육학회[DOI]
  24. Kim, J. K, "An empirical study of the influencing factors on e-learning success", doctoral, pp.2007
  25. 김정겸, "대학강의 평가도구 개발", 한국산학기술학회논문지, 18(6), pp.187~196 (2017), 한국산학기술학회[DOI]
  26. 김승환, "코로나19에 따른 대학 교양체육 실기수업의 온라인 수업 운영과 강사의 어려움에 대한 질적 사례 연구", 한국사회체육학회지, (81), pp.9~26 (2020), 한국사회체육학회[DOI]
  27. 김상미, "코로나19 관련 온라인 교육에 관한 국내 언론보도기사 분석", 디지털콘텐츠학회논문지, 21(6), pp.1091~1100 (2020), 한국디지털콘텐츠학회[DOI]
  28. 김성숙, "학기중 적용을 위한 강의진단 평가도구 개발과 타당성 분석", 교육평가연구, 21(1), pp.55~78 (2008), 한국교육평가학회
  29. Kline, R. B., "Principles and practice of structural equation modeling" (2005), The Guilford Press
  30. 이보경, "코로나 19로 인한 비대면 교양영어 수업의 학습자 반응에 관한 연구", 교양교육연구, 14(4), pp.97~112 (2020), 한국교양교육학회
  31. 이동주, "코로나19 상황에서의 대학 온라인 원격교육 실태와 개선 방안", 멀티미디어 언어교육, 23(3), pp.359~377 (2020), 한국멀티미디어언어교육학회[DOI]
  32. 이헌수, "대학 원격수업에 대한 교수자와 학습자의 인식- M 대학교 사례를 중심으로 -", 한국학교수학회논문집, 23(3), pp.377~395 (2020), 한국학교수학회[DOI]
  33. Lee, J. A, "A study on the development of guided project-based learning model for scientifically gifted secondary students: focused on the application case of a convergence education program based on science", doctoral, pp.2015
  34. 이정기, "대학 강의평가 문항 개선 및 활용 방안 연구", 교양교육연구, 7(6), pp.247~274 (2013), 한국교양교육학회
  35. Lee, M. G., "Development of a students' evaluation instrument for web-based course", Journal of Educational Technology, 18(1), pp.175~192 (2002)
  36. Lee, S. H, "A study on the present situation and problems of students' evaluation", Journal of Educational Technology, 17(1), pp.81~106 (2001)
  37. Lee, S. Y., "A study on the improvement of a lecture evaluation questionnaire in the university", Higher Education, 172(1), pp.17~18 (2011)
  38. 이영희, "COVID-19 대응 대학 원격강의 운영 사례 분석을 통한 유형 탐색", 열린교육연구, 28(3), pp.211~234 (2020), 한국열린교육학회[DOI]
  39. Meir, E. I., "Guidelines for item selection in inventories yielding score profiles", Educational and Psychological Measurement, 41(4), pp.1011~1016 (1981)[DOI]
  40. "Online education guidelines" (2020)[URL]
  41. Moawad, R. A. M., "Online learning during the COVID-19 pandemic and academic stress in university students", Revista Romaneasca Pentru Educatie Multidimensionala, 12(1), pp.100~107 (2020)[DOI]
  42. Nunnally, J., "Psychometric theory" (1994), McGraw-Hill
  43. 오숙영, "강의평가도구 구성요인의 이론적 고찰 및 구인타당도 연구: S 대학교 강의평가 사례 중심", 한국교육학연구, 21(4), pp.5~35 (2015), 안암교육학회
  44. 박찬정, "웹을 기반으로 하는 수업에서 강의평가를 위한 문항 분석", 컴퓨터교육학회 논문지, 5(2), pp.61~68 (2002), 한국컴퓨터교육학회
  45. 박혜정, "가상강좌 강의평가 도구개발 및 타당화", 교육평가연구, 19(2), pp.203~223 (2006), 한국교육평가학회
  46. 박혜림, "대학 강의평가 도구 개선 방안 연구 -“A”대학의 강의평가 문항 개선 사례-", 한국산학기술학회논문지, 13(11), pp.5033~5043 (2012), 한국산학기술학회[DOI]
  47. Rubio, D. M., "Objectifying content validity : Conducting a content validity study in social work research", Social Work Research, 27(2), pp.94~104 (2003)[DOI]
  48. Ryoo, W. Y., "Web-based education", pp.177~203 (1999), Kyoyookbook
  49. Seo, E. H, "Development of students' evaluation instrument for cyber instruction", Yonsei Review of Educational Research, 15(10), pp.133~153 (2002)
  50. 설현수, "Messick의 타당도 관점에서 Rasch 측정모형 적용을 통한 대학 강의평가 도구개발의 타당화", 교육평가연구, 20(4), pp.31~51 (2007), 한국교육평가학회
  51. 설현수, "Rasch 측정 모형을 이용한 청소년 인터넷 중독 척도의 타당화", 교육평가연구, 28(3), pp.779~802 (2015), 한국교육평가학회
  52. 신승현, "기업 스마트러닝 강의평가 도구개발 및 타당화 연구", 기업교육과인재연구, 20(1), pp.59~82 (2018), 한국기업교육학회[DOI]
  53. Stewart, I., "Development and validation of instrument for student evaluation of the quality of web-based Instruction", American Journal of Distance Education, 18(3), pp.131~150 (2004)[DOI]
  54. David Michael Telles-Langdon, "Transitioning University Courses Online in Response to COVID-19", Journal of Teaching and Learning, 14(1) (2020), University of Windsor Leddy Library[DOI]
  55. Wolfe, E. W., "Instrument development tools and activities for measure validation using Rasch models : Part II-validation activities", Journal of Applied Measurement, 8(2), pp.204~234 (2007)
  56. Won, H. H., "Validity study for the evaluation of the instructional activities questionnaires by students", Journal of Educational Evaluation, 13(2), pp.55~76 (2000)
  57. Wright, B. D., "Reasonable mean-square fit values", Rasch Measurement Transactions, 8(3), pp.370~371 (1994)
  58. Yang, K. S, "Meta-research on the influence of course, instructor, and student characteristic in student evaluation of teaching at universities", The Korean Journal of Educational Methodology Studies, 26(2), pp.293~322 (2014)[DOI]
  59. Yang, M. K, "Students' evaluations of university teaching: Significance and problems", The Journal of Educational Principles, 13(1), pp.93~122 (2008)

관련 논문AI추천

이 간행물의 다른 논문 (14건)