가중치를 적용한 강의평가 결과 분석
A study on the student evaluation of teaching at universities by analytic hierarchy process
0
조회
0
다운로드
7
인용
0
참고문헌
키워드
초록
이 연구의 목적은 강의평가 결과의 합리적 산출을 위해 평가 영역 간, 지표 간 비중을 설정하고, 그 비중을 적용한 결과와 동일 비중을 가진 원래의 결과 간에 차이가 있는지를 실증적으로 밝히는 것이다. 이를 위해 31명의 전문가 집단을 선정하여 쌍대비교 설문지를 통해 영역 및 지표 간 비교 평정을 실시하도록 하였다. 평정 결과를 토대로 계층화분석법(AHP)에 따른 영역(강의준비, 강의태도, 강의방법, 강의결과) 및 지표별 가중치를 산출하였다. 그리고 C대학교의 2009년 1학기부터 2010년 2학기까지 4학기 동안의 강좌별 평가 결과 자료를 이용하여 가중치를 적용한 점수를 산출한 다음, 그 결과를 동일 비중을 적용했던 현행의 원점수와 비교하였다. 연구 결과, 영역별로는 강의결과 영역의 가중치가 가장 컸고, 강의준비 영역의 비중이 가장 낮았다. 그리고 문항 간 비중도 상호 다르게 나타났다. 또한 가중치를 적용한 결과와 기존 결과 간에 통계적으로 유의한 차이가 있었으며, 강좌별 순위의 변화도 많은 것으로 나타났다. 이에 강의평가의 영역별 문항 수를 조정하거나 재구성할 경우 평가 영역별 비중을 반영할 필요가 있으며, 평가 영역 및 지표별 비중을 반영하는 점수 산출 방안을 마련하여 활용할 것을 제안하였다.
Abstract
The purpose of this study is to explore difference between the result of applying different weights and the result of applying equal weights to evaluation items and indexes for the purpose of establishing reasonably the result of student evaluation of teaching. In order to accomplish the purpose, after 31 experts assigned different weights on evaluation items and indexes, this study calculated weighted items and weighted indexes through AHP analysis. The data used in this study is the results of evaluation of teaching at C university during four semesters. The results of the data analysis report that the weight of teaching result in evaluation items is biggest than the others and the weight of teaching preparation is smallest in the evaluation items. The weights between indexes is identified differently. Also there is gap between the raw score and the score of applying equal weights, which is a meaningful difference in terms of statistics. In addition, there are much changes in ranking of teaching result. Thus, when adjusting number of evaluation indexes, the weight need to be considered.
참고문헌 (46)
- 수업평가 개선 연구위원회 보고서, "가톨릭대학교 수업평가개선연구위원회", 가톨릭대학교, ~ (2010)
- 강진규, "AHP의 이론과 실제" (2008), 인터비젼
- 권영훈, "경영학 교육 강의평가모형 개발", 경영교육연구, 62(62), pp.225~244 (2010), 한국경영교육학회
- 김명화, "강의평가의 타당도와 신뢰도", 아시아교육연구, 6(3), pp.1~24 (2005), 교육연구소
- 김성수, "강의 평가의 신뢰도, 타당도 및 활용에 대한 고찰", 학생생활연구, 17, pp.85~100 (1997)
- 김성숙, "e-learning 강의평가 도구의 일반화가능도와 평가활용의 최적화 조건", 교육평가연구, 19(1), pp.305~322 (2006), 한국교육평가학회
- 대학 학사과정 강의평가제 실태분석을 통한 교육업적평가모형 개발 연구. 정책연구보고서, "김성열", 교육인적자원부, ~ (2001)
- 김진화, "대학경영환경이 강의평가에 미치는 영향 - Y대학교 강의평가를 중심으로 -", 경영사학, 26(2), pp.201~224 (2011), 한국경영사학회
- 김충행, "수업방법 개선을 위한 학생에 의한 대학 강의 평가의 분석", 교육과정연구, 15(1), pp.203~240 (1997)
- 김학일, "이공계 강의평가 결과의 실증적 분석을 통한 강의평가제도 개선방안", 공학교육연구, 10(4), pp.58~77 (2007), 한국공학교육학회
- 김현철, "분산분석과 범주형 자료 분석에 의한 강의평가 결정요인의 탐색", 한국교육, 33(3), pp.121~144 (2006), 한국교육개발원
- 류춘호, "강의 평가 설문 문항의 개발에 관한 연구", 경영연구, 26, pp.339~389 (2001)
- 류춘호, "대학의 강의평가에 영향을 미치는 학생관련 요인에 관한 연구", 경영학연구, 32(3), pp.8~807 (2003), 한국경영학회
- 박인우, "대학 강의평가에서의 무성의 응답에 대한 학생의 자기평가의 영향에 관한 연구", 교육방법연구, 24(1), pp.257~281 (2012), 한국교육방법학회
- 박혜정, "가상강좌 강의평가 도구개발 및 타당화", 교육평가연구, 19(2), pp.203~223 (2006), 한국교육평가학회
- 백순근, "위계선형모형을 활용한 대학생의 강의평가 분석 - S대학교 교양강의를 중심으로 -", 교육평가연구, 21(2), pp.1~24 (2008), 한국교육평가학회
- 손충기, "수업평가 관련 변인에 따른 수업평가 결과 차이 탐색 연구", 교육평가연구, 20(2), pp.1~24 (2007), 한국교육평가학회
- 송미섭, "강의평가 설문지에 관한 문항분석 연구", 교육평가연구, 7(2), pp.263~283 (1994)
- 양미경, "학생의 평정에 의거한 대학 강의평가의 의의와 한계", 교육원리연구, 13(1), pp.93~122 (2008), 한국교육원리학회
- 이동규, "계층화분석과정에 의한 평가지수표 가중치 산정 : 사학기관의 재무비율을 중심으로", 회계논집, 2, pp.77~105 (2001)
- 이상석, "계층분석과정에 의한 강의평가", 상업교육연구, 5, pp.225~244 (2002), 한국상업교육학회
- 이석열, "강의평가 현황 및 문제점", 대학교육, pp.16~22 (2011)
- 이성흠, "교수설계 이론에 근거한 대학 강의평가 도구개발을 위한 기초연구", 교육공학연구, 17(1), pp.81~108 (2001)
- 이유선, "현행 강의평가제도의 문제점과 개선방안", 인문과학연구, 12, pp.205~242 (2005)
- 이훈병, "유아교육과 수업개선을 위한 강의평가문항의 중요도분석", 유아교육.보육행정연구, 13(2), pp.257~274 (2009), 한국유아교육ㆍ보육복지학회
- 이희원, "대학 강의 질 개선을 위한 강의 평가 문항 분석 - 서울대학교 이공계열 교양과목을 중심으로", 공학교육연구, 8(4), pp.52~63 (2005)
- 이혜림, "계층분석과정에 의한 강의평가요인의 중요도 분석", 한국교원교육연구, 22(1), pp.49~68 (2005), 한국교원교육학회
- 장은정, "사이버대학에서의 강의평가와 학업성취에 관한 사례연구", 교육공학연구, 21(2), pp.103~126 (2005), 한국교육공학회
- 조근태, "계층분석적 의사결정" (2003), 동현출판사
- 한국 대학의 질적 수준 분석 연구(I), "최정윤", 한국교육개발원, ~ (2007)
- 한신일, "학생에 의한 강의평가의 관련요인 분석 - 교수, 학생, 수업관련요인을 중심으로", 교육행정학연구, 19(4), pp.247~266 (2001)
- 한신일, "한국대학의 강의평가실태 분석", 교육행정학연구, 23(3), pp.379~404 (2005), 한국교육행정학회
- Coburn, L., "Student Evaluation of Teacher Performance", ED 289 887, ~ (1984)
- d'Apollonia, S., "Variables moderating the validity of student ratings of instruction: A meta-analysis", A meta-analysis. Paper presented at the 77th annual meeting of the American Educational Research Association (1996)
- Feldman, K. A., "Seniority and experience of college teachers as related to evaluations they receive from students", Research in Higher Education, 18(1), pp.3~124 (1983)
- Feldman, K. A., "Reflections on the study of effective college teaching and student ratings: One continuing quest and two unresolved issues, In Higher education: Handbook of theory and research", pp.35~74 (1998), Agathon Press
- Greenwald, A., "Grading leniency is a removable contaminant of student ratings", American Psychologist, 52, pp.1209~1217 (1997)
- Harris, D., "Educating and assessing for learning" (1990), Nichols
- Hoffmann, R. G., "Variables affection university student ratings of instructor behavior", American Educational Research Journal, 15, pp.287~299 (1978)
- Kember, D., "Does the Use of Student Feedback Questionnaires Improve the Overall Quality of Teaching?", Assessment & Evaluation in Higher Education, 27(5), pp.411~425 (2002)
- Marsh, H. W., "The influence of student, course, and instructors' characteristics in evaluations of university teaching", American Educational Research Journal, 17, pp.219~237 (1980)
- Marsh, H. W., "Students' evaluation of university teaching: dimensionality, reliability, validity, potential biases, and utility", Journal of Education Psychology, 76(5), pp.707~754 (1984)
- Marsh, H. W., "Students' evaluation of university teaching: Research findings, methodological issues, and directions for future research", International Journal of Education Research, 11, pp.253~388 (1987)
- Marsh, H. W., "Making students' evaluations, and instructional effectiveness effective: The central issues of validity, bias, and utility", American Psychologist, 52, pp.1187~1197 (1997)
- Miller, A. H., "The evaluation of university course", Studies in Higher Education, 9(1) (1984)
- Sheehan, E. P., "Student evaluations of university teaching", Journal of Instructional Psychology, 26, pp.188~193 (1999)