텍스트 마이닝을 활용한 의과대학생의 동료평가 경험 분석
Analysis of medical students’ experiences with peer assessment using text mining
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
동료평가는 팀 기반의 학습에서 발생할 수 있는 교수자 평가의 한계, 무임승차 등 같은 문제를 보완하기 위해 실시하는 평가 방식이다. 그러나 대학에서 동료평가가 널리 활용되고 있음에도 불구하고 동료평가에 참여한 대학생의 경험을 심층적으로 탐색한 연구는 부족한 편이다. 이에 본 연구는 동료평가에 참여한 학습자들의 주관적인 경험과 인식을 탐색하는 것을 목적으로 실시되었다. 구체적으로, 동료평가는 학생들이 학습 과정에서 평가의 주체이자 대상이 되는 독특한 경험을 제공하는 점에 주목하여, 평가자와 피평가자로서의 이중적 역할이 학습자에게 어떤 경험을 제공하는지 심층적으로 탐색하고, 이를 바탕으로 동료평가의 효과를 높이고 교수･학습 전략을 개선하기 위한 기초자료를 제공하기 위하여 수행되었다. 본 연구는 1년 동안 문제바탕학습 과정에 참여한 의과대학생 1, 2학년 181명을 대상으로 이루어졌다. 학생들은 1년 간의 문제바탕학습 과정 동안 평가자이자 피평가자로서 동료평가에 참여하였고, 문제바탕학습 과정이 끝난 후 평가자와 피평가자로서의 경험을 묻는 서술형 문항에 응답하였다. 학생들의 서술형 응답은 텍스트 마이닝 기법을 활용하여 분석되었다. 연구 결과, 평가자로서의 경험과 관련하여, (1) 동료를 평가하는 평가자로서 느끼는 부담감 및 어려움, (2) 동료의 학습활동에 대해 높아진 관심, (3) 익명성에 의해 가능한 솔직한 평가, (4) 불명확한 평가 기준으로 인한 평가의 어려움 등 네 가지 토픽이 도출되었다. 피평가자로서의 경험과 관련하여, (1) 동료로부터 받은 피드백을 통한 자기 발전 가능성에 대한 기대, (2) 동료의 솔직한 평가를 받는 경험의 소중함, (3) 동료 평가자의 주관적인 판단에 의한 평가의 주관성에 관한 우려, (4) 평가 결과를 바탕으로 한 학습 동기가 촉진된 경험 등 네 가지 토픽이 도출되었다. 본 연구에서는 이러한 결과를 바탕으로 동료평가 경험의 질을 제고하고 교육적 효과를 극대화할 수 있는 다양한 방안을 제안하였다.
Abstract
Peer assessment is often implemented in team-based learning environments, such as problem-based learning (PBL), to address issues like the limitations of instructor-led evaluations and the problem of free-riding. Despite its widespread use in colleges, few in-depth studies have explored the experiences of college students participating in peer assessment. This research aimed to explore the subjective experiences and perceptions of learners involved in peer assessment. Given that peer assessment offers students a unique experience where they serve as both assessors and assessees within the learning process, the study sought to investigate these dual roles in depth and provide foundational data to enhance the effectiveness of peer assessment. Additionally, it offers teaching and learning strategies based on these findings. The study involved 181 first- and second-year medical students who participated in a year-long PBL course. After completing the course, the students responded to open-ended questions about their experiences as both assessors and assessees. These responses were analyzed using text mining techniques. The results revealed four key topics related to the experience of being an assessor: (1) the burden and difficulty of assessing peers, (2) increased awareness of peers' learning activities, (3) the ability to provide honest assessments due to anonymity, and (4) challenges stemming from unclear assessment criteria. Regarding the experience of being an assessee, four main topics emerged: (1) expectations for self-improvement based on peer feedback, (2) the value of receiving honest assessments from peers, (3) concerns about the subjectivity of assessments influenced by peers' personal judgments, and (4) the motivation to learn fostered by the assessment results. Based on these findings, the study suggests various strategies to enhance the peer assessment experience and maximize its educational effectiveness.
참고문헌 (26)
- 강숙희, "교직 희망 의지와 동료피드백 유형이 예비교사들의 교사효능감에 미치는영향", 한국교원교육연구, 27(4), pp.197~214 (2010), 한국교원교육학회
- 강현숙, "대학교양수업의 동료평가에 대한 인식 : 평가타당성과 정의적 효과를 중심으로", 학습자중심교과교육연구, 20(8), pp.167~189 (2020), 학습자중심교과교육학회
- 김민정, "팀기반 학습에서 동료평가 사전 인식교육이 평가의 신뢰도, 팀활동의 만족도, 동료평가에 대한 인식에 미치는 영향", 학습자중심교과교육연구, 17(20), pp.289~309 (2017), 학습자중심교과교육학회
- 김민정, "학습 방법으로서의 동료평가 : 평가자 및 피평가자의 역할이 학습자의 초인지, 학업성취, 학습동기에 미치는 영향", 교육공학연구, 21(4), pp.1~28 (2005), 한국교육공학회
- 김윤정, "프로젝트 기반 학습에서 강점 활용 피드백 유형이 학업성취도와 학습만족도에 미치는 영향", 교육방법연구, 27(2), pp.229~252 (2015), 한국교육방법학회
- 박종혁, "팀 프로젝트 무임승차 방지 방안에 관한 연구", 한국컴퓨터정보학회논문지, 18(2), pp.141~147 (2013), 한국컴퓨터정보학회
- 박주용, "동료평가의 현황과 전망", 인지과학, 29(2), pp.85~104 (2018), 한국인지과학회
- 박해리, "팀프로젝트 학습활동에서의 대학생 동료평가 사례연구 -경영전공개설과목 ‘인터넷 비즈니스 모델’ 수업을 중심으로-", 교육방법연구, 27(1), pp.151~176 (2015), 한국교육방법학회
- 신태섭, "조별 과제 동료평가 행동기준평정척도 개발 및 타당화 연구", 공학교육연구, 21(5), pp.32~39 (2018), 한국공학교육학회
- 윤성원, "대학 신입생 영어 프리젠테이션 활동에 대한 동료 평가의 효과", 학습자중심교과교육연구, 14(3), pp.147~168 (2014), 학습자중심교과교육학회
- 장현재, "팀원 기여도에 대한 동료평가의 신뢰성과 성적 반영 방법에 대한 연구-종합설계교과목을 중심으로", 공학교육연구, 27(1), pp.63~70 (2024), 한국공학교육학회
- 정은숙, "팀 프로젝트에 기반한 액트 수업에서 동료평가에 대한 학생들의 인식 조사", 학습자중심교과교육연구, 18(1), pp.771~794 (2018), 학습자중심교과교육학회
- 주미란, "영어 발표 과업의 동료평가에 대한 학습자 인식", 영어어문교육, 30(2), pp.133~152 (2024), 한국영어어문교육학회
- 황순희, "공과대학생의 팀 기반 수업에서 동료평가와 자기평가의 관계", 공학교육연구, 19(5), pp.3~12 (2016), 한국공학교육학회
- 최정임, "PBL로 수업하기" (2015), 학지사
- Annett, J., "Feedback and human behavior" (1969), Penguin Books
- Black, P., "Feedback in questioning and marking : The science teacher's role in formative assessment", School Science Review, 82(301), pp.55~61 (2001)
- Blei, D. M., "Latent dirichlet allocation", Journal of Machine Learning Research, 3, pp.993~1022 (2003)
- Dochy, F. J., "The use of self-, peer and co-assessment in higher education : A review", Studies in Higher education, 24(3), pp.331~350 (1999)
- Hofstede, G., "Cultures and organizations: Software of the mind: Intercultural cooperation and its importance for survival" (2010), McGraw-Hill
- Ju, H., "Challenges experienced by Korean medical students and tutors during problem-based learning: a cultural perspective", Interdisciplinary Journal of Problem-Based Learning, 10(1), pp.8~ (2016)
- Li, L., "The role of anonymity in peer assessment", Assessment & Evaluation in Higher Education, 42(4), pp.646~656 (2016)
- Michaelsen, L., "Team-based learning for health professions education: A guide to using small groups for improving learning", pp.9~34 (2008), Stylus Publishing
- Miller, P. J., "The effect of scoring criteria specificity on peer and self-assessment", Assessment & Evaluation in Higher Education, 28(4), pp.383~394 (2003)
- Panadero, E., "Human Factors and Social Conditions of Assessment", pp.1~39 (2016), Routledge
- Topping, K. J., "Peer assessment", Theory Into Practice, 48(1), pp.20~27 (2009)