예비교사의 데이터 기반 의사결정 수업에서 생성형 AI 활용 효과 및 학습 경험 탐색: 텍스트 마이닝을 중심으로
Exploring the effectiveness and learning experience of using generative AI in pre-service teachers’ data-driven decision-making classes: Focusing on text mining
1
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
본 연구의 목적은 예비교사의 데이터 기반 의사결정 수업에서 생성형 AI를 활용한 후 그에 따른 수업 효과와 학습 경험을 탐색하는 것이다. 이를 위해 총 50명의 예비교사를 대상으로 생성형 AI를 활용한 데이터 기반 의사결정 수업을 진행하였고, 효과성 검증을 위해 수업 전과 후에 데이터 기반 의사결정 효능감에 대한 설문을 진행하여 수집한 응답에 대해서는 대응표본 t 검정을 통해 결과를 분석하였다. 이 외에 수업 마지막 시간에 성찰 저널을 작성하도록 한 뒤 이후 텍스트 마이닝으로 분석하였다. 본 연구의 결과는 다음과 같다. 첫째, 예비교사의 데이터 기반 의사결정 효능감은 유의하게 향상되었다. 둘째, 예비교사의 성찰 저널에 드러난 학습 경험을 토픽모델링으로 분석한 결과, 다음과 같이 총 5개의 토픽이 추출되었다: ‘예비교사가 현장에서 활용할 만한 데이터 기반 의사결정을 지원하는 생성형 AI 활용 데이터 리터러시 학습’, ‘생성형 AI 활용 그룹별 교수 전략 도출 및 교육 데이터에 관한 윤리적 문제 인식’, ‘데이터 리터러시 역량을 통해 예비교사의 문제 해결 능력 향상’, ‘성적 데이터 해석 능력을 위해 생성형 AI 도구를 통해 질문하는 역량 및 방법 성찰’, ‘데이터 시각화 기반 자료를 통해 예비교사의 효율적인 교수적 의사결정 조력’. 마지막으로, 예비교사의 성찰저널에 드러난 어려움을 분석하였을 때, ‘생성형 AI가 생성한 출력값에 대한 어려움’, ‘생성형 AI가 생성한 학습 자료에 관한 어려움’, ‘생성형 AI에게 질문하는 것에 대한 어려움’, ‘생성형 AI와의 데이터 분석 작업에 대한 어려움’, ‘생성형 AI 사용에 걸리는 시간’ 등이 도출되었다. 이에 따라 본 연구는 예비교사의 생성형 AI 활용 데이터 기반 의사결정 경험을 다방면으로 분석하여 추후 기초자료를 제안한 의의가 있다.
Abstract
This study aims to explore the learning experiences of pre-service teachers in utilizing generative AI-based data-driven decision-making(DDDM) tools and to investigate whether the experience was effective. To verify the effectiveness, a survey on the efficacy of DDDM was conducted before and after the class, and the responses were analyzed using paired sample t-tests. In addition, students were asked to write a reflection journal at the end of the class, which was later analyzed by text mining. As a result, pre-service teachers’ DDDM efficacy significantly improved after utilizing the generative AI-based tools. In addition, the topic modeling from reflection journals was extracted as follows: ‘Data literacy learning using gen AI to support DDDM that pre-service teachers can use in the field,’ ‘Deriving teaching strategies by groups using generative AI and recognizing ethical issues regarding educational data,’ ‘Improving pre-service teachers’ problem-solving skills through data literacy competencies,’ ‘Reflecting on the ability and method of asking questions through gen AI tools for interpreting performance data,’ and ‘Supporting pre-service teachers’ efficient instructional decision-making through data visualization-based materials.’ Finally, the analysis of the difficulties revealed in the pre-service teachers’ reflective journals, the output, the learning materials generated by the gen AI, asking questions to the gen AI, data analysis tasks with the gen AI, and the time it takes to use the gen AI. Therefore, this study is significant for its dual implications for pre-service teachers’ learning experiences in DDDM using generative AI.
참고문헌 (43)
- 고인석, "데이터 기반 의사결정에서 편향과 공정성", 철학․사상․문화, 38, pp.1~24 (2022)
- "AI 디지털교과서 추진방안 발표" (2023), 교육부[URL]
- 김은회, "토픽 레이블링을 위한 토픽 키워드 산출 방법", (사)디지털산업정보학회 논문지, 16(3), pp.25~36 (2020)
- 박은주, "체계적인 모의수업 활동이 예비유아교사의 교수효능감과 수업기술에 미치는 효과 및변화과정 탐색", 유아교육·보육복지연구, 22(1), pp.251~281 (2018)
- 서희주, "데이터 분석 프로젝트 참여한 예비 교사의 통계적 지식에 대한 변화와 데이터기반 의사 결정의 경험", 수학교육 논문집, 35(2), pp.153~172 (2021)
- 오희정, "성찰 일지 분석을 통한 마이크로티칭 수업 사례 연구", 교과교육학연구, 24(3), pp.273~285 (2020)
- 이가영, "예비교사의 수업설계 역량 증진을 위한 생성형 AI기반 맞춤형 피드백의 효과탐색", 열린교육연구, 32(2), pp.265~287 (2024)
- 이수원, "초등학교 블렌디드 러닝에서 맞춤형 학습을 위한 학습자 군집탐색", 교육공학연구, 38(1), pp.249~271 (2022)
- 이슬기, "‘교사의 생활 화법’ 과목의 성찰일지에 나타난 예비 교사의 인식 연구", 청람어문교육, 79, pp.253~284 (2021)
- 이예은, "생성형 인공지능을 활용한 예비교사 대상 데이터 리터러시 교육 프로그램 개발", 정보교육학회논문지, 28(3), pp.275~287 (2024)
- 이재혁, "생성형 인공지능 활용 교육프로그램을 통한 예비교사들의 인공지능에 대한 인식 변화", 교원교육, 40(4), pp.5~31 (2024)
- 이지원, "교사의 데이터 기반 의사결정을 위한 생성형 AI 챗봇 개발연구", 석사, pp.2024
- 임종현, "2010년~2021년 국내 메타버스와 가상세계를 활용한 교육 연구동향 분석 : LDA 기반 토픽 모델링과 시계열 회귀분석을 적용하여", 교육정보미디어연구, 28(2), pp.187~214 (2022)
- 주은경, "프로젝트기반학습을 적용한 간호학개론 수업 사례연구 : 성찰일지 내용분석", 디지털융복합연구, 21(3), pp.15~22 (2023)
- 최영인, "국어과 예비교사를 위한 데이터 기반 맞춤형 수업 설계 프로그램 개발연구", 교사교육연구, 58(2), pp.221~236 (2019)
- 편지윤, "초등국어교육에 대한 예비교사의 인식 탐색 : 토픽모델링과 의미연결망분석을 중심으로", 교육논총, 41(4), pp.285~311 (2021)
- "AI 디지털교과서 개발 가이드라인" (2023), 한국교육학술정보원[URL]
- 지능정보사회 교사 역량제고를 위한 연수 프로그램 개발Ⅰ: 교수학습 역량 모델링, "홍선주", 한국교육과정평가원, ~ (2018)
- Bae, H., "Pre-service teachers’ dual perspectives on generative AI : Benefits, challenges, and integration into their teaching and learning", Online Learning, 28(3), pp.131~156 (2024)
- Blei, D. M., "Probabilistic topic models", Communications of the ACM, 55(4), pp.77~84 (2012)
- Bogdan, R. C., "Qualitative research for education: An introduction to theory and methods" (2006), Pearson
- Datnow, A., "Teacher talk about student ability and achievement in the era of data-driven decision making", Teachers College Record, 120(4), pp.1~34 (2018)
- DeCarlo, M. J. T., "Exploring new horizons: Generative artificial intelligence and teacher education", pp.129~144 (2024), Association for the Advancement of Computing in Education
- Dunn, K. E., "Educational psychology’s instructional challenge : Pre-service teacher concerns regarding classroom-level data-driven decision-making", Psychology Learning & Teaching, 15(1), pp.31~43 (2016)
- Dunn, K. E., "What teachers think about what they can do with data : Development and validation of the data driven decision-making efficacy and anxiety inventory", Contemporary Educational Psychology, 38(1), pp.87~98 (2013)
- Filderman, M. J., "Does training predict second-grade teachers’ use of student data for decision-making in reading and mathematics?", Assessment for Effective Intervention, 46, pp.247~258 (2020)
- Ingram, D., "Accountability policies and teacher decision making : Barriers to the use of data to improve practice", Teachers College Record, 106(6), pp.1258~1287 (2004)
- Kennedy, M. M., "How does professional development improve teaching?", Review of Educational Research, 86(4), pp.945~980 (2016)
- Kippers, W. B., "Data literacy : What do educators learn and struggle with during a data use intervention?", Studies in Educational Evaluation, 56, pp.21~31 (2018)
- Kraft, M. A., "The effect of teacher coaching on instruction and achievement : A meta-analysis of the causal evidence", Review of Educational Research, 88(4), pp.547~588 (2018)
- Mandinach, E. B., "What does it mean for teachers to be data literate : Laying out the skills, knowledge, and dispositions", Teaching and Teacher Education, 60, pp.366~376 (2016)
- Means, B., "Teachers’ ability to use data to inform instruction:Challenges and supports" (2011), Office of Planning, Evaluation and Policy Development, U.S. Department of Education
- Merk, S., "Fostering aspects of pre-service teachers’ data literacy : Results of a randomized controlled trial", Teaching and Teacher Education, 91, pp.103043~ (2020)
- Mezirow, J., "Fostering critical reflection in adulthood: A guide to transformative and emancipatory learning" (1990), Jossey-Bass
- Newman, D., "Improving topic coherence with regularized topic models", Proceedings of the 24th International Conference on Neural Information Processing Systems. Advances in neural information processing systems, 4 (2011)
- Paton, M. Q., "Qualitative research and evaluation methods" (2014), Sage
- Reeves, T., "School level and other differences in Illinois teachers’ use of data to inform instruction", Mid-western educational researcher, 29(4), pp.332~354 (2017)
- Reeves, T. D., "A classroom data literacy intervention for pre-service teachers", Teaching and Teacher Education, 50, pp.90~101 (2015)
- Schildkamp, K., "Data-based decision making in education: Challenges and opportunities", pp.49~67 (2013), Springer
- Schildkamp, K., "Data-based decision making in education: Challenges and opportunities" (2013), Springer
- Teng, Y., "Data-driven decision-making model based on artificial intelligence in higher education system of colleges and universities", Expert Systems, 40(4), pp.e12820~ (2023)
- Wang, Y., "When artificial intelligence meets educational leaders’ data-informed decision-making : A cautionary tale", Studies in Educational Evaluation, 69, pp.100872~ (2021)
- Zhao, W., "A heuristic approach to determine an appropriate number of topics in topic modeling", Proceedings of the 12th Annual MCBIOS Conference, 16, pp.1~10 (2015)
