본문 바로가기
KERD
논문KCI 등재

키워드 네트워크 분석 방법을 활용한 국외 글쓰기 자동채점 연구 동향 분석 - 인문학 및 사회과학 영역의 학술지 논문을 중심으로

Analysis of Overseas Trends in the Study of Automated Essay Scoring using Keyword Network Analysis methods

김승주
국어교육학회(since1969) (The Society Of Korean Language And Literature Education)|2022.10|국어교육연구 (Journal of Korean Language Education)|제80호|pp. 45-93

0

조회

0

다운로드

4

인용

0

참고문헌

키워드

Research Trend연구 동향자동 채점Automated Writing Evaluation역할론Automated Essay Scoring글쓰기 자동 채점작문 교육 연구자Writing Education ResearcherResearch Role
주제분류한국어와문학

초록

본 연구는 다학제간 연구 주제 중 하나인 글쓰기 자동채점 연구와 관련하여 국외의 선행연구를 바탕으로 향후 우리의 작문 교육 연구 내에서 관련 연구가 나아갈 길을 모색하는 데에 그 목적이 있다. 다학제간 연구 주제인 글쓰기 자동채점은 작문 교육 연구자들의 활발한 참여가 필요한 연구 영역이지만, 현재 작문 교육 연구 내에서는 이와 관련한 논의가 활발히 이루어지고 있지 못하다. 다만, 국외에서의 글쓰기 자동채점은 우리보다 이른 시기에 연구가 진행되었고 그간 자동채점과 관련한 많은 연구 성과가 축적되어 있기에 국외의 연구 사례를 통해 향후 작문교육 연구가 나아가야 할 방향을 고민해봄 직하다. 이에 본 연구에서는 의미 네트워크 분석 방법을 활용하여 최근 15년간 사회과학 및 인문학 영역의 국외 학술지 논문을 대상으로 하여 관련 연구들을 살펴보고, 향후 다학제간 연구에서 우리의 학문 분과가 담당해야 할 역할을 모색하고자 한다.

Abstract

The purpose of this study is to reconsider the theory of the role of writing education researchers based on prior research abroad in relation to the study of writing automatic grading, which is one of the topics of multidisciplinary research, and to examine the possibility of expansion of related research within domestic writing education research in the future. As a multidisciplinary research topic, writing automated essay scoring is a research area that requires the active participation of writing education researchers, but it is also an area that is not currently the case. The need for research on writing automated essay scoring outside the country was sparked earlier than we are, and there is now a large accumulation of research achievements related to automatic scoring. Accordingly, this study used the semantic network analysis method to examine the intellectual structure of related research in the social sciences, arts, humanities, and psychology of papers in foreign journals for the past 15 years, and examined the role of writing education researchers in addition to the direction in which our writing auto-grading research should be headed in the future.

참고문헌 (47)

  1. 길호현, "상관계수를 활용한 텍스트 응집성 산출 방안 연구", 작문연구, (46), pp.70~100 (2020), 한국작문학회[DOI]
  2. 길호현, "교육용 텍스트의 이독성 평가를 위한 양적 준거 연구 : 정보 텍스트를 중심으로", 독서연구, (63), pp.9~44 (2022), 한국독서학회[DOI]
  3. 김승주, "채점 자질 설계를 통한 지도 학습 기반 작문 자동 채점의 타당도 확보 방안 탐색", 청람어문교육, (69), pp.265~295 (2019), 청람어문교육학회[DOI]
  4. 김승주, "논증적 글쓰기 과제의 자동 채점을 위한 N-gram 자질의 활용 가능성 탐색", 작문연구, (41), pp.37~62 (2019), 한국작문학회[DOI]
  5. 김승주, "토픽모델링과 시계열 분석을 활용한 독서 연구의 동향과 전망－최근 10년 간 국어교육학 관련 학술지 논문을 중심으로－", 청람어문교육, (70), pp.169~204 (2019), 청람어문교육학회[DOI]
  6. 김승주, "딥러닝 자연어처리 기법을 활용한 논증적 글쓰기 자동채점방안 연구", 박사, pp.2022
  7. 김승주, "논증적 글쓰기 자동 평가 시스템 개발을 위한 논증 주석 코퍼스 구축 방안 탐색", 청람어문교육, (76), pp.129~164 (2020), 청람어문교육학회[DOI]
  8. 김철희, "통사적 숙달도 측정을 통한 작문에서의 문장 학습 효과 연구 - 학습자 E의 문장 학습 사례를 중심으로", 작문연구, (45), pp.135~179 (2020), 한국작문학회[DOI]
  9. 대규모 평가를 위한 서답형 문항자동채점 방안 연구, "노은희", 한국교육과정평가원, ~, pp.RRE 2012-6 (2012)
  10. 대규모 평가를 위한 서답형 문항자동채점 프로그램 정교화 및 시범 적용, "노은희", 한국교육과정평가원, ~, pp.한국교육과정평가원 연구보고 RRE 2013-5 (2013)
  11. 한국어 서답형 문항 자동채점 프로그램 개발 및 실용성 검증, "노은희", 한국교육과정평가원, ~, pp.한국교육과정평가원 연구보고 RRE 2014-6 (2014)
  12. 한국어 문장 수준 서답형 문항자동채점 프로그램 개발 및 적용, "노은희", 한국교육과정평가원, ~, pp.RRE 2015-9 (2015)
  13. 한국어 문장 수준 서답형 문항 자동채점 프로그램 고도화 및 적용, "노은희", 한국교육과정평가원, ~, pp.RRE 2016-11 (2016)
  14. 이슬기, "토픽 모델링에 따른 고등학생 논설문의 응결성과 응집성의 상관분석", 국어교육학연구, 52(3), pp.135~162 (2017), 국어교육학회[DOI]
  15. 정대영, "소설 텍스트의 문장 복잡도 연구 - 자동화된 프로그램을 활용하여 -", 문학교육학, (48), pp.263~292 (2015), 한국문학교육학회
  16. 교육용텍스트의 이독성 평가준거 개발 연구, "최소영", 한국교육과정평가원, ~, pp.RRC 2021-8 (2021)
  17. Attali, Y., "Automated essay scoring with e‐rater® v. 2.0", ETS Research Report Series (2004)
  18. Attali, Y., "Scoring with the computer : Alternative procedures for improving the reliability of holistic essay scoring", Language Testing, 30(1), pp.125~141 (2013)
  19. Bauer, M. W., "Qualitative researching with text, image and sound: a practical handbook", pp.19~37 (2000), Sage
  20. Ben-Simon, A., "Toward more substantively meaningful automated essay scoring", The Journal of Technology, Learning and Assessment, 6(1) (2007)
  21. Biber, D., "Representativeness in corpus design", Literary and linguistic computing, 8(4), pp.243~257 (1993)
  22. Bishop, C. M., "Pattern recognition and machine learning" (2006), springer
  23. Blondel, V. D., "Fast unfolding of communities in large networks", Journal of statistical mechanics : theory and experiment, pp.10008~ (2008)
  24. Bonacich, P., "Power and centrality : A family of measures", American journal of sociology, 92(5), pp.1170~1182 (1987)
  25. Chen, C. F. E., "Beyond the design of automated writing evaluation : Pedagogical practices and perceived learning effectiveness in EFL writing classes", Language Learning & Technology, 12(2), pp.94~112 (2008)
  26. Crossley, S. A., "The Tool for the Automatic Analysis of Cohesion 2. 0 : Integrating semantic similarity and text overlap", Behavior research methods, 51(1), pp.14~27 (2019)
  27. Crossley, S. A., "The tool for the automatic analysis of text cohesion(TAACO) : Automatic assessment of local, global, and text cohesion", Behavior research methods, 48(4), pp.1227~1237 (2016)
  28. Deane, P., "On the relation between automated essay scoring and modern views of the writing construct", Assessing Writing, 18(1), pp.7~24 (2013)
  29. DiCerbo, K., "Handbook of Automated Scoring", pp.2020, Chapman and Hall
  30. Graesser, A. C., "Coh-Metrix: Analysis of text on cohesion and language", Behavior research methods, instruments, & computers, 36(2), pp.193~202 (2004)
  31. Grimes, D., "Utility in a fallible tool : A multi-site case study of automated writing evaluation", The Journal of Technology, Learning and Assessment, 8(6) (2010)
  32. Hofmann, T., "Probabilistic latent semantic analysis", arXiv preprint arXiv:1301.6705, ~ (2013)
  33. Kumar, V., "Frontiers in education", pp.572367~ (2020), Frontiers Media SA
  34. Link, S., "Impact of automated writing evaluation on teacher feedback, student revision, and writing improvement", Computer Assisted Language Learning, 35(4), pp.605~634 (2022)
  35. McNamara, D. S., "Linguistic features of writing quality", Written communication, 27(1), pp.57~86 (2010)
  36. Mislevy, R. J., "Implications of evidence‐centered design for educational testing", Educational measurement : issues and practice, 25(4), pp.6~20 (2006)
  37. Quinn, D., "Social network analysis : A survey", International Journal of Ambient Computing and Intelligence(IJACI), 4(3), pp.46~58 (2012)
  38. Rupp, A. A., "Designing, evaluating, and deploying automated scoring systems with validity in mind : Methodological design decisions", Applied Measurement in Education, 31(3), pp.191~214 (2018)
  39. Shermis, M. D., "Automated essay scoring: A cross-disciplinary perspective" (2003), Routledge
  40. Stevenson, M., "A critical interpretative synthesis : The integration of Automated Writing Evaluation into classroom writing instruction", Computers and Composition, 42, pp.1~16 (2016)
  41. Wang, P. L., "Effects of an Automated Writing Evaluation Program: Student Experiences and Perceptions", Electronic Journal of Foreign Language Teaching, 12(1) (2015)
  42. Ware, P., "Computer-generated feedback on student writing", Tesol Quarterly, 45(4), pp.769~774 (2011)
  43. Weigle, S. C., "English language learners and automated scoring of essays : Critical considerations", Assessing Writing, 18(1), pp.85~99 (2013)
  44. Wilson, J., "Automated writing evaluation and feedback : Multiple metrics of efficacy", Journal of Educational Computing Research, 58(1), pp.87~125 (2020)
  45. Wood, S. W., "Handbook of Automated Scoring", pp.2020, Chapman and Hall
  46. Zafarani, R., "Social media mining: an introduction" (2014), Cambridge University Press
  47. Zhang, M., "Contrasting automated and human scoring of essays", R & D Connections, 21(2), pp.1~11 (2013)

관련 논문AI추천

네트워크 분석을 활용한 작문 연구 동향 분석김혜연, 정희모한국작문학회 · 작문연구2015 · 제26호토픽모델링을 활용한 대학 글쓰기 교육 연구 동향 분석유인선인문사회과학연구소 · 인문사회과학연구2023 · 제24권 제2호교사의 작문 피드백 관련 국외 연구 동향 및 주요 쟁점: 네트워크 분석과 문헌 고찰의 적용김혜연국어교육학회(since1969) · 국어교육연구2016 · 제37호채점 자질 설계를 통한 지도 학습 기반 작문 자동 채점의 타당도 확보 방안 탐색김승주청람어문교육학회 · 청람어문교육2019 · 제69호국내외 글쓰기 피드백 연구 동향 분석과 과제김형성한국작문학회 · 작문연구2023 · 제57호협동 글쓰기의 국내외 연구 동향에 대한 체계적 문헌 고찰김혜연한국작문학회 · 작문연구2017 · 제34호

이 간행물의 다른 논문 (7건)

대면 수업과 비대면 수업에서 고등학생의 발표 불안 인식 차이와 원인 분석권순희, 류선옥, 백목원pp. 1-44초등학교 5학년 학생의 설득하는 글에 나타난 양태 표현 사용 양상 - 주장과 근거를 담은 문장을 중심으로신희성pp. 95-137신활자본 음식조리서의 부사 연구김예니pp. 139-168『아이생활 』 발간 배경 연구류덕제pp. 169-199시 읽기의 유기성과 교육과정의 반영 방향 - 윤동주의 「병원」 읽기에 나타난 독자의 유기적 인식 분석을 중심으로민재원pp. 201-227
원문 보기