본문 바로가기
KERD
논문KCI 등재

인공지능 언어 모델의 절 연결 능력에 대한 일고찰: 터보 및 다빈치 모델을 대상으로

A case study on the clause linking ability of AI language models: Utilizing the Turbo and Davinci models

이지은|송상헌|황동진
언어과학회 (The Linguistic Science Society)|2023.06|언어과학연구 (The Journal of Linguistics Science)|제105호|pp. 27-61

1

조회

0

다운로드

2

인용

0

참고문헌

키워드

ChatGPT(ChatGPT)절 연결(clause linking)이유/원인(reason/cause)-어서(-ese)-니까(-nikka)
주제분류언어학

초록

This study examines whether AI language models can aptly connect two clauses using ‘-ese’ and ‘-nikka’ representing reason. To achieve this goal, we used two language models of ChatGPT. Employing the gpt-3.5-turbo-0301 and text-davinci-003 models, we generated 800 examples following up the given clauses marked by ‘-ese’, ‘-essese’, ‘-nikka’ and ‘-essunukka’ representing reason. The generated examples were analyzed as follows. The proportion of appropriate examples was 59.48% in the turbo-model and 56.75% in the davinci-model. Both models exhibited the lowest proportion of appropriate examples when the given clause was marked by ‘-essunikka’. Among the aptly-connected examples, declarative sentences were overwhelmingly the most common sentence type, and the modality of the main clause was often associated with the meanings of ‘impossibility’, ‘wish’, ‘obligation’ and ‘intention’ in both models. The two models showed different outcomes regarding the frequency of the past tense marker ‘-ess-’ in the main clause in conjunction with the type of the dependent clause.

Abstract

This study examines whether AI language models can aptly connect two clauses using ‘-ese’ and ‘-nikka’ representing reason. To achieve this goal, we used two language models of ChatGPT. Employing the gpt-3.5-turbo-0301 and text-davinci-003 models, we generated 800 examples following up the given clauses marked by ‘-ese’, ‘-essese’, ‘-nikka’ and ‘-essunukka’ representing reason. The generated examples were analyzed as follows. The proportion of appropriate examples was 59.48% in the turbo-model and 56.75% in the davinci-model. Both models exhibited the lowest proportion of appropriate examples when the given clause was marked by ‘-essunikka’. Among the aptly-connected examples, declarative sentences were overwhelmingly the most common sentence type, and the modality of the main clause was often associated with the meanings of ‘impossibility’, ‘wish’, ‘obligation’ and ‘intention’ in both models. The two models showed different outcomes regarding the frequency of the past tense marker ‘-ess-’ in the main clause in conjunction with the type of the dependent clause.

참고문헌 (52)

  1. 김수진, "한국어 학습자의 이유․원인 표현 사용 양상 연구", 석사, pp.2021
  2. 김정효, "한국어 학습자 말뭉치에 기반한 이유 표현 사용 양상 분석 - ‘-아", 어서’, ‘-(으)니까’, ‘-기 때문에’를 중심으로 -, 2023, pp.47, 81~116[DOI]
  3. 김중수, "‘-어서’와 결합한 시제 선어말 어미의 문법성과 교육적 함의", 문법 교육, 34, pp.27~57 (2018), 한국문법교육학회[DOI]
  4. 김지혜, "한국어 학습자의 이유 표현 오류 양상에 대한 연구", 한국어교육, 19(2), pp.193~214 (2008), 국제한국어교육학회[DOI]
  5. 김지혜, "한국어 이유 표현 교육 연구", 박사, 국어국문학, pp.2009
  6. 김차균, "{았}과 {었}의 의미와 상", 한글, 188, pp.3~64 (1985)
  7. 남기심, "현대국어 시제에 관한 문제", 국어국문학, 755-57, pp.95~117 (1972)
  8. 남기심, "국어의 통사 의미론" (1983), 탑출판사
  9. 남기심, "국어 문법의 탐구Ⅰ" (1996), 태학사
  10. 문숙영, "한국어 시제 범주 연구", 박사, 국어학, pp.2005
  11. 문숙영, "시제의 의미 및 사용과 관련된 몇 문제", 한국어학, 43, pp.1~27 (2009), 한국어학회
  12. 박민신, "의미 범주 기반 한국어 이유 표현 교육 연구", 박사, pp.2018
  13. 박재연, "문법 형식의 전경 의미와 배경 의미", 한국어 의미학, 22, pp.73~94 (2007), 한국어의미학회
  14. 박재연, "한국어 연결어미 의미 확장에서의 환유와 은유", 國語學, (70), pp.117~155 (2014), 국어학회[DOI]
  15. 박지용, "원인․이유의 연결어미 ‘-어서’와 ‘-니까’ 연구", 박사, pp.2020
  16. 백재파, "이유 표현 유사 문법 ‘-아", 어서’, ‘-(으)니까’, ‘-기 때문에’의 사용역 연구, 2020, pp.40, 183~208[DOI]
  17. 변정민, "인과관계 연결어미의 의미 기능 -‘-어서’와 ‘-니까’를 중심으로-", 한국언어문화학, 11(1), pp.23~42 (2014), 국제한국언어문화학회
  18. 서정수, "국어 시상형태의 의미 분석 연구-Ø, 고 있, 었, 었었", 문법연구, 3, pp.83~158 (1976)
  19. 성기철, "경험의 형태 ‘-었-’에 대하여", 문법연구, 1, pp.237~269 (1974)
  20. 신아영, "‘-어서’ 접속문에서의 ‘-었-’ 결합 양상 및 작용역", 겨레어문학, (63), pp.221~248 (2019), 겨레어문학회
  21. 윤평현, "현대국어 접속어미 연구" (2005), 박이정
  22. 이재성, "한국어의 시제와 상" (2001), 국학자료원
  23. 이정란, "한국어 학습자언어에 나타난 '-어서'와 '-니까'의 변이 연구", 석사, 한국학, pp.2004
  24. 이영준, "연결어미 ‘-아", 어서’와 시간 표현 사용 양상 분석 - ‘-았, 우리말글, pp.2018, 77[DOI]
  25. 이원표, "인과관계 접속표현 : 세 가지 의미영역과 일관성 성취", 언어, 24(1), pp.123~158 (1999)
  26. 이의종, "증거성과 정보 관할권의 상호작용", 석사, 국어국문학과 국어학전공, pp.2012
  27. 이지은, "외국어로서의 한국어 교육을 위한 범언어적 절 연결 의미 유형에 기초한 '-는데' 연구", 이중언어학, (71), pp.249~287 (2018), 이중언어학회[DOI]
  28. 임은하, "현대국어의 인과관계 접속어미 연구", 박사, 국어국문학, pp.2003
  29. 임채훈, "인과관계의 형성과정과 국어의 연결어미: ‘-어서’, ‘-니까’, ‘-면’, ‘-어도’, ‘-나’ 등을 중심으로", 담화․인지언어학회 학술대회 발표논문집, pp.151~164 (2006)
  30. 임홍빈, "한국어의 재구조화 1", 서울대학교 규장각한국학연구원 한국학연구원, ~ (2018)
  31. 장경희, "{-니까}의 의미와 그 해석 : {-어서}와 대비하여", 선청어문, 21, pp.337~367 (1993)
  32. 정수현, "이유, 원인을 나타내는 표현 연구-‘-었-+어서’ 표현을 중심으로-", 백록어문교육, 30, pp.157~178 (2022)
  33. 정해윤, "‘-었어서’ 접속문의 담화적 기능", 언어와 문화, 18(1), pp.331~352 (2022), 한국언어문화교육학회[DOI]
  34. 조은애, "인과관계 연결어미 ‘-어서’, ‘-니까’의 담화 문법 연구", 석사, pp.2016
  35. 최상진, "인과관계 형성의 인지과정과 연결어미의 상관성 - ‘-어서’, ‘-니까’, ‘-면’ 등을 중심으로", 國語學, (52), pp.127~152 (2008), 국어학회[DOI]
  36. 최성호, "‘었’의 의미와 통사", 한국어 의미학, 67, pp.121~163 (2020), 한국어의미학회[DOI]
  37. 최정진, "현대 한국어 선어말 어미의 시제성과 양태성", 박사, pp.2012
  38. 최정진, "선어말 어미 ‘-었-’의 의미와 시상체계 연구에의 시사점", 어문학, (148), pp.99~130 (2020), 한국어문학회[DOI]
  39. 한동완, "과거 시제 ‘었’의 통시론적 연구", 국어학, 15, pp.217~248 (1986)
  40. 황미향, "접속 어미 ‘-니까’의 통사와 의미", 국어교육연구, (57), pp.275~298 (2015), 국어교육학회(since1969)[DOI]
  41. Bender, E. M., "On the dangers of stochastic parrots : can language models be too big?", proceedings of the 2021 ACM conference on fairness, accountability, and transparency, pp.610~623 (2021)
  42. Christofaro, S., "Subordination" (2003), Oxford University Press
  43. Hengeveld, K., "Adverbial constructions in the languages of Europe", pp.335~419 (1998), Mouton de Gruyter
  44. 이지은, "The -Nuntey Clause: Non-RC Strategy to RC Meaning", Function, 2017, pp.42(4), 827~883[DOI]
  45. Oh, S. -S., "A multi-level semantic approach to Korean causal conjunctive suffixes-(e)se and-(u)nikka : A corpus-based analysis", International Journal of Corpus Linguistics, 10(4), pp.469~488 (2005)
  46. "Model index for researchers"[URL]
  47. Polak, M. P., "Extracting accurate materials data from research papers with conversational language models and prompt engineering-Example of ChatGPT", arXiv preprint arXiv:2303.05352, ~ (2023)
  48. Peng, K., "Towards making the most of ChatGPT for machine translation", SSRN Electronic Journal (2023)[DOI]
  49. Reiss, M. V., "Testing the reliability of ChatGPT for text annotation and classification : A cautionary remark", arXiv preprint arXiv:2304.11085, ~ (2023)
  50. Sohn, S. -O. S., "Speaker-oriented and event-oriented causals : A comparative analysis of –nikka and –ese", Korean linguistics, 7(1), pp.73~83 (1992)
  51. Sweetser, E, "From etymology to pragmatics" (1990), Cambridge University Press
  52. Wang, J., "Cross-lingual summarization via chatgpt", arXiv preprint arXiv:2302.14229, ~ (2023)

관련 논문AI추천

생성형 AI의 한국어 문맥 해석 연구 : 챗GPT의 접속 부사 해석을 중심으로박건숙한국정치사회연구소 · 한국과 국제사회2024 · 제8권 제6호The Interpretation of Korean Possibility Modal -ul-swu-iss by Humans and Large Language Models조정화한국언어과학회 · 언어과학2025 · 제32권 제1호생성형 AI의 문법적 능력에 대한 국어학적 연구 - 형태 통사적 특성을 중심으로 -남길임, 송현주, 안의정, 황은하한말연구학회 · 한말연구2024 · 제65권 제11호생성형 인공지능의 한국어 오류 인식 및 수정 성능 분석 - 통사 오류 판단 능력을 중심으로 -김재희한국문법교육학회 · 문법 교육2025 · 제54권 Cross-Linguistic Syntactic Parsing in GPT Models: Evidence from English and Korean AmbiguitiesJeonghwa Shin인지과학연구소 · Journal of Cognitive Science2025 · 제26권 제4호Exploring AI-Generated English Relative Clauses in Comparison to Human Production송상헌, 이은경, Hongoak Yun인지과학연구소 · Journal of Cognitive Science2023 · 제24권 제4호

이 간행물의 다른 논문 (12건)

한국인 EFL 대학생의 영어 에세이 장르에 따른 언어적 특성 비교분석류지수, 전문기, 최윤희pp. 1-26A feature-sharing analysis of interrogative constructions with negation in Korean배수영pp. 63-82현대중국어 환유로서 ‘手’의 사용과 의사소통 효과이범열pp. 83-104A case study of preservice English teachers’ online learning experience amid the COVID-19 pandemic최수정pp. 105-126Deictic linking and nominative Case unmarking in Korean박명관pp. 127-145
원문 보기