영한 포스트에디팅과 인간 번역의 정확성 비교 - 정확성 오류 검증을 중심으로
Accuracy Errors Remaining Uncorrected in Post-edited Output
1
조회
0
다운로드
6
인용
0
참고문헌
키워드
초록
Machine translation (MT) output falls short of human translation (HT) in terms of accuracy and readability, despite continued technological advances in its field. Against this backdrop, significant attention has recently been directed toward machine translation post-editing (MTPE), where a text pre-translated by an MT engine is post-edited by a human translator to meet client needs. In this study, a text translated from English to Korean via MT was post-edited, and the post-edited output was analyzed to identify any errors that were not properly corrected. The accuracy of the post-editing process was then quantitatively analyzed against HT of the same text. The HT group was found to spend approximately 1.5 times more time on average compared to the MTPE group. The post-editing accuracy, i.e., the ratio of corrected errors to the total number of errors, tended to increase as more time was spent on the task. The average post-editing accuracy of the MTPE group was 39.6%, significantly lower than the translation accuracy of the HT group at 73.6%. This suggests that even trained individuals find it challenging to thoroughly identify and correct accuracy errors in densely packed, machine-translated technical texts.
Abstract
Machine translation (MT) output falls short of human translation (HT) in terms of accuracy and readability, despite continued technological advances in its field. Against this backdrop, significant attention has recently been directed toward machine translation post-editing (MTPE), where a text pre-translated by an MT engine is post-edited by a human translator to meet client needs. In this study, a text translated from English to Korean via MT was post-edited, and the post-edited output was analyzed to identify any errors that were not properly corrected. The accuracy of the post-editing process was then quantitatively analyzed against HT of the same text. The HT group was found to spend approximately 1.5 times more time on average compared to the MTPE group. The post-editing accuracy, i.e., the ratio of corrected errors to the total number of errors, tended to increase as more time was spent on the task. The average post-editing accuracy of the MTPE group was 39.6%, significantly lower than the translation accuracy of the HT group at 73.6%. This suggests that even trained individuals find it challenging to thoroughly identify and correct accuracy errors in densely packed, machine-translated technical texts.
참고문헌 (33)
- 곽중철, "포스트에디팅 측정지표를 통한 기계번역 오류 유형화 연구", 통번역학연구, 22(1), pp.1~25 (2018), 통번역연구소[DOI]
- 김순미, "번역학계와 언어서비스업체(LSP)간 산학협력연구: ‘포스트에디팅 생산성’과 ‘기계번역 엔진 성능 비교’", 번역학연구, 20(1), pp.41~76 (2019), 한국번역학회[DOI]
- 김순미, "번역 교육 지원 도구로서 기계번역(MT) 활용- 한영번역 포스트에디팅(MTPE) 수행에 대한 학습자 태도를 중심으로", 통번역학연구, 25(4), pp.51~80 (2021), 통번역연구소[DOI]
- 김은영, "AI기계번역을 활용한 외국어교육의 방향성- 포스트에디팅 수업 사례를 통해 -", 언어학연구, 26(1), pp.23~42 (2021), 한국언어연구학회
- 김자경, "포스트에디팅 결과물에 나타난 오류 고찰 - AI 학습용 한영 번역 말뭉치를 대상으로", 통번역학연구, 24(4), pp.35~62 (2020), 통번역연구소[DOI]
- 김자경, "포스트에디팅 결과물의 정확성 오류 고찰 —AI 학습용 금융", 증시 분야 한-영 번역 말뭉치를 대상으로—, 2021, pp.23(3), 29~57[DOI]
- 김자경, "한영 포스트에디팅 과정에서의 노력 탐색 - 시간, 기술적 노력, 검색을 중심으로", 통번역학연구, 26(2), pp.1~24 (2022), 통번역연구소[DOI]
- 김자경, "한영 포스트에디팅에서 정확성 오류의 수정 양상 고찰", 번역학연구, 23(5), pp.91~117 (2022), 한국번역학회[DOI]
- 노상도, "과학기술 문서작성, 발표와 커뮤니케이션" (2005), 시그마프레스
- 마승혜, "한영 기계번역 포스트 에디팅에 대한 경험적 고찰: 학부 교육 과정 및 결과를 중심으로", 통번역학연구, 22(1), pp.53~88 (2018), 통번역연구소[DOI]
- 박지영, "CAT을 접목한 통번역대학원 전문번역수업에 대한 학습자 반응 연구: 정치법률번역 과목을 중심으로", 인문사회 21, 13(4), pp.2375~2390 (2022), 인문사회 21
- 박혜선, "학부 교양영어 수업에서의 기계번역 포스트에디팅: 사용자 인식과 오류를 중심으로", 번역학연구, 24(1), pp.71~107 (2023), 한국번역학회[DOI]
- 서보현, "기계번역 결과물의 오류유형 고찰", 번역학연구, 19(1), pp.99~117 (2018), 한국번역학회[DOI]
- 서보현, "번역사의 번역교육 경험이 포스트에디팅 결과물의 품질에 미치는 영향에 관한 사례연구", 번역학연구, 21(3), pp.63~91 (2020), 한국번역학회[DOI]
- 신지선, "테크놀로지 패러다임에서의 번역능력 재조명", 통번역학연구, 21(4), pp.51~71 (2017), 통번역연구소[DOI]
- 윤미선, "영어-한국어 언어쌍에 적합한 포스트에디팅 가이드라인: 미래 포스트에디터를 위한 가이드라인과 그 실례", 번역학연구, 19(5), pp.43~76 (2018), 한국번역학회[DOI]
- 이상빈, "학부번역전공자의 기계번역 포스트에디팅, 무엇이 문제이고, 무엇을 가르쳐야 하는가?", 통역과 번역, 19(3), pp.37~64 (2017), 한국통역번역학회[DOI]
- 이상빈, "국내학부 번역전공자의 구글 기계번역 포스트에디팅 과정(process) 및 행위 연구", 번역학연구, 19(3), pp.259~286 (2018), 한국번역학회[DOI]
- 이상빈, "학부 번역전공자의 구글 기계번역 포스트에디팅에 관한 현상학 연구", 통번역학연구, 22(1), pp.117~143 (2018), 통번역연구소[DOI]
- 이승일, "AI번역의 속성 및 번역주체에 대한 논의", 통번역학연구, 22(4), pp.183~209 (2018), 통번역연구소[DOI]
- 이준호, "영한 포스트에디팅 생산성에 대한 고찰- 시간적 노력을 중심으로", 통번역학연구, 25(2), pp.55~83 (2021), 통번역연구소[DOI]
- 이준호, "한영 포스트에디팅, 누구나 수행할 수 있는가?: 포스트에디팅 수업 설계를 위한 예비 연구", 번역학연구, 22(1), pp.171~198 (2021), 한국번역학회[DOI]
- 이준호, "풀 포스트에디팅에 대한 고찰—풀 포스트에디팅 생산성에 영향을 주는 요소를 중심으로", 번역학연구, 23(5), pp.119~146 (2022), 한국번역학회[DOI]
- 진실희, "통역교육의 교육공학적 접근: CAIT 수업 설계를 위한 일 고찰", 통번역학연구, 21(2), pp.133~162 (2017), 통번역연구소[DOI]
- 진실희, "4차 혁명시대의 소프트웨어 융합 통번역교육 사례연구", 번역학연구, 20(4), pp.189~218 (2019), 한국번역학회[DOI]
- 최문선, "국내 번역학 기계번역 연구 동향:내용 분석과 키워드 분석을 중심으로", 언어학연구, 24(1), pp.275~297 (2019), 한국언어연구학회[DOI]
- 한승희, "기계번역 품질에 대한 요인분석", 통번역학연구, 25(2), pp.147~170 (2021), 통번역연구소[DOI]
- Arenas, G., "Correlations Between Productivity and Quality When Post-editing in a Professional Context", Machine Translation, 28(3-4), pp.165~186 (2014)
- Gaspari, F., "Perception vs reality: Measuring machine translation post-editing productivity", Proceedings of the Third Workshop on Post-Editing Technology and Practice, pp.60~72 (2014)
- Mitchell, L., "The potential and limits of lay post-editing in an online community", Proceedings of the 18th Annual Conference of the European Association for Machine Translation, pp.67~74 (2015)
- Temizoz, O., "Postediting machine translation output : subject-matter experts versus professional translators", Perspectives, 24(4), pp.646~665 (2016)
- Sycz-Opon, J., "Machine translation in the hands of trainee translators", Studies in Logic, Grammar and Rhetoric, 49(1), pp.195~212 (2017)
- Manning, A., "Sediment Transport: Processes and Their Modelling Applications" (2013), Intechopen