본문 바로가기
KERD
논문KCI 등재

정렬기법을 이용한 미등록 대역어의 자동 추출

Automatically Extracting Unknown Translations Using Phrase Alignment

김재훈|양성일
한국정보처리학회|2007.06|정보처리학회 논문지 (The Transactions of the Korea Information Processing Society)|제14권 제3호|pp. 231-240

2

조회

0

다운로드

1

인용

0

참고문헌

키워드

병렬말뭉치Parallel Corpus사전 구축Dictionary Construction미등록 대역어정렬모델Unknown TranslationAlignment Model
주제분류컴퓨터학

초록

이 논문은 정렬 기법을 이용한 미등록 대역어 추출 모델을 제안하고 그 추출 시스템을 구현한다. 제안된 미등록 대역어 추출 모델은 일종의 구절정렬 모델로서 경계모델과 언어모델 그리고 번역 모델로 구성된다. 제안된 추출 시스템은 병렬말뭉치 구축, 단어정렬, 미등록어 추출로 구성된다. 이 논문에서는 제안된 시스템을 평가하기 위해서 약 1,500여 개의 미등록어가 포함된 2,220문장의 평가말뭉치를 구축하여 다양한 실험을 수행하였다. 실험을 통해서 제안된 모델이 미등록 대역어 추출에 매우 유용함을 알 수 있었다. 앞으로 좀 더 객관적인 평가를 위해 대량의 평가말뭉치 구축이 선행되어야 하며 좀 더 양질의 병렬말뭉치의 구축이 필요할 것이다. 또한 미등록어 추출 모델을 개선하기 다양한 연구가 추진되어야 할 것이다.

Abstract

In this paper, we propose an automatic extraction model for unknown translations and implement an unknown translation extraction system using the proposed model. The proposed model as a phrase-alignment model is incorporated with three models: a phrase-boundary model, a language model, and a translation model. Using the proposed model we implement the system for extracting unknown translations, which consists of three parts: construction of parallel corpora, alignment of Korean and English words, extraction of unknown translations. To evaluate the performance of the proposed system, we have established the reference corpus for extracting unknown translation, which comprises of 2,220 parallel sentences including about 1,500 unknown translations. Through several experiments, we have observed that the proposed model is very useful for extracting unknown translations. In the future, researches on objective evaluation and establishment of parallel corpora with good quality should be performed and studies on improving the performance of unknown translation extraction should be kept up.

참고문헌 (30)

  1. "An Introduction to Machine Translation" (1992), Academic Press Limited
  2. "BLEU: A Method for Automatic Evaluation of Machine Translation" (2001)
  3. "NIST 2006 Machine Translation Evaluation Official Results" (2006)
  4. "Eassys on Terminology" (1997), John Benjamins
  5. "Interpreting Unknown Words in Machine Translation from Hindi to English", pp.278~282 (2005)
  6. "한-일 기계번역 시스템의 관용구 및 미등록어 처리 알고리즘", pp.201~204 (1991)
  7. "Foundation of Statistical Natural Language Processing" (1999), The MIT Press
  8. "The web as a parallel corpus", 29(3), pp.349~380 (2003)
  9. "Introduction to the Special Issue on the Web as Corpus", 29(3), pp.333~347 (2003)
  10. "A program for aligning sentences in bilingual corpora", 19, pp.75~102 (1993)
  11. "The mathematics of statistical machine translation", 19, pp.263~311 (1993)
  12. "Translating collocations for bilingual lexicons: A statistical approach", 22(1), pp.1~38 (1996)
  13. "An unsupervised method for word sense tagging using parallel corpora: A preliminary investigation" (2000), Association for Computational Linguistics
  14. "An efficient phrase-to-phrase alignment model for arbitrarily long phrase and large corpora", pp.294~301 (2005)
  15. "The alignment template approach to statistical machine translation", 30(4), pp.417~449 (2004)
  16. "Stochastic inversion transduction grammars and bilingual parsing of parallel corpora", 23(3), pp.377~403 (1997)
  17. "A syntax-based statistical translation model", pp.523~530 (2001)
  18. "Dependency-based phrase alignment", pp.1290~1293 (2006)
  19. "Identifying word correspondence in parallel text Proceedings of the workshop on Speech and Natural Language", pp.152~157 (1991)
  20. "A new approach for aligning parallel texts Proceedings of COLING 94", pp.1096~1102 (1994)
  21. "Multilingual domain modeling in Twenty-One: automatic creation of a bi-directional translation lexicon from a parallel corpus", pp.41~58 (1998)
  22. "A statistical view of bilingual lexicon extraction: From parallel corpora to nonparallel corpora", pp.1~16 (1998)
  23. "Identifying Word Translation in Parallel Corpora Using Measures of Association" (2002)
  24. "Noun Phrase Translation" (2003)
  25. "Improved statistical machine translation using paraphrases", pp.17~24 (2006)
  26. "A Korean syntactic parser customized for Korean-English patent MT system", pp.44~55 (2006)
  27. "웹 문서로부터 한영 병렬말뭉치의 자동 구축", 13(2), pp.161~164 (2006)
  28. "한영 명사구 기계 번역", pp.273~278 (2006)
  29. "SRILM-An extensible language modeling toolkit", 2, pp.901~904 (2002)
  30. "An ngram-based statistical machine translation decoder", pp.3193~3196 (2005)

관련 논문AI추천

단어 단위의 추정 정렬을 통한 영-한 대역어의 자동 추출이공주한국정보처리학회 · 정보처리학회 논문지2013 · 제2권 제6호이중 언어 기반 패러프레이즈 추출을 위한 피봇 차별화 방법김민정, 이형규, 임해창, 박에스더한국인지과학회 · 인지과학2011 · 제22권 제1호번역 말뭉치로부터 추출한 어휘 번역 패턴의 의미 분류와 자동번역시스템에의 활용김영길, 최승권한국번역학회 · 번역학연구2010 · 제11권 제3호MOSES를 이용한 한/일 양방향 통계기반 자동 번역 시스템김지은, 이공주, 이성욱한국마린엔지니어링학회 · 한국마린엔지니어링학회지2012 · 제36권 제5호Bilingual Multiword Expression Alignment by Constituent-Based Similarity Score권홍석, 김재훈, 서형원, 천민아한국정보처리학회 · JIPS(Journal of Information Processing Systems)2016 · 제12권 제3호영한 번역 메모리의 구조화 연구김영길, 최승권한국번역학회 · 번역학연구2009 · 제10권 제3호

이 간행물의 다른 논문 (9건)

적응형 채도 향상 알고리즘을 이용한 컬러 영상 처리 기법최명렬, 양경옥, 조화현, 윤종호pp. 145-152얼굴의 형태학적 관계 분석에 의한 사상 체질 분류 시스템이세환, 조동욱, 김봉현pp. 153-162순차영상에서 투영변환과 KLT추적을 이용한 이동 카메라의 위치 및 방향 산출장효종, 김계영, 차정희pp. 163-170수정된 캐니 에지 맵으로부터 만들어진 LOD 에지 맵을 이용한 물체 추적 및 소거이종관, 박지헌, 함미옥, 장영대, 이동훈pp. 171-182사용자 주도 폼 다이얼로그 시스템의 VoiceXML 어플리케이션에 관한 연구노용완, 이현구, 홍광석, 권형준pp. 183-190
원문 보기