한국어 자모 Viable Prefix를 이용한 외래어 표기 교정 기법
Transliteration Correction Method using Korean Alphabet Viable Prefix
0
조회
0
다운로드
2
인용
0
참고문헌
키워드
초록
한국어 문서에서 외래어 표기는 한 단어에 대해 한 개만 존재하는 것이 아니라 여러 개의 다른 표기로 사용되고 있다. 이러한 표기상 불일치는 하나의 단어가 다른 개념으로 인식되어 정보 검색 시스템의 성능 저하의 원인이 된다. 따라서 정보 검색 시스템에서는 다양한 외래어 표기에 대해 같은 개념으로 인식하여 검색할 수 있도록 외래어 표기법에 맞는 외래어 표기로 교정하는 전처리가 필요하다. 본 논문에서는 질의어로 외래어가 입력되면, 이를 근거로 외래어 표기법에 맞는 외래어 표기로 교정해주는 방법을 제안한다. 제안하는 기법은 한국어 자모의 viable prefix를 이용하여 후보 외래어 표기를 생성하는 가상 트리를 작성하고 불필요한 외래어를 가지치기함으로써 검색 정확도를 높이고 속도를 개선한다.
Abstract
In Korean documents, there are diverse spellings of transliterated foreign loanwords. This fact diminishes the performance of information retrieval systems in that a foreign word can be recognized differently, which is to say, as two or several different words. Thus, information retrieval systems require preprocessing to correct nonstandard loanword spellings prior to searching and recognizing corresponding equivalent words. This paper proposes a method that improves precision and processing efficiency using the Korean alphabet’s viable prefix, which prunes a virtual tree from which candidate loanwords are created.
참고문헌 (12)
- 강병주, "외국어 음차 표기의 음성적 유사도 비교 알고리즘", 정보과학회 논문지(B), 26(10), pp.1237~1246 (1999)
- 고숙현, "문맥을 고려한 유사 외래어 검출 알고리즘의 성능 향상", 한국정보과학회 언어공학연구회 학술발표 논문집, pp.114~121 (2007), 한국정보과학회
- 권순호, "한국어 자모 혼동행렬 기반 유사 외래어 표기 검출 기법", 한국정보처리학회 춘계학술발표대회 논문집, 17(10), pp.433~436 (2010), 한국정보처리학회
- 김민정, "언어적, 경험적 제약을 이용한 한국어 문자 인식 후처리 기법", 정보과학회논문지(B), 24(1), pp.25~31 (1997)
- 김지승, "입말 표기를 이용한 영어 단어 검색", 한국문헌정보학회지, 39(3), pp.93~103 (2005), 한국문헌정보학회
- 윤태진, "한글 자소정렬을 이용한 온라인 욕설 필터링 시스템", 한국정보과학회 학술발표논문집(C), 36(2), pp.194~198 (2009)
- 이재성, "효과적인 외래어 이형태 생성을 위한 확률 문맥 의존 치환 방법", 한국콘텐츠학회 논문지, 7(2), pp.73~83 (2007), 한국콘텐츠학회
- 정길순, "외래어와 영어처리를 통한 검색 효과 향상", 한국정보과학회 학술발표논문집, 24(2), pp.189~192 (1997)
- Christopher D. Manning, "Introduction to Infomation Retrieval", pp.58~59 (2008), Cambridge University Press
- Lawrence Phillips, "Hanging on the Metaphone", Computer Language, 7(12), pp.39~43 (1990)
- S. M. Chaware, "Phonetic Matching through Writing Style", International Conference and Workshop on Emerging Trends in Technology, pp.541~543 (2010)
- An Evaluation of Phonetic Spell Checkers, "Victoria J. Hodge", Department of Computer Science of the University of York, ~, pp.Technical Report YCS 338 (2001)