본문 바로가기
KERD
논문KCI 등재

정제된 의미정보와 시소러스를 이용한 동형이의어 분별 시스템

A Korean Homonym Disambiguation System Using Refined Semantic Information and Thesaurus

1

조회

0

다운로드

5

인용

0

참고문헌

키워드

주제분류컴퓨터학

초록

단어 의미 중의성 해소는 자연언어처리 분야에 매우 중요한 부분이다. 본 논문에서는 사전 뜻풀이 특성을 이용해 기존의 의미정보를 정제하고 유용한 정보인 확률정보, 거리정보 및 격정보 등을 추가한WSD 모델을 제안하였으며, 사전을 기반으로 구축된 “울산대학교 어휘 지능망(UOU-Word Intelligent Network:U-WIN)”상의 단어 계층적 구조(시소러스)를 이용하여 의미정보의 자료 부족 문제를 해소하는 모델을 제시하였다. “21세기 세종 계획”에서 제공하는 150만 어절 규모의 의미 태그 말뭉치를 대상으로 한 실험에서 최다 빈도 의미 결정(Maximum Frequence Class, MFC, 정확률 베이스라인)에 비해 18.87%(명사 21.73%, 동사 17.11%) 정확률 향상을 보였으며, 기존의 확률 가중치와 어절 거리 가중치를 이용한 모델에 비해서는 10.49%(명사 8.84%, 동사 11.51%)의 정확률 향상되었다. 또한 시소러스를 사용하지 않고 확률정보, 거리정보, 격정보 만을 이용한 모델에 비해 6.12%(명사 5.29%, 동사 6.64%) 높은 정확률을 보였다.

Abstract

Word Sense Disambiguation(WSD) is one of the most difficult problem in Korean information processing. We propose a WSD model with the capability to filter semantic information using the specific characteristics in dictionary definitions, and with added information, useful to sense determination, such as statistical, distance and case information. we propose a model, which can resolve the issues resulting from the scarcity of semantic information data, based on the word hierarchy system (thesaurus) developed by Ulsan Universty's UOU Word Intelligent Network, a dictionary-based lexicological database. Among the WSD models elaborated by this study, the one using statistical information, distance and case information along with the thesaurus (hereinafter referred to as "SDJ-X model") performed the best. In an experiment conducted on the sense-tagged corpus consisting of 1,500,000 eojeols, provided by the Sejong Project, the SDJ-X model recorded improvements over the maximum frequency word sense determination (maximum frequency determination, MFC, accuracy baseline) of 18.87% (21.73% for nouns, 17.11% for verbs). The results were superior in accuracy to the model using statistical and inter-eojeol distance weights by 10.49% (8.84% for nouns, 11.51% for verbs). Finally, the accuracy level of the SDJ-X model was higher than that recorded by the model using only statistical information, distance and case information, without the thesaurus by a margin of 6.12% (5.29%for nouns, 6.64% for verbs).

참고문헌 (14)

  1. 백대호, "분류 정보를 이용한 단어 의미 중의성 해결", 24(7), pp.779~789 (1997)
  2. 이승우, "국소 문맥과 공기 정보를 이용한 비교사 학습 방식의 명사 의미 중의성 해소", 27(7), pp.769~782 (2000)
  3. Yaacov, "Disambiguation by short contexts", pp.147~158 (1985)
  4. 김준수, "가중치를 이용한 통계 기반 동형이의어 분별 모델 소프트웨어 및 응용", 30(11), pp.1112~1123 (2003)
  5. 허정, "사전의 뜻풀이말에서 추출한 의미정보에 기반한 동형이의어 중의성 해결 시스템 소프트웨어 및 응용", 28(9), pp.688~698 (2001)
  6. 조평옥, "사전 뜻풀이말에서 구축한 한국어 명사 의미계층구조", 10(4) (1999)
  7. 이재윤, "단어 동시출현 기반 질의확장의 성능 최적화에 관한 연구" (2003)
  8. Kenneth ward Church, "Word association norms, mutual information, and lexicography", 16(1), pp.22~29 (1990)
  9. 김준수, "상호정보량을 이용한 동형이의어 분별용 의미정보의 정제", 29(1), pp.460~462 (2002)
  10. 나동렬, "한국어 파싱에 대한 고찰", 12(8), pp.33~46 (1992)
  11. 박성배, "문장 분할을 이용한 한국어 분석" (1996)
  12. 조정미, "코퍼스와 사전을 이용한 동사 의미 분별" (1998)
  13. 임지룡, "다의어 인지적 의미 특성", 18, pp.229~261 (1997)
  14. 최경봉, "단어 의미의 구성과 의미 확장 원리-다의어 문제를 중심으로", pp.307~331 (1999)

관련 논문AI추천

이 간행물의 다른 논문 (14건)