코퍼스를 이용한 상하위어 추출 연구
A Study of the Automatic Extraction of Hypernyms and Hyponyms from the Corpus
2
조회
0
다운로드
2
인용
0
참고문헌
키워드
초록
본 논문에서는 코퍼스를 이용하여 어휘들의 상하위 관계 패턴들을 추출하는 방법을 제안한다. 기존 연구들에서는 어순 교체가 자유로운 한국어의 특성으로 인해 주로 사전의 정의문을 이용하여 어휘들의 의미관계 패턴들을 추출하는 방법을 취하고 있으나, 본 논문에서는 코퍼스를 이용하여 보다 다양한 의미관계 패턴들을 추출하여 제시하고자 한다. 이를 위해 먼저 기존의 사전들을 이용해 상하위어 쌍들의 목록을 선정하였다. 다음 이 목록의 어휘 쌍들을 포함하는 문장들을 코퍼스에서 추출한 이후, 이로부터 다시 체계적으로 패턴화 할 수 있는 문장들을 추출하여 21 가지 상하위 관계 패턴들로 일반화하였다. 21가지 패턴들을 정규식으로 표현한 뒤 각각 동일한 패턴들을 가진 문장들을 코퍼스에서 다시 추출한 결과 57%의 정확률이 측정되었다.
Abstract
The goal of this paper is to extract the hyponymy relation between words in the corpus. Adopting the basic algorithm of Hearst (1992), I propose a method of pattern-based extraction of semantic relations from the corpus. To this end, I set up a list of hypernym -hyponym pairs from Sejong Electronic Dictionary. This list is supplemented with the superordinate-subordinate terms of CoreNet. Then, I extracted all the sentences from the corpus that include hypernym-hyponym pairs of the list. From these extracted sentences, I collected all the sentences that contain meaningful constructions that occur systematically in the corpus. As a result, we could obtain 21 generalized patterns. Using the PERL program, we collected sentences of each of the 21 patterns. 57% of the sentences are turned out to have hyponymy relation. The proposed method in this paper is simpler and more advanced than that in Cederberg and Widdows (2003), in that using a word net or an electronic dictionary is generally considered to be efficient for information retrieval. The patterns extracted by this method are helpful when we look for appropriate documents during information retrieval, and they are used to expand the concept networks like ontologies or thesauruses. However, the word order of Korean is relatively free and it is difficult to capture various expressions of a fixed pattern. In the future, we should investigate more semantic relations than hyponymy, so that we can extract various patterns from the corpus.
참고문헌 (20)
- 김광해, "어휘소간의 의미 관계에 대한 재검토", 국어학, 20, pp.8~46 (1990)
- 윤평현, "국어 명사의 의미 관계에 대한 연구", 한국언어문학, 35, pp.91~115 (1995)
- 옥철영, "수식관계 구문에서 공기 제약 어휘간의 정보량 측정", 한글, 255, pp.129~154 (2002)
- 조평옥, "의미속성에 기반한 한국어 명사 의미 체계", 정보과학회 논문지, 26(4), pp.584~594 (1999)
- 최선화, "사전 정의문의 구문 패턴에 기반한 상위어 판별 규칙 학습", 박사, pp.2006
- 한국과학기술원 전문용어언어공학연구센터, "어휘의미망 구축론" (2004), KAIST PRESS
- 한정한, "한국어 동사 의미망 구축을 위한 어휘의미 관계 유형", 한국어학, 28, pp.245~268 (2005)
- 황도삼, "자연언어처리" (1999), 홍릉과학출판사
- Berland,M., "Finding parts in very large corpora, in Proceeding of the 37th Annual Meeting of the Association for Computational Linguistics (ACL 1999), 57-64, University of Maryland", ~ (1999)
- Cederberg, S, "Using LSA and Noun Coordination Information to Improve the Precision and Recall of Automatic Hyponymy Extraction, in Proc. of CoNLL-2003, 111-118", ~ (2003)
- Cruse, D. A., "Hyponymy and lexical hierarchies", Archivum Linguisticum, 6, pp.26~31 (1975)
- Cruse,D.A, "Lexical Semantics" (1986), University Press
- Fellbaum,C., "WordNet: An electronic Lexical Database" (1998), MIT Press
- Girju, R., "Learning semantic constraints for the automatic discovery of part-whole relations, in Proceedings of the 3rd Human Language Technology Conference", 4th Meeting of the North American Chapter of the Association for Computational Linguistics Conference (HLT-NAACL2003), 80-87, Canada, 2003
- Hearst,M.A., "Automatic Acquisition of Hyponyms from Large Text Corpora, in Proceedings of the Fourteenth International Conference on Computational Linguistics (COLING-92), 539-545", ~ (1992)
- Hearst, M. A, "Automated Discovery of WordNet Relations, in : WordNet: An Electronic Lexical Database", pp.131~151 (1998), An Electronic Lexical Database,131-151,MIT Press,Cambridge,MA.
- Jurafsky, D, "Speech and Language Processing" (2000), Prentice-Hall
- Miller, G. A, "Introduction to WordNet: An On-line Lexical Database", International Journal of Lexicography, 3, pp.235~244 (1990)
- Verginica B.M, "Automatic Extraction of Patterns Displaying Hyponym-Hypernym Co-Occurrence from Corpora, in Proceedings of First Central European Student Conference in Linguistics, Budapest, Hungary", ~ (2006)
- Winston, M. E., "A Taxonomy of Part-Whole Relations", Cognitive Science, 11, pp.417~444 (1987)