WiseQA를 위한 정답유형 인식
Recognition of Answer Type for WiseQA
1
조회
0
다운로드
2
인용
0
참고문헌
키워드
초록
본 논문에서는 WiseQA 시스템에서 정답유형을 인식하기 위한 하이브리드 방법을 제안한다. 정답유형은 어휘정답유형과 의미정답유형으로 구분된다. 본 논문은 어휘정답유형 인식을 위해서 질문초점에 기반한 규칙모델과 순차적 레이블링에 기반한 기계학습모델을 제안한다. 의미정답유형 인식을 위해 다중클래스 분류에 기반한 기계학습모델과 어휘정답유형을 이용한 필터링 규칙을 소개한다. 어휘정답유형 인식성능은 F1-score 82.47%이고, 의미정답유형 인식성능은 정확률 77.13%이다. 어휘정답유형 인식성능은 IBM 왓슨과 비교하여, 정확률은1.0% 저조하고, 재현율은 7.4% 높다.
Abstract
In this paper, we propose a hybrid method for the recognition of answer types in the WiseQA system. The answer types are classified into two categories: the lexical answer type (LAT) and the semantic answer type (SAT). This paper proposes two models for the LAT detection. One is a rule-based model using question focuses. The other is a machine learning model based on sequence labeling. We also propose two models for the SAT classification. They are a machine learning model based on multiclass classification and a filtering-rule model based on the lexical answer type. The performance of the LAT detection and the SAT classification shows F1-score of 82.47% and precision of 77.13%, respectively. Compared with IBM Watson for the performance of the LAT, the precision is 1.0% lower and the recall is 7.4% higher.
참고문헌 (12)
- John Burger, "Issues, Tasks and Program Structures to Roadmap Research in Question & Answering (Q&A)", Document Understanding Conferences Roadmapping Documents (2001)
- FERRUCCI, David A., "Introduction to"this is watson", IBM Journal of Research and Development, 56(3), pp.1:1~1:15 (2012)
- Prager, J., "IBM's PIQUANT in TREC2003", TREC, pp.283~292 (2003)
- Chu-Carroll, J., "IBM's PIQUANT II in TREC 2004", TREC (2004)
- Dan Moldovan, "The Structure and Performance of an Open-Domain Question Answering System", Proceedings of the 38th Annual Meeting on Association for Computational Linguistics (2000)
- Pasca, Marius A., "High performance question", answering, 2001, ~[DOI]
- LALLY, Adam, "Question analysis: How Watson reads a clue", IBM Journal of Research and Development, 56(3), pp.2:1~2:14 (2012)
- 최호섭, "대규모 우리말 어휘지능망 구축 방법", 한글, (273), pp.125~151 (2006), 한글학회
- 윤애선, "한국어 어휘의미망 ｢KorLex 1.5｣의 구축", 정보과학회논문지 : 소프트웨어 및 응용, 36(1), pp.92~108 (2009), 한국정보과학회
- 이창기, "Structural SVMs 및 Pegasos 알고리즘을 이용한 한국어 개체명 인식", 인지과학, 21(4), pp.655~667 (2010), 한국인지과학회
- 허정, "오픈 도메인 질의응답을 위한 검색문서 제약 및 정답유형 분류기술", 정보과학회논문지 : 소프트웨어 및 응용, 39(2), pp.118~132 (2012), 한국정보과학회
- KALYANPUR, Aditya, "Fact-based question decomposition in DeepQA", IBM Journal of Research and Development, 56(3), pp.13:1~13:11 (2012)