역사 자료 어휘 분석기를 위한 어휘부 개발 방법
Lexicon Development Methods for Lexical Analyser of Historical Text
0
조회
0
다운로드
4
인용
0
참고문헌
키워드
초록
This paper explores some methods and techniques for structuring and acquiring lexical resources from corpus and diachronic knowledge for lexical analyser of historical text. Firstly, we consider the lexicon as a component of lexical analyser and playing a key role in the analyser. Secondly, we see the problem of correcting the annotated historical text corpus. Thirdly, we investigate and design the lexicon with affix features and stem features which are required to analyze words into morphological units. Besides, in this phase we consider Korean diachronic information and corpus quantitative information. Fourthly, we consider the methods for acquiring and estimating variable spellings of a lexical token. Finally, we can look forward to being able to take the lexicon with diachronic information as the resource for secondly created historical digital contents. All in all, this paper shows the methods for acquiring lexicon from data with quantitative and qualitative ways and the usage as a digital content with this lexicon.
Abstract
This paper explores some methods and techniques for structuring and acquiring lexical resources from corpus and diachronic knowledge for lexical analyser of historical text. Firstly, we consider the lexicon as a component of lexical analyser and playing a key role in the analyser. Secondly, we see the problem of correcting the annotated historical text corpus. Thirdly, we investigate and design the lexicon with affix features and stem features which are required to analyze words into morphological units. Besides, in this phase we consider Korean diachronic information and corpus quantitative information. Fourthly, we consider the methods for acquiring and estimating variable spellings of a lexical token. Finally, we can look forward to being able to take the lexicon with diachronic information as the resource for secondly created historical digital contents. All in all, this paper shows the methods for acquiring lexicon from data with quantitative and qualitative ways and the usage as a digital content with this lexicon.
참고문헌 (28)
- 강미영, "한국어 형태·통사적 특징을 고려한 범주 기반 가변 n-gram 품사 태깅 모델", 박사, 컴퓨터공학, pp.2007
- 강승식, "한국어 형태소 분석과 정보 검색" (2002), 흥릉과학출판사
- 고창수, "자질연산문법이론" (2002), 월인
- 국립국어연구원, "세종 역사자료 말뭉치 구축 지침", ~ (2011)
- 김성규, "15세기 국어와 표준어의 음운론적 유사도 측정 시론", 國語學, (75), pp.3~37 (2015), 국어학회[DOI]
- 김승곤, "국어 조사의 어원과 변천 연구" (2014), 글모아편찬
- 김진규, "어절 형성 전이도와 HMM을 이용한 북한 문화어 품사 태깅 시스템", 석사, 언어공학, pp.2004
- 김진해, "歷史資料 형태분석 프로그램 개발의 國語學的 意義와 活用 硏究 －活字本 古小說을 중심으로－", 어문연구(語文硏究), 37(4), pp.137~162 (2009), 한국어문교육연구회[DOI]
- 김진해, "활자본 고소설 말뭉치 구축의 국어정보학적 의의 - 형태 분석 및 통합 검색 시스템 구축을 중심으로", 국어국문학, (149), pp.69~107 (2008), 국어국문학회[DOI]
- 노강호, "음소의 분류 체계를 이용한 한글 편집 거리 알고리즘", 정보과학회논문지 : 시스템 및 이론, 37(6), pp.323~329 (2010), 한국정보과학회
- 목정수, "한국어 통사론에서의 융합의 길 - 조사와 어미의 신질서를 찾아서", 국어국문학, (170), pp.71~116 (2015), 국어국문학회
- 박용찬, "중세국어 연결어미와 보조사의 통합형" (2008), 태학사
- 박진영, "번안 소설어 사전" (2008), 현실문화
- 신중진, "개화기 한글자료 말뭉치의 구축 방안", 관악어문연구, 29, pp.261~283 (2004)
- 신중진, "개화기국어의 명사 어휘 연구" (2007), 태학사
- 李相浩, "미등록어를 고려한 한국어 품사 태깅 시스템 구현", 석사, 전산학, pp.1995
- 이희자, "텍스트 분석적 국어 어미의 연구" (1999), 한국문화사
- 임동훈, "한국어 조사의 하위 부류와 결합 유형", 國語學, (43), pp.119~154 (2004), 국어학회
- 조은경, "세종전자사전 활용을 위한 자연어 생성적 접근 - 어휘문법적 미시 구조의 격자 형식화를 통해 -", 한글, (311), pp.197~226 (2016), 한글학회
- 홍윤표, "근대국어의 국어사적 성격", 국어사연구, (9), pp.153~172 (2009), 국어사학회
- 홍윤표, "국어정보학" (2012), 태학사
- Jurafsky, D., "Speech and Language Processing" (2009), Pearson Education
- Frank Van Eynde, "Lexicon Development for Speech and Language Processing" (2000), Kluwer Academic Publishers
- Karttunen, L., "KIMMO : a general morphological processor", Texas Linguistic Forum, 22, pp.163~186 (1983)
- Koskenniemi, K., "Two-Level Model for Morphological Analysis", International Joint Conference on Artificial Intelligence, 83, pp.683~685 (1983)
- Piotrowski, M., "Natural Language Processing for Historical Texts" (2012), Morgan & Claypool
- Sproat, R. W., "Morphology and Computation" (1992), MIT Press
- Sweetnam, M. S., "Natural language processing and early-modern dirty data : applying IBM Languageware to the 1641 depositions", Literary and linguistic computing, 27(1), pp.39~54 (2011)