문장 및 어절 유사도를 이용한 표절 탐지 시스템 구현
Implementation of A Plagiarism Detecting System with Sentence and Syntactic Word Similarities
2
조회
0
다운로드
3
인용
0
참고문헌
키워드
초록
기존 표절 탐지 시스템은 형태소 분석을 기반으로 공통 단어의 빈도수를 이용해 문서의 유사도를 측정한다. 그러나 주제가 같아 유사 단어가 많이 쓰인 경우, 문장 단위로 일부만 발췌 표절한 경우, 그리고 조사와 어미의 유사성이 있는 경우는 공통 단어의 빈도수만으로는 정확한 유사도를 측정하는데 한계가 있다. 따라서 본 논문에서는 공통 단어 빈도수 기반의 유사도 측정 외에 문장 유사도와 어절 유사도를 추가적으로 측정해 유사도의 정확성을 높일 수 있는 표절 탐지 시스템을 설계하고 구현하였다. 실험 결과, 문장 유사도를 측정함으로써 문장 단위로 표절이 이루어진 경우를 발견할 수 있었고, 어절 유사도를 추가로 측정함으로써 부분표절이 일어난 경우라도 조사나 어미까지 그대로 사용한 표절의 경우 등을 발견할 수 있었다.
Abstract
The similarity detecting method that is basically used in most plagiarism detecting systems is to use the frequency of shared words based on morphological analysis. However, this method has limitations on detecting accurate degree of similarity, especially when similar words concerning the same topics are used, sentences are partially separately excerpted, or postpositions and endings of words are similar. In order to overcome this problem, we have designed and implemented a plagiarism detecting system that provides more reliable similarity information by measuring sentence similarity and syntactic word similarity in addition to the conventional word similarity. We have carried out a comparison of on our system with a conventional system using only word similarity. The comparative experiment has shown that our system can detect plagiarized document that the conventional system can detect or cannot.
참고문헌 (12)
- Ministry of Education, "Instructions to Securing Research Ethics", ~ (2015)
- Jun, M. J, "Plagiarised Reports Detection System using Characteristcs of Korean Language and Local alignment Algorithm", Journal of KIISE, 31(02), pp.727~729 (2004)
- Seung-hee Yoo, "Similarity Measurement of Korean Documents using the Specified Particles and Major Keywords", Journal of Korea Multimedia Society, 2007(1), pp.0686~0688 (2007)
- Sang Wook Park, "Development of Document Plagiarism Detection Algorithm using Syntactic Analysis Method", The Korean Association of Computer Education, 17(1), pp.89~93 (2013)
- 고방원, "패턴매칭을 이용한 유사도 비교 분석", 한국컴퓨터정보학회논문지, 15(1), pp.185~192 (2010), 한국컴퓨터정보학회
- J. H. Choi, "A Method for Reducing Dictionary Access with Bidirectional Longest Match Strategy in Korean Morphological Analyzer", Journal of KIISE, 20(10), pp.1497~1507 (1993)
- Kang Seung-Shik, "Multi-level Morphological Analysis Model for Korean", Journal of KIISE, 1994(10), pp.140~145 (1994)
- Lee Mi-suk, "A copy detection system", Ph.D., pp.2005
- Won Ji Hur, "A Study on Improved Measurement of Similarity Between Documents", Journal of KIISE, 38(2), pp.122~124 (2011)
- Erik Hatcher, "Lucene in Action", pp.68~69 (2010)
- "Diquest Mariner2" (2018)[URL]
- Go Eun-byeol, "String and Sentence Similarity Measurement Methods Using Set-based POI Search Algorithm", Ph.D., pp.2014