SCFI 지수 예측 모형의 성능 향상을 위한 텍스트 데이터 기반 문자열 가중치 추출 연구
A Study on Text-Based Weight Extraction for Enhanced SCFI Index Prediction
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
다양한 매체를 통해 생성되는 비정형 데이터는 많은 정보를 내포하고 있으며, 이에 대한 활용의 필요성이 증가하고 있다. 하지만 텍스트 데이터를 효과적으로 정량화하여 예측 모델의 성능을 향상시키는 연구는 많이 이루어지고 있지 않다. 이러한 문제를 해결하기 위해 텍스트 데이터에 포함된 영향도를 정량화하여 외부 변수로 활용할 수 있는 Noun-Frequency Link Frequency 방법론을 제안한다. 제안하는 방법론은 텍스트 데이터를 활용해 주간 키워드와 키워드의 상대적 영향도를 정량화된 수치의 형태로 추출하며, 이러한 정보를 반영하여, 상하이 컨테이너 운임 지수(SCFI) 예측 모델의 성능을 향상시키는 효과적인 방법론이라는 것을 검증하였다. 본 연구를 통해, 사회적, 심리적 영향을 미치는 이벤트가 텍스트 데이터에 등장하였을 때, 이러한 정보를 포착하고 예측 성능을 향상시킴과 동시에 등장하는 키워드들을 분석하여 해석 가능성을 높일 수 있다.
Abstract
The vast volume of unstructured data generated by various media sources presents significant opportunities for enhancing predictive models. However, there remains a notable gap in research on effectively quantifying text data to improve model performance. To address this issue, this study proposes the Noun-Frequency Link-Frequency (NFLF) methodology, which quantifies the influence embedded in text data and incorporates it as an external variable. The methodology extracts weekly keywords and their relative influence as measurable values from text data. Incorporating this data, the study demonstrates the effectiveness of the proposed approach in improving the forecasting performance of the Shanghai Containerized Freight Index (SCFI). The findings highlight the potential of leveraging text-encoded social information for predictive modeling in the shipping and logistics industry.
참고문헌 (20)
- 김주영, "텍스트 마이닝 기반의 온라인상품 리뷰 추출을 통한 목적별 맞춤화 정보도출 방법론 연구", 한국전자거래학회지, 21(2), pp.151~161 (2016)
- 임용택, "기업 리뷰 정보를 활용한 주가 방향 예측 모델 비교 분석", 한국융합학회논문지, 11(8), pp.165~171 (2020)
- 김명진, "SNS감성 분석을 이용한 주가 방향성 예측 : 네이버 주식토론방 데이터를 이용하여", 한국전자거래학회지, 25(4), pp.61~75 (2020)
- 김도희, "설명가능한 인공지능을 활용한 컨테이너 운임 예측 모형 연구", 해운물류연구, 39(2), pp.197~215 (2023)
- 김도희, "딥러닝을 활용한 건화물선 운임 지수 예측", 대한산업공학회, 45(2), pp.111~116 (2019)
- 이윤주, "SNS 텍스트 콘텐츠를활용한 오피니언마이닝 기반의 패션 트랜드 마케팅 예측 분석", 한국정보기술학회, 12(12), pp.163~170 (2014)
- 김동영, "SNS와 뉴스기사의감성분석과 기계학습을 이용한 주가예측 모형비교 연구", 13(3), pp.221~233 (2014)
- 이긍희, "뉴스 빅데이터를 이용한 경기 판단 : 빅카인즈 뉴스 경기지수의 개발", 통계연구, 22(2), pp.67~94 (2017)
- Surupendu Ganggopadhyay, "Text representation for direction prediction of share market", Expert Systems With Applications, 211, pp.118472~118486 (2023)
- 이성직, "TF-IDF의 변형을 이용한 전자뉴스에서의 키워드 추출 기법", 한국전자거래학회지, 14(4), pp.59~73 (2009)
- 노연우, "소셜 네트워크 환경에서 변형된 TF-IDF를 이용한 핫 토픽예측 기법", 정보과학회 컴퓨팅의 실제 논문지, 23(4), pp.217~225 (2017)
- "The PageRank Citation Ranking: Bringing Order to the Web", ~ (1998)
- Jun-Woo Jeon, "System Dynamics in the Predictive Analytics of Container Freight Rates", 55(4), pp.946~967 (2021)
- Jin Sung Rha, "Analysis of Factors Affecting Surge in Container Shipping Rates in the Era of Covid19 Using Text Analysis", 27(1), pp.111~123 (2022)
- 박성화, "뉴스 빅데이터를 이용한 해운뉴스지수 개발", 해양정책연구, 33(1), pp.281~301 (2018)
- 이상재, "컨테이너 운임 지수 예측 요인 연구 : 코로나19 이전과 이후 비교", 대한산업공학회 춘계공동학술대회 (2022)
- 전준우, "COVID-19 상황을 고려한 Shanghai Containerized Freight Index 예측", 해운물류연구, 37(3), pp.517~536 (2021)
- 최건우, "감성분석을 활용한컨테이너 시장 예측", 34(2), pp.273~287 (2019)
- Bin Weng, "Predicting shortterm stock prices using ensemble methods and online data sounrces", 112, pp.258~273 (2018)
- Hakan Gunduz, "Borsa Istanbul(BIST)daily prediction using financial news and balanced feature selection", 42, pp.9001~9011 (2015)