본문 바로가기
KERD
논문KCI 등재

ChatGPT의 성능개선 및 검색기능 평가 - 회계분야 문제 해결 사례를 중심으로 -

The Evaluation of ChatGPT’s Improvement and Search Functionality† - Focusing on Accounting Cases -

0

조회

0

다운로드

0

인용

0

참고문헌

키워드

주제분류경영학

초록

[연구목적] 2022년 연말 인공지능 언어모델인 OpenAI의 ChatGPT가 처음 출시된 이후 새로운 버전의 모델이 계속 출시되고 있다. 또한 범용 인공지능 언어모델을 특수한 전문분야에 활용하려는 시도도 이루어지고 있다. 본 연구는 최신 인공지능 언어모델을 회계분야에 적용하고, ChatGPT 3.5 버전과 비교하여 개선된 최근모델의 문제해결 성능을 평가하였다. [연구방법] ChatGPT 3.5 버전을 회계분야 문제해결에 적용한 선행연구에서 보고한 한계점을 바탕으로 2024 년 8월 현재 최신 모델인 ChatGPT 4o의 성능 개선여부를 평가하였다. 특히 회계분야 문제해결 측면에서 최신인공지능 언어모델의 성능을 평가하였다. [연구결과] 최신 모델인 OpenAI의 ChatGPT 4o는 기존의 한계사항으로 지적되었던 후입선출방법을 적용한재고자산 원가 배분, 채권투자시의 유효이자율법을 적용한 회계처리, 간접법 방식의 영업활동현금흐름 도출, 간접비 배부에서의 단계배부법 및 상호배부법 등의 과제를 모두 올바르게 해결하는 것으로 나타났다. 다만, 인터넷 실시간 검색기능이 가능함에도 개정된 최신 세법을 적용하거나, 특정 기업의 최근 재무정보를 조회하는경우 불안정하거나 부정확한 답변을 제시하는 한계가 존재하였다. [연구의 시사점] 범용형 인공지능 모델의 성능이 개선됨에 따라, 회계분야의 문제 해결 성능도 함께 향상된것으로 나타났다. 회계 분야에 인공지능 모델을 활용하려는 다양한 시도와 함께 새로운 활용 가능성도 지속적으로 확대될 것으로 예상된다.

Abstract

[Purpose] OpenAI's ChatGPT was first introduced in late 2022. The company has been released new versions of the model with improvements. In addition, a wide range of attempts has been made to take advantage of generative AI models for specialized fields. This study uses the latest ChatGPT 4o and evaluates its performance, which has been improved since ChatGPT 3.5. [Methodology] Based on the limitations reported in previous studies using ChatGPT 3.5, this study evaluated whether the performance was improved by utilizing ChatGPT 4o, the latest model as of August 2024. In particular, the performance was evaluated with respect to the accounting area. [Findings] The OpenAI's ChatGPT 4o correctly solved issues such as cost allocation of inventory assets using the last-in, first-out method, accounting for bond investments using the effective interest rate method, determining cash flows from operating activities using the indirect method, and allocation of overhead expenses using the step method and reciprocal method. However, there were limitations in applying the latest revised tax laws or providing financial information of a specific company with the Internet search. [Implications] As the performance of general-purpose AI models has improved, the model will be applied to the accounting. It is expected that the application of AI model to various accounting fields will continue, which will open up new possibilities.

참고문헌 (18)

  1. 김경수, "유가와 주가 간의 동적 관계 추정", 경영과 정보연구, 42(4), pp.1~20 (2023)
  2. 김예진, "디지털 전환, 테크노스트레스, 업무 몰입 간 구조적 관계 분석", 경영과 정보연구, 43(2), pp.17~40 (2024)
  3. 박현재, "ChatGPT는 회계교육에 활용 가능한가? : 회계분야별 질문과 ChatGPT 답변을 중심으로", 상업교육연구, 38(1), pp.119~143 (2024)
  4. 안형준, "문화예술경영을 위한 ChatGPT 등 거대언어모형 기술의 활용 방안", 문화예술경영학연구, 16(2), pp.9~41 (2023)
  5. 윤경식, "ChatGPT를 활용한 부동산 마케팅에 관한 연구", 한국지적학회지, 40(1), pp.87~96 (2024)
  6. 윤양인, "인공지능 언어모델과 회계교육 : ChatGPT의 성능과 활용가능성을 중심으로", 전산회계연구, 21(1), pp.1~29 (2023)
  7. 윤양인, "ChatGPT 등 인공지능 모델 출현에 따른 원가관리회계 교육에서의 조화 가능성 탐색", 회계정보연구, 41(4), pp.43~78 (2023)
  8. 이호, "복합정보에 대한 국내 주식시장의 비대칭적 반응", 경영과 정보연구, 42(3), pp.97~110 (2023)
  9. 장혜지, "ChatGPT의 교육적 활용 관련 연구동향 및 주제 분석", 교과교육학연구, 27(4), pp.387~401 (2023)
  10. Choi, J., H., "Chatgpt goes to law school", Journal of Legal Education, 71(3), pp.387~400 (2022)
  11. Wood, D. A., "The ChatGPT Artificial Intelligence Chatbot : How Well Does It Answer Accounting Assessment Questions?", Issues in Accounting Education, 38(4), pp.1~28 (2023)
  12. Kung, T. H., "Performance of ChatGPT on USMLE : Potential for AI-assisted medical education using large language models", PLoS digital health, 2(2), pp.e0000198~ (2023)
  13. "Introducing ChatGPT" (2022)[URL]
  14. "com/papers/gpt-4" (2023)[URL]
  15. "Hello GPT-4o" (2024)[URL]
  16. Pope K. R, "Generative AI in Accounting Applications", Strategic Finance, 105(5), pp.29~36 (2023)
  17. Vasarhelyi, M. A., "Large language models : An emerging technology in accounting", Journal of emerging technologies in accounting, 20(2), pp.1~10 (2023)

관련 논문AI추천

이 간행물의 다른 논문 (9건)