본문 바로가기
KERD
논문KCI 등재

쇼핑 챗봇의 사용성 평가를 통한 오류 영역 별 디자인 개선 방안

Design Improvement Strategies for Error Areas through Usability Testing of Shopping Chatbots

2

조회

0

다운로드

1

인용

0

참고문헌

키워드

주제분류디자인

초록

다양한 쇼핑 앱에서는 소비자와 생산자를 연결해 주는 도구로서 챗봇을 활 용하고 있다. 도입 초기 사용자의 기대와 다르게 맥락에 맞지 않는 대화를 건네는 챗봇에 대한 불만족으로 이용률이 저조했지만, 최근 생성형 AI가 등 장할 정도로 자연어 처리 기술이 강화되면서 챗봇에 대한 기대감이 다시 높아지고 있다. 따라서 본 논문은 챗봇에 대한 높아진 기대감을 충족시키기 위해 쇼핑 앱 내 챗봇 활용 가이드를 제안한다. 챗봇의 핵심 기능을 파악하 기 위해, 자체 챗봇을 보유하고 있는 기존 쇼핑 앱의 서비스 정보 구조도를 제작하여 구매 단계를 전·중·후로 구분하여 기능들을 분류했다. 이후 핵심 기능을 중심으로 Task를 제작하여, 사용하는 과정의 실질적 문제점을 파악 하기 위해 1차 사용성 평가를 진행하였다. 그 결과 ‘기능 영역’, ‘기술 영 역’, ‘인터페이스 영역’, ‘프로세스 영역’으로 오류 영역을 유형화하였다. 개 선된 프로토타입을 제작하여 2차 사용성 평가를 통해 검증 후 가이드라인 을 제작하였다. 본 논문은 구매 전·중·후에 따른 오류 근원을 찾아 유형으로 분류하고 세부적인 쇼핑 앱 내 챗봇 활용 가이드 라인을 제안했다는 데 의 의가 있다.

Abstract

In various shopping apps, chatbots are being used as a tool to connect consumers and producers. Despite initial dissatisfaction due to chatbots providing conversations that don't fit the context as expected by early users, recent advancements in natural language processing technology, to the extent of the emergence of generative AI, have raised expectations for chatbots once again. Therefore, this paper proposes a guide for utilizing chatbots within shopping apps to meet these heightened expectations. To understand the core functions of chatbots, a service information structure of existing shopping apps on its chatbots was created, and the purchase process was divided into pre-purchase, mid-purchase, and post-purchase stages for the classification of features. Subsequently, tasks were created focusing on the core functions, and a first usability test was conducted to identify practical issues in the usage process. As a result, errors were categorized into 'functionality area,' 'technology area,' 'interface area,' and 'process area.' An improved prototype was developed and validated through a second usability test to create guidelines. This paper is significant in that it identifies the origins of errors based on pre-purchase, mid-purchase, and post-purchase, categorizes them by type, and proposes detailed guidelines for using chatbots within shopping apps.

참고문헌 (38)

  1. 강희주, "메신저 기반의 모바일 챗봇 서비스 사용자 경험 평가 –구(Allo)과 페이스북(M messenger)을 중심으로-", 한국융합학회논문지, 8(9), pp.271~276 (2017)
  2. 김병준, "태스크 디자인 방식이 크라우드소싱 기반의 학습데이터 수집결과에 미치는 영향 연구 - 대화형 에이전트 개발을 위한 자연어 학습데이터 수집을 중심으로 -", 디자인융복합연구(구.인포디자인이슈), 18(2), pp.1~24 (2019)
  3. 김옥경, "모바일 쇼핑의 챗봇(음성 기반", 메신저 기반)과 앱 서비스의 사용자 경험에 관한 융합적 연구, 2019, pp.37(2), 47~59
  4. 김태원, "챗GPT가 촉발한 생성형 AI 시대, 미래 모습과 대응 방안", FUTURE HORIZON, (55), pp.2~9 (2023)
  5. 김태하, "온라인 쇼핑몰 챗봇 사용자의 활용의도에 영향을 미치는 요인에 대한 실증 연구", 지식경영연구, 21(4), pp.211~225 (2020)
  6. 수원슈아이, "소셜미디어 문자형 챗봇의 특징이 이용자 사용의도에 미치는 영향", e-비즈니스연구, 23(5), pp.107~125 (2022)
  7. 박수홍, "온라인 쇼핑에서의 챗봇 서비스 품질이 고객의 충성도와 만족도에 미치는 영향에관한 연구", e-비즈니스연구, 24(3), pp.19~28 (2023)
  8. 박채림, "연속학습 기반의 대화형 AI agent", 한국컴퓨터정보학회논문지, 28(1), pp.27~38 (2023)
  9. 송유진, "쇼핑 챗봇에 대한 소비자 반응 연구 : 에이전트와 메시지 유형 효과를 중심으로", 한국HCI학회 논문지, 14(2), pp.71~81 (2019)[DOI]
  10. 임주형, "쇼핑 챗봇의 검색 및 추천 서비스 개선 제안", 디자인융복합연구(구.인포디자인이슈), 20(3), pp.85~101 (2021)
  11. 조국애, "금융 서비스 챗봇의 인터렉션 유형별 UX 평가", 한국HCI학회 논문지, 14(2), pp.61~69 (2019)[DOI]
  12. 최영림, "영어교육용 인공지능 서비스를 위한 비속어 대응 모듈 개발", 한국지능시스템학회 논문지, 31(3), pp.192~198 (2021)[DOI]
  13. 최지원, "전자상거래 애플리케이션의 사용성 평가 지표", 예술인문사회 융합 멀티미디어 논문지, 7(11), pp.117~126 (2017)
  14. Araujo, T., "Living up to the Chatbot hype : The influence of anthropomorphic design cues and communicative agency framing on conversational agent and company perceptions", Computers in Human Behavior, 85, pp.183~189 (2018)
  15. Ashktorab, Z., "Resilient chatbots: repair strategy preferences for conversational breakdowns", Proceedings of the 2019 CHI Conference on Human Factors in Computing Systems, pp.1~12 (2019)
  16. Lopez, C. M., "Ergonomic requirements for office work with visual display terminals (VDTs)", ~ (1998)
  17. Nass, C., "Computers are social actors", proceedings of the SIGCHI conference on human factors in computing systems, pp.72~78 (1994)
  18. 김보희, "고령자를 위한 헬스케어 대화형 에이전트 연구: 온보딩 시나리오를 중심으로", 한국HCI학회 학술대회, pp.653~659 (2021)
  19. 박정현, "리뷰 데이터 기반의 사용자 친화적인 호텔 추천 챗봇 시스템", 한국통신학회 학술대회논문집, 1, pp.419~411 (2024)
  20. 안진수, "생성형 AI 기반의 재난안전 대응 챗봇 구축에 관한 연구", 한국통신학회인공지능 학술대회 논문집, pp.318~320 (2023)
  21. 조찬영, "RAG기반 랭체인을 이용한 생성형 AI 챗봇 구현", Proceedings of KIIT Conference, pp.460~463 (2023)
  22. Ravi, K., "Frontiers of electronic commerce" (1996), Addison-Wesley Pub. Co
  23. 김수정, "챗봇 특성이 고객경험과 재사용의도에 미치는 영향", 석사, pp.2020
  24. 김은지, "모바일 쇼핑 환경 내 챗봇 기반 상품 검색 인터페이스의 사용자 경험 개선 연구", 석사, pp.2019
  25. 서지혜, "한국어 말하기 연습용 인공지능 챗봇의 내용 구성 방안 연구", 박사, pp.2022
  26. 여현주, "대형병원의 온라인 외래 진료 예약 시스템 개선 연구: 챗봇 서비스 중심으로", 석사, pp.2020
  27. 정광철, "고객 구매여정에서의 경험과정별 속성평가가 쇼핑접점 선택에 미치는 영향에 관한비교연구", 박사, pp.2022
  28. 조훈, "스마트 앱 TV 사용성 평가를 위한 평가요인에 관한 연구", 석사, pp.2015
  29. 하유진, "쇼핑 챗봇의 의인화 수준과 메시지 유형, 미디어 자기효능감이 구매의도에 미치는영향", 석사, pp.2021
  30. 황미경, "진료예약 상담 챗봇에 대한 경험 특성이 병원이미지에 미치는 영향", 박사, pp.2020
  31. GAO QI, "온라인 쇼핑몰에서의 챗봇의 특성이 만족도와 지속사용의도에 미치는 영향에 관한 연구", 석사, pp.2022
  32. "쇼핑 돕는 'AI 챗봇'…e커머스 특화 모델로 진화" (2023), 전자신문[URL]
  33. "사람과 대화하는 챗봇 기술, 어디까지 왔나" (2023), 브레인 미디어[URL]
  34. "SSG닷컴, '챗봇 서비스' 정식 도입…고객 소통 확대한다" (2019), 아이뉴스24[URL]
  35. "롯데쇼핑, AI 챗봇 서비스 '샬롯' 내달 종료" (2023), 조선비즈[URL]
  36. "Chatbot report 2019: global trends and analysis" (2019)[URL]
  37. "Why You Only Need to Test with 5 Users" (2003)[URL]
  38. "10 Usability Heuristics for User Interface Design" (1994)[URL]

관련 논문AI추천

이 간행물의 다른 논문 (7건)