A Design and Implementation of The Deep Learning-Based Senior Care Service Application Using AI Speaker
0
조회
0
다운로드
0
인용
0
참고문헌
키워드
초록
본 논문에서는 딥러닝 기반의 개인 맞춤형 실버세대 케어 서비스 애플리케이션을 설계하고 구현한다. 이 애플리케이션은 사용자의 편의성을 고려하여 STT(Speech to Text) 기술을 사용해 사용자의 발화를텍스트로 변환하고, 이를 Microsoft 사의 대화형 멀티 에이전트 거대 언어 모델인 Autogen의 입력으로사용한다. Autogen은 사용자와 ChatBot의 대화 데이터를 활용하여 상대방의 의도를 파악하여 답변에대하여 응답한다. 그리고 백엔드 에이전트를 활용하여 위시리스트, 공유 달력 그리고 보이스 클로닝을위한 딥러닝 모델을 통해 상대방의 목소리가 담긴 안부 메시지 기능을 제공한다. 또한, 애플리케이션은SKT 사의 인공지능 누구(NUGU) 스피커를 탑재하여 홈 IoT 서비스 기능을 제공한다. 이러한 기능을통해 제안하는 지능형 애플리케이션은 향후 미래 인공지능 기반의 실버세대 케어 기술에 기여할 것이다.
Abstract
In this paper, we propose a deep learning-based personalized senior care service application. The proposed application uses Speech to Text technology to convert the user's speech into text and uses it as input to Autogen, an interactive multi-agent large-scale language model developed by Microsoft, for user convenience. Autogen uses data from previous conversations between the senior and ChatBot to understand the other user's intent and respond to the response, and then uses a back-end agent to create a wish list, a shared calendar, and a greeting message with the other user's voice through a deep learning model for voice cloning. Additionally, the application can perform home IoT services with SKT's AI speaker (NUGU). The proposed application is expected to contribute to future AI-based senior care technology.
참고문헌 (15)
- Y. S. Lee, "AI-based Senior Care Service Development Case Analysis and Prospects", Journal of The Korea Contents Association, 12(2), pp.647~656 (2023)[DOI]
- H. S. Ham, "A Study on Non-Contact Care Robot System through Deep Learning", Journal of The Korea Society of Computer and Information, 28(12), pp.33~40 (2023)[DOI]
- J. M. Park, "Implementation of a Drug Information Retrieval System Through OCR API pErformance Comparison", Journal of The Korea institute of Information and Communication Engineering, 18(5), pp.1975~8170 (2023)[DOI]
- J. S. Kim, "Design of Monitoring System for Elders Living Environment", Proceedings of the Korea Society of Computer Information Conference, 30(2), pp.653~654 (2022)
- M. C. Park, "Implementation of a Real-Time Biometric Monitoring System for an Elderly Living Alone", Proceedings of the Korea Society of Computer Information Conference, 32(1), pp.255~256 (2024)
- T. H. Lee, "Contents Analysis of Mobile Applications for Caregivers of Community-Dwelling Older Adults : Focused on Korea", Journal of The Korea Contents Association, 22(11), pp.331~342 (2022)[DOI]
- Radford, Alec, "Robust speech recognition via large-scale weak supervision", International Conference on Machine Learning, 202, pp.28492~28518 (2023)
- J. H. Kim, "Glow-tts : A generative flow for text-to-speech via monotonic alignment search", Advances in Neural Information Processing Systems, 33, pp.8067~8077 (2020)
- J. G. Kong, "Hifi-gan : Generative adversarial networks for efficient and high fidelity speech synthesis", Advances in Neural Information Processing System, 33, pp.17022~17033 (2020)