基于语音与三维数字人的智慧养老陪护系统产品系统

我要开发同款
叮咚2026年05月16日
5阅读

技术信息

作品详情

行业场景

我国老龄化加深,部分独居老人存在情感孤独、突发状况难以及时发现等问题;传统电话或单一监控难以提供自然对话式陪伴与结构化监护。本项目面向养老机构或家庭场景,通过适老交互界面与数字人形象,让老人用语音完成日常交流与娱乐,同时把交互与异常信号同步给家属与运营人员,形成「老人—家属—管理端」闭环。

功能介绍

老人端:适老大字 UI、按住说话/点按说话、WebSocket 实时通道、三维数字人(GLB)展示、语音驱动唇形与字幕、戏曲/老歌等点播意图、紧急关键词检测与告警状态。
家属端:登录、与老人关联的交互记录/时间轴类展示、紧急告警实时推送(WebSocket)。
管理端:老人与家属档案、运营配置、交互日志与统计、曲库等配置查询。
后端:REST 接口、老人会话 WebSocket、讯飞流式 ASR、大模型对话、TTS 下发 PCM、MySQL 持久化与 Flyway 迁移、定时健康提醒(若你已写进论文/已实现则写上)

项目实现

架构:前后端分离;多端共用同一 Spring Boot 服务(REST + WS);MySQL 存储档案与日志。
亮点:语音全链路(采集 → ASR → LLM → TTS → 前端播放)经 WebSocket 编排;老人端 Three.js 数字人 + 音频特征驱动口型;家属端告警推送。
难点:低延迟与稳定性、PCM/采样率与播放端一致、断线重连与多端联调、密钥与本地配置管理(不写进仓库)等。

示例图片

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论