该项目面向听障儿童早期教育和特殊教育辅助训练场景,主要解决传统手语学习资源少、互动性不足、儿童练习后缺少即时反馈的问
题。系统通过摄像头识别、姿态关键点检测和动作评分,把手语学习从单向观看变成“学习、练习、识别、反馈”的闭环,帮助儿童在更
直观、更有趣的环境中掌握基础手语词汇。
点击空白处退出提示
该项目面向听障儿童早期教育和特殊教育辅助训练场景,主要解决传统手语学习资源少、互动性不足、儿童练习后缺少即时反馈的问
题。系统通过摄像头识别、姿态关键点检测和动作评分,把手语学习从单向观看变成“学习、练习、识别、反馈”的闭环,帮助儿童在更
直观、更有趣的环境中掌握基础手语词汇。
系统包含课程学习、分类词汇、自由练习、动作识别、练习评分、闯关测验、学习进度和可视化反馈等模块。用户可以选择家庭、动
物、日常用语等课程,查看标准手语示范,再通过摄像头进行跟练。系统会调用视觉识别算法捕捉手部和身体关键点,对比标准动作后
给出准确率、星级评分和纠错提示,同时记录学习进度,方便后续持续练习和辅导。
我主要负责系统界面、摄像头识别流程、手势评分逻辑和课程数据管理。项目使用 Python 开发,界面采用 PyQt6,视觉识别使用
OpenCV 和 MediaPipe,数据存储使用 SQLite/JSON,部分手势分类使用 Scikit-learn。实现难点在于摄像头实时采集、关键点稳定提
取、儿童动作与标准动作的相似度计算,以及练习反馈和课程进度的联动。







评论