动作挑战类互动展品,依靠摄像头采集图像数据,使用AI识别人体肢体动作完成游戏 / 闯关挑战,用于科技馆、科普馆、文旅展厅、儿童体验馆。
点击空白处退出提示
动作挑战类互动展品,依靠摄像头采集图像数据,使用AI识别人体肢体动作完成游戏 / 闯关挑战,用于科技馆、科普馆、文旅展厅、儿童体验馆。
人体动作捕捉识别
识别人体骨骼、肢体姿态等动作;支持多人同时识别,区分不同参与者,识别动作反馈到屏幕画面。
挑战任务交互
设置闯关、计时等挑战模式;用户身体动作直接操控虚拟角色,不用手柄、触摸。
实时画面反馈
屏幕实时渲染游戏场景,叠加用户虚拟形象 / 骨骼轮廓,动作发生立刻给出画面响应,做到动作‑画面同步。
1、采用 Unity 2021 引擎开发,开发语言为 C#,整体程序在 Windows 系统环境下运行,实现展品交互画面渲染与业务逻辑控制。
2、借助 OpenCV 完成摄像头图像采集,完成图像变换、归一化等预处理操作,同时实现人体骨骼可视化显示,为姿态识别提供图像基础。
3、使用 C++ 编写 DLL 动态链接库,调用 OnnxRuntime SDK 加载骨骼识别模型,完成人体骨骼关键点的推理计算,将识别逻辑独立封装。
4、Unity 程序通过接口调用上述 DLL,获取解析后的肢体骨骼关键点数据,识别用户肢体动作姿态,驱动动作挑战相关交互业务。



评论