1.项目主要是为了展示机器人的各个系统的工作的信息以及流程。
项目分为视觉意图, 近场感知, 语音唤醒, 知识库, 任务理解, 行为树这几个部分。
视觉意图:实时展示机器人前面的视觉信息
近场感知:通过对mqtt接受机器人附近的人的信息。通过比例缩小的形式展示在系统中
语音唤醒:当有人唤醒机器人的时候,展示人的位置,和相对于机器人的方位。
知识库: 3D形式展示机器人目前理解的各种物体之间的关系。
任务理解: 有人对机器人发出指令后,机器人理解的意思。
行为树: 当任务发出之后, 机器人任务识别以及执行的流程。
2. 项目为独立完成。 主要用了vue3框架,直播视频流使用了flv.js ,行为树使用了antvG6, 知识库使用3dGraph库。