随着家庭摄像头和智能宠物用品的普及,养宠用户对自动化宠物内容有了强烈需求。传统方式需要用户手动翻看全天录像才能捕捉到宠物的有趣瞬间,耗时耗力。本项目旨在解决这一痛点,通过端侧AI能力自动提取宠物高光时刻,降低用户内容创作门槛,提升智能硬件产品的差异化体验。
点击空白处退出提示
随着家庭摄像头和智能宠物用品的普及,养宠用户对自动化宠物内容有了强烈需求。传统方式需要用户手动翻看全天录像才能捕捉到宠物的有趣瞬间,耗时耗力。本项目旨在解决这一痛点,通过端侧AI能力自动提取宠物高光时刻,降低用户内容创作门槛,提升智能硬件产品的差异化体验。
1. 宠物检测与区分:支持多宠物目标的实时检测,通过Re-ID技术对每只宠物进行独立ID标定与持续追踪。
2. 高质量区域识别:自动评估视频画面质量,智能筛选出构图清晰、姿态生动的最佳区域并进行裁剪。
3. 自动视频剪辑:汇总每日高光片段,自动配乐与转场,为每只宠物独立生成专属的每日精彩小视频。
4. 端侧部署与推理:算法轻量化并集成至边缘设备,在本地完成全流程推理,保障用户隐私同时确保实时响应。
负责从0到1的全流程开发,涵盖模型选型、数据模型训练及视频剪辑算法的设计与落地。
技术实现:采用轻量化检测主干网络,在特征提取层引入Re-ID模块实现多目标区分;针对端侧设备,运用模型量化与剪枝技术压缩模型体积,通过TensorRT加速实现边缘部署;视频剪辑算法基于高光评分机制,自适应截取并合成最终小视频。



评论