CUA-Lark 是一个用自然语言指挥 AI 自主操作飞书桌面客户端、自动完成测试任务的端到端 Agent 产品。用户在悬浮窗用一句中文描述任务（如"在测试群发一条 Hello World 并验证发送成功"），AI 像真实用户一样：看屏幕 → 思考下一步 → 操作鼠标键盘 → 自我验证结果。整个过程对用户实时可视化。
点击空白处退出提示
CUA-Lark产品系统Vibe Coding
我要开发同款技术信息
语言技术
Python、TypeScript、Node.js系统类型
Windows行业分类
人工智能开源地址
https://github.com/Jinhaooo/CUA-Lark授权协议
MIT许可
作品详情
行业场景
功能介绍
CUA-Lark 是一个 TypeScript monorepo，用于在飞书 / Lark 桌面客户端上跑计算机使用 (Computer Use) 智能体。智能体通过 VLM 感知屏幕、按 ReAct 循环规划下一步、用 NutJS 操作器实际控制鼠标键盘，并支持 UIA / OCR 作为定位降级链路。破坏性操作通过风险闸门人工确认后才执行。
项目实现
我负责项目的全部开发，包括前后端和Agent循环，使用的语言有python，typescript
示例图片
声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!
评论