openCV

负责整套上位机软件开发，基于QTC++搭建客户端程序，设计复杂分层UI交互界面。采用TCP/UDP协议与下位机设备通信，通过多线程实现异步数据接收，解决大数据并发丢包问题；基于QCustomPlot开发实时波形图表，完成数万测点数据动态展示，集成历史数据存储、回放查询、超限数据分析功能；利用Open

●系统架构设计：主导构建模块化Agent架构，集成视频理解、行为分析、画像建模与LLM决策四大模块，支持实时流式处理与批量更新，系统日均处理视频50W+，用户行为日志2亿+条。●多模态：基于Qwen-VL实现视频帧语义分类，准确率达91.3%（Top-1）；融合YOLOv8（目标检测）、Whispe

（一）基础目标检测功能1.红绿灯状态识别：精准识别红灯、绿灯、黄灯、熄灭故障四种状态，区分机动车红绿灯、行人专属红绿灯，适配不同路口灯型样式。2.多目标精准检测：覆盖红绿灯有效管控区域内所有核心目标，包括机动车（轿车、货车、电动车、摩托车）、行人、非机动车，支持密集人群、车辆拥堵、逆光、弱光、雨天、

功能模块：本系统主要包括以下模块——三维场景展示与交互模块、视频流接入与管理模块、异常行为检测模块、告警信息定位与可视化模块、二维视频与三维模型融合投影模块、历史告警查询与统计模块。主要功能描述：三维场景展示：基于Cesium引擎加载工地倾斜摄影模型或手工建模数据，支持旋转、缩放、测量、图层切换等基

1、功能模块：系统主要包含四大核心模块。一是屏幕视觉感知模块，基于OpenCV和PyTorch实现桌面元素检测与识别；二是任务规划模块，结合大语言模型（LLM）进行任务拆解与决策；三是自动化执行模块，模拟鼠标点击、键盘输入、窗口切换等人机交互操作；四是结果校验模块，对执行结果进行自动验证与异常反馈。

项目包含七大核心功能模块：1.多模态交互模块，支持文本、图片、音视频混合输入识别与问答；2.自然语言处理模块，实现意图识别、文本摘要、语义抽取、对话管理；3.代码生成模块，支持多语言代码编写、调试、重构、项目批量生成；4.长文本理解模块，支持十万字级文档解析、知识库检索、长内容总结对比；5.数学推理

系统覆盖政策、企业、标书三域知识，支持8类业务问题的自然语言问答。核心功能包括：多路语义检索（BGEEmbedding+Milvus）、BM25关键词召回、RRF融合排序、BGEReranker精排、Qwen分层模型答题，以及自研ReActAgent多步推理。支持查询改写、意图路由、流式输出与引用溯

功能模块：系统由Windows屏幕推流、Linux视频源读取、目标球检测、目标锁定、准星偏移计算、鼠标控制策略、UDP通信、Windows鼠标桥接、自动点击保护、可视化调试和配置管理等模块组成。主要功能描述：Windows端实时采集主屏幕并生成HTTPMJPEG视频流，Ubuntu/Linux端使用

系统功能：1、由用户工艺工程师按工艺模板建立工艺执行清单。2、产品进入全自动化输送链前对产品产品编码，绑定对应工艺。3、系统根据产品编码，匹配对应工艺，发送机械人指令，执行生产。4、视觉识别检测产品完成表面品质情况。5、后台大数据系统记录监测产品生产全过程。

1.云图获取模块（downloader.py）：支持Mock模式和真实卫星API双模式切换。Mock模式用OpenCV生成红蓝半图+白云带的合成图像用于开发调试；真实模式通过requests从ZoomEarth/FY-4A等公开接口下载云图，内置指数退避重试（2^n秒）和HTTP4xx/5xx分类处

1、本地私有化AI交互内置Web可视化管理面板，接入通义千问、智谱AI等主流大模型API，所有对话、文件处理数据保存在本地电脑，不上传第三方服务器，保障文档、业务数据隐私安全。2、全流程电脑自动化执行支持自然语言指令操控本地电脑：批量读写Excel/Word文档、本地文件整理、浏览器自动爬取/导出数

1.自动监控本地发票文件夹的新增文件（PDF/图片格式）。2.自动精准提取发票代码、开票日期、价税合计金额等核心字段。3.根据提取的信息，自动将文件重命名并归档。4.将提取结果实时写入数据库及汇总Excel表格。

人脸采集与注册：管理人员通过摄像头采集人员人脸图像，上传至云端人脸库完成注册登记，支持批量导入与权限分组设置活体检测与识别：设备端实时采集人脸图像并进行活体检测，防止照片/视频冒用，与百度智能云人脸库比对完成身份核验门禁联动控制：识别通过后联动门禁系统开闸通行，识别失败触发异常报警，实时记录核验结果

目标实时检测：机载摄像头实时采集画面，YOLO模型对视野内的入侵无人机进行实时检测与识别，输出目标类别与置信度视觉追踪锁定：OpenCV追踪算法持续锁定检测到的目标，输出目标在图像中的实时像素坐标，确保目标始终处于追踪状态云台视觉伺服：树莓派将目标像素坐标通过串口下发至飞控，飞控驱动单轴云台动态调节

该系统是为配套硬件定制的一套包含硬件控制、用户管理、数据管理、图像检测、AI检测子系统等多功能于一体的软件系统。硬件控制模块通过以太网、串口、USB等方式实现与硬件控制单元的通讯，如PLC、X-Ray发射器、X-Ray成像控制器、异常执行机构等，从而实现对硬件设备的操控；用户管理模块实现了角色分配与

项目主要包括登录模块、读者模块、管理员模块和智能识别模块。登录模块实现用户账号验证和角色区分，支持读者与管理员进入不同功能界面。读者模块支持图书查询、分页浏览、图书借阅、图书归还以及借阅数量限制。管理员模块支持图书信息管理、馆藏数量维护、库存不足提醒、借阅数据统计和图表可视化展示。智能识别模块基于Y

系统主要包含模型加载、数据源选择、图片检测、视频检测、摄像头实时检测、检测参数调节、结果可视化、检测结果表格展示、场景分析、驾驶建议生成、语音播报和暂停问答等功能模块。用户可以分别加载交通标志识别模型和行人车辆识别模型，选择图片、视频或摄像头作为输入源，系统会自动绘制检测框、显示类别和置信度，并根据

系统包含四大核心模块：1.图像检测模块：基于YOLOv11s模型实现10类水稻害虫实时检测，mAP@0.5达0.8404；2.预警分析模块：集成CropFormer与规则引擎，对虫害等级进行智能评估并推送预警；3.农技咨询模块：本地部署DeepSeek-R1大模型，提供病虫害防治知识问答；4.后台管

-场景适配性强：深耕工业自动化行业，熟知工业设备运行逻辑、运动控制原理及工业软件使用痛点，开发的软件贴合工业现场实操需求，区别于普通民用软件，稳定性、专业性、适配性更高。-软硬件一体化服务：打破纯软件开发局限，兼顾软件开发与现场硬件联调能力，可同步解决软件代码问题与硬件适配、通讯联动问题，一站式解决

工作包含设备电气接线与上电点检、输送机构与气缸动作调试、运行参数整定；具备故障检测处理功能，可解决贴标位置偏差、机构动作异常、通讯中断等问题，完成线束整理防护、设备验收及后期维护工作。