1、立项原因:工业设计与装备制造领域的技术资料以 TB 级、持续增长的散装文件形式沉淀在各处(PDF、DOC、XLSX、图纸、扫描件),查一个参数要人工翻几十分钟甚至几小时,老工程师的经验带不走、新人上手慢;而通用大模型联网使用又存在数据外泄风险。因此立项做一套「检索精准、答案可溯源、全离线」的知识问答系统,解决技术文档查不到、查不准、不敢用的产品问题。
2、面向装备制造、工业自动化与工业设计院所,语料是设备技术手册、设计图纸、技术协议、试验报告、规范标准与 Excel 明细表;中英混合,60% 以上为扫描件,含大量跨页表格与图纸标注,章节结构不规范,目录页、页眉页脚与正文混杂,通用 RAG 直接切块即失真
3、设计人员与调试工程师在选型、参数核对、故障排查、查规范条款时用自然语言直接提问(如「雷赛 L5P-S 的 CN1 接口 11 号引脚是什么信号」「SMC SY3000 记号 C4 的接管口径」),答案分段给出,每条标注来源文件名与页码/Sheet/可朔源查看相关图片,可沿引用回到原文档核对
①文档解析与入库模块(多格式解析、OCR、分块、索引写入);
②入库任务与增量窗口模块;
③文件中心(文件清单、详情、原文预览、重跑解析、删除);
④混合检索模块(向量+稀疏+BM25 三路召回、重排、门槛过滤);
⑤问答服务模块(流式生成、引用溯源、追问改写、会话历史、点赞点踩、推荐追问);
⑥检索分析模块(金标测试集管理、批量跑批、逐案下钻、智能造题);
⑦审计中心(全链路问答审计与命中回溯、CSV 导出);
⑧系统监控(资源趋势、服务健康、GPU 实例、入库窗口);
⑨系统设置(连接信息、模型参数、提示词热更新与试连检测);
⑩用户与权限管理(超管/管理员/普通用户三角色、菜单级授权、登录验证码);
⑪离线部署(Docker Compose 一键起停、离线镜像包)。
1、立项与需求口径(TB 级工业资料、60%+ 扫描件、100 人在线、数据不出机器)、技术选型、解析分块质量攻关、检索参数按实测定口径、前端交互验收、x86架构到GB10 离线迁移,以及自动化测试与浏览器探针的质量体系。
2、FastAPI + Vue 3,Milvus 三路检索(dense/sparse/BM25 + RRF)、bge-m3 向量化、bge-reranker 重排、PaddleOCR PP-StructureV3 解析扫描件、vLLM 跑 Qwen3.6-35B-A3B-NVFP4多模态、支持图片、PostgreSQL/Redis 存审计与缓存;多容器分层,embed/rerank/ocr 独立成服务各自上报显存,全离线 docker load 复现。
3、①引用可溯源——每块带文件名、页码/Sheet、章节路径、以及相关的图片,答案逐句标注出处,点开可看命中原文,历史轮次按 trace_id 回查不重跑检索;②表格专项——整表不拆、跨页合并、合并单元格还原、按行/列守住 token 上限,问整表时自动放宽窗口整表返回;③按实测定参而非拍脑袋——金标召回做验证(同文件限块 4→8,Recall@10 从 0.708 提到 0.778),每轮问答记四段耗时与命中块,显存做治理(embedding 峰值 6.1 GB→3.0 GB,OCR 限 0.55 占用并空闲归还)。
4、主要难点:60% 扫描件的版面与表格还原是质量瓶颈,20 余类缺陷逐类定位;单卡显存下 KV 池直接决定并发路数;召回好坏无法凭直觉判断,只能靠金标集加逐案下钻归因。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论