行业背景
制造业数字化转型进入深水区,车间设备、生产管控、供应链、财务等多套业务系统长期独立运行,沉淀了海量异构数据,数据分散在各部门形成信息孤岛,核心指标统计规则不统一、跨部门数值对不上的问题普遍存在。
现存痛点
领导层做产能调度、成本优化决策时,需要花费大量时间协调各部门人工核对数据,不仅决策效率极低,还容易因为口径偏差出现误判,数据价值完全没有得到有效释放。
立项目的
搭建面向制造业的轻量数据中台,先完成全链路生产运营数据的标准化治理,基于维度建模搭建统一数仓,把所有核心经营指标的计算规则、统计口径全局统一,彻底解决“数出多门”的行业痛点。
核心价值
接入AI大模型实现自然语言智能问数,领导层无需依赖技术团队,直接用日常语言就能快速查询目标指标,还能顺着结果一键下钻,层层追溯到生产环节原始数据,快速定位问题根因,让数据真正成为支撑经营决策的可靠抓手。
以 Apache Doris 作为轻量级数仓底座,可以在不引入沉重组件栈的前提下,构建一个覆盖资产治理与智能消费的完整数据工作台。Doris 本身具备极致的压缩与计算性能,已有实践表明其可将服务器资源开销压缩至原有架构的三分之一左右。在此基础上叠加资产目录、质量检测、血缘与智能问数,轻量级数仓就能从“能存能算”走向“可治理、可消费”。
资产目录是治理的起点。平台采集 Doris 库表、字段、指标及 API 的元数据,按“指标口径—业务资产—API 资产”三条主线组织为可检索、可挂载的目录体系。指标口径层将业务定义、计算公式、统计粒度与 Doris 物理字段一一绑定,避免同名指标口径分叉;业务资产层对表、标签、主数据分类编目;API 资产层记录服务的输入输出、调用权限与版本,使数据从“库表资源”转变为“可定位、可申请、可审计”的资产条目。
数据质量检测以规则模板与闭环处置为核心。平台围绕完整性、准确性、一致性、唯一性、及时性等维度配置校验规则,支持空值、范围、字典、重复及自定义 SQL 校验,规则可复用为模板批量下发。检测任务可直接扫描 Doris 的 ODS/DWD/DWS/ADS 各层表,产出质量报告;一旦异常触发告警,结合血缘关系向上游定位问题来源,形成“检测—告警—定位—修复—复核”的闭环,而不是停留在“跑完规则、发条消息”。
数据血缘在 Doris 侧有原生支撑。Doris 从 DML 语句的 Nereids 分析计划中提取列级血缘,覆盖 JOIN、FILTER、GROUP BY、WINDOW、CASE WHEN 等依赖关系,并通过 LineagePlugin 将事件发送至外部治理系统。这意味着血缘反映的是实际执行的 SQL 逻辑,而非静态 DDL 的推测。在治理平台中,表级与列级血缘被组装为链路图谱,修改字段前可做影响分析,问题指标可反向溯源,血缘由此成为资
一、我负责的内容
需求设计:负责中台业务调研、需求梳理、流程设计、原型评审和需求拆解,明确智能问数、指标管理、数据服务等模块的功能边界、优先级和验收标准,把业务用数需求转化为可落地的技术方案。
项目架构:负责中台整体技术选型、系统分层、模块划分、数据模型设计、接口规范制定和关键链路设计,重点设计指标口径管理、智能问数语义解析、权限过滤、数据服务复用等核心能力,并考虑扩展性、稳定性和安全性。
项目搭建:负责工程初始化、目录规范、基础组件封装、开发环境与配置管理、日志与异常处理机制、接口文档和基础部署流程建设,为中台各模块并行迭代打好工程基础。
代码开发:承担全部核心业务代码开发,包括指标定义与计算、口径校验、智能问数查询解析、权限过滤、接口实现、数据处理、前后端联调、问题修复和上线支持,确保需求按计划高质量落地。
二、项目亮点
智能问数降低用数门槛:支持自然语言提问,自动识别指标、维度和过滤条件,结合权限体系生成查询并返回可视化结果,支持追问和多轮分析,让业务人员不写SQL也能快速取数,提升中台自助分析能力。
指标口径统一保障数据一致性:建立指标定义、计算逻辑、数据来源、统计维度、版本和血缘管理机制,统一指标出口和口径变更影响分析,避免同名不同义、重复计算和口径漂移,提升报表与分析结果的一致性。
中台能力模块化可复用:通过清晰分层、模块边界和接口规范降低耦合,将指标管理、智能问数、数据服务、权限控制等能力组件化,后续新增业务场景可复用基础能力,减少重复开发,提高中台扩展性和维护效率。
全流程独立交付与工程化保障:独立完成需求、架构、搭建和开发全流程,能快速在业务需求与技术实现间做权衡;搭建阶段统一代码规范、异常处理、日志记录和接口文档,开发中注重边界校验和异常兜底,保证项目按期上线并具备持续迭代能力。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态
评论