GB/T 36344 Data Quality System产品系统Vibe Coding

我要开发同款
proginn15412247152026年09月21日
2阅读

技术信息

语言技术
Python
系统类型
Web
行业分类
企业服务

作品详情

行业场景

针对中小企业、电商卖家及拟入表国企面临的业务数据格式冲突、重复下单、异常负数计价等脏数据痛点,以及无法通过第三方财务审计或无法直接喂入垂直大模型的卡点,构建轻量级合规数据清洗流水线。

功能介绍

1. 自动化异常侦测与隔离:支持百万级多源 CSV/Excel 订单数据自动化去重,严密拦截异常金额、非法枚举值与格式错乱数据;
2. 国家标准安全脱敏:严格遵循 GB/T 43697-2024 数据安全国标,对客户姓名与手机号实现掩码脱敏(格式统一为 138****5678);
3. 国标六维质量审计报告生成:自动化输出符合国家标准 GB/T 36344-2018 的数据资产质量评价报告(包含唯一性、完整性、规范性、准确性、一致性、时效性量化评分),可直接作为企业数据资产入表、第三方财务对账或大模型语料交付的合规审计底稿;
4. 零运维交付支持:随附 Windows 桌面一键双击批处理脚本(run.bat),支持非技术人员开箱即用。

项目实现

独立主导并完成端到端数据治理管道设计与脚本封装。底层基于 Python 原生轻量架构与正则引擎,不依赖复杂重量级大数据框架;输出层自动化构建 Markdown/HTML 交互式质量看板与脱敏干净数据集,实现交付周期从数天缩短至分钟级。

示例图片

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论