数据处理中台产品系统

我要开发同款
牛背了猪啊2026年03月21日
22阅读

技术信息

语言技术
JavaReactNode.js
系统类型
WebLinux
行业分类
企业服务

作品详情

行业场景

全域数据集成:支持实时与离线批量混合接入,兼容多数据源。
辅助治理:利用大模型自动识别数据血缘、推荐数据标准、自动修复质量问题。
统一指标体系:建立“唯一事实来源”,消除业务部门间的“数据孤岛”和口径不一致。
资产服务化(Data API):将数据封装为API服务,直接赋能前端业务应用。

功能介绍

1 基础配置模块:统一用户授权与认证、门户、指标库、指标监测、运营分析;
2 大数据处理中台 :自研ETL 脚本、分布式任务调度
3 建立企业标准的指标集市、中间元数据仓库,固化计算脚本,提供数据同步脚本、数据监控的分布式计算。

项目实现

1 利用 datax-web, datax 实现分布式任务调度;
2 clickhouse, netty+RocketMQ+redis 实现多数据源的接入;
3 drools,kettle, node.js 实现脚本的自动计算。
4 spring boot +Vue 实现web 操作功能,datart 实现BI;

示例图片

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论