中建八局大数据项目产品系统

我要开发同款
7阅读

技术信息

语言技术
Python、Hadoop、HDFS、MySQL、Oracle
系统类型
Web
行业分类
企业服务

作品详情

行业场景

中建八局整个大数据项目建设,解决各公司数据独立使用情况,数据入湖统一管理,构建数据仓库,构建指标体系,数据治理使数据转换成生产要素。

功能介绍

1,构建中建八局数据仓库,ods--->ads层。
2,构建指标体系,构建BI看板。
3,数据治理,将数据转换成生产要素,
为决策提供支持,为员工提高效率。
4,维护系统平稳运行。

项目实现

1.数据开发与数据治理:基于百度 EDAP 平台完成数据入湖、清洗、建模及加工任务,参与 Hive 数仓分层与数据链路开发,保障数据服务稳定运行。
2.数据服务与报表开发:负责 API 接口开发及 SugarBI 大屏、报表开发,支持业务数据展示、指标分析及数据校验,提升业务决策效率。
3.Python 自动化开发:编写 Python / PySpark 脚本实现批量数据入湖、自动调度及数据监控功能,一次性完成上百张表的自动化处理,大幅提升开发效率并降低人工运维成本。
4.AI 应用探索:结合企业数据平台使用场景,探索基于 RAG(检索增强生成)的企业知识问答助手,尝试利用 LangChain、Prompt Engineering 等技术实现 BI 平台使用文档智能检索与问答能力,提升平台使用效率与用户支持能力。
5.系统运维与优化:负责日常运维及数据流程优化,保障数据接口、报表系统稳定运行,并持续优化数据处理性能与调度效率。

示例图片

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论