新一代数据平台

我要开发同款
sloan2023年03月30日
123阅读
所属分类cdh、flink、spark、数据仓库、数据平台

作品详情

• 参与新一代数据平台基础架构设计(Lambda),功能模块开发、组件性能优化(CDH)及技术支持。• 参与新一代数据平台数据仓库建设(Hive),包括主题域规划、数仓层级设计,开发规范定义等。• 负责OLTP及OLAP数据服务搭建,为不同业务场景提供数据处理框架支持。• 负责数据质量校验平台开发(Pachira),满足全场景自定义数据质量需求及多层级告警通知。• 负责可视化监控告警平台建设(Grafana),实现全平台多维指标监控,数据血缘管理及自定义规则告警。• 参与用户画像系统开发,负责客户行为指标及客户持有信息指标构建,助力客户营销工作。• 负责资讯实时数据平台开发(Flink),为交易决策提供实时资讯数据支撑。• 负责平台工具开发集成,如数据采集、数据迁移、文件解析、数据清洗等(Python)。
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论