azurewater
1天前在线
全职 · 800/日  ·  17400/月
工作时间: 周末9:00-17:00工作地点:
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

我是程序员客栈的azurewater,一名大数据开发工程师; 我毕业于上海交通大学,担任过小红书的大数据开发工程师,担任过安吉加加的大数据架构师; 负责过Myriads数据可视化项目,网络运输大屏项目,数据调度平台的开发; 熟练使用Java,Spring,MPP数据库,Vue;

对系统架构、模块交互和前后台开发有丰富经验。 如果我能帮上您的忙,请点击“立即预约”或“发布需求”!

工作经历

  • 2020-03-19 -至今安吉加加大数据架构师已认证

    负责大数据平台的主要工作,包括数据采集、数据监控、数据迁移和数据开发支持。数据平台主要包括MMP架构的Impala+Kudu和TiDB,支持整车、智行、质经、海外多个业务线的TB级数据需求。 负责公司展厅大屏数据可视化的地理数据接入和后端框架开发,实现国内外整车公铁水、网络运输、实时仓储运作的可视化展示。支持并满足周平均三场接待任务的需求。

  • 2018-03-01 -2020-03-06行吟信息科技(上海)有限公司大数据开发工程师

    开发大数据平台相关工具,主要包括实时离线数据调度、任务监控和可视化报表,为数仓、业务分析师及高层提供方便的数据接入、数据调度、数据展示和异常通知。同时开发相应***支持移动办公。

  • 2015-12-28 -2018-02-28拉扎斯网络科技(上海)有限公司Java资深开发工程师

    开发大数据平台相关工具,整合元数据管理、数据调度、数据查询、数据安全、可视化报表,作为大数据平台部的主要出口,为公司各业务部门提供完整的大数据应用服务。同时负责高负载环境下线上工具的运营维护。

  • 2014-02-24 -2015-11-27广州唯品会信息科技有限公司上海分公司Java高级开发工程师

    元数据平台的总体设计和开发。目前已完成第一版的发布,开始在小范围试用,并收集用户意见修复问题改进产品。

  • 2008-08-11 -2014-01-20上海万达信息股份有限公司Java高级开发工程师

    开发业务基础平台,为项目组节省开发成本,让他们能专注于业务逻辑,更快速的达成项目目标;同时为各项目组提供技术支持服务。

教育经历

  • 1999-09-01 - 2003-06-30上海交通大学信息与通信工程本科已认证

技能

NoSQL
TiDB
Vue
系统架构
Spring
MySQL
0
1
2
3
4
5
0
1
2
3
4
5
作品
数据调度平台

该项目在容器化Airflow上封装,支持各种离线实时数据任务的标准化接入,以满足在不同集群上流程化的数据调度需求。相对于原有的Airflow调度项目,大大降低了开发、测试、部署和运维的难度。 项目职责 1.参与容器化Airflow和operator的开发,以及原有Airflow任务的迁移 2.负责实现任务血缘分析和Git版本管理 3.参与Hive和Sqoop任务标准化的开发 项目业绩 完成80% Airflow任务的迁移;标准Hive和Sqoop任务上线 解决了Git版本管理任务的问题。

0
2024-04-20 15:28
网络运输大屏项目

网络运输部大屏管理驾驶舱,实现网运业务的数字孪生。通过GIS可视化展示所有车辆运单的位置、轨迹情况,标记天气、路况等环境影响,并提供多维统计、里程计算、风险预警等实用功能。 项目中负责数据集成、数据监控、指导数据开发和后端开发。对多个来源的订单运单和车辆GPS数据进行汇聚和计算,提供地图服务,并根据多种规则生成预警跟踪。迭代交付及时,6个月上线第一版。 解决了多维度实时里程计算的问题。

0
2024-04-20 14:57
Myriads数据可视化项目

该项目定位于BI智能数据报表工具(类似FineBI)。提供分析师自助的从数仓查询数据,拖拽生成PC移动端的可视化报表和订阅日报邮件。 项目职责 1.负责数仓数据到可视化报表的流程设计和代码设计 2.负责基于Spring Boot的后端开发 3.负责企业*应用开发和SSO权限接入 4.负责项目docker容器部署和运维 5.负责大促期间实时大屏展示 项目支持了4000多个任务和1000多个看板;每天发送50多个日报;保障了4次大促时大屏的实时数据展示。 解决了多用户自定义筛选器的问题。 解决了订阅邮件嵌入报表图片的问题。

0
2024-04-22 15:49
更新于: 04-20 浏览: 48