个人介绍
3年数据开发经验,主要方向是离线数仓、SQL开发、Python数据处理、数据同步、数据清洗、数据迁移校验、BI数据集和看板支撑。
熟悉 DataWorks、MaxCompute、MySQL、DataX、Airflow、Python/Pandas 等工具,能够根据业务需求完成数据接入、清洗加工、指标统计、报表输出和看板支撑。
可承接 SQL查询与报表开发、Excel/CSV数据处理、Python批量处理脚本、MySQL数据清洗、数据迁移校验、BI看板数据整理等远程任务。当前自由职业,可稳定沟通,按需求拆解任务并交付结果。
工作经历
2024-04-10 -2026-05-31阿里巴巴数据开发
合规迁移与链路重构:参与物流产技 ODPS 数据从菜鸟空间及国内空间向新加坡独立空间迁移,梳理 100+ 业务库、1200+ 底层表及 150+ 中间层/应用层依赖关系,完成跨空间任务重构、数据源切换和业务无感迁移。 - 数据一致性校验:结合 DataWorks 与 Data Agent 建设自动化比对机制,通过 MD5 聚合校验、差异溯源和业务库 Owner 核实,保障迁移前后核心数据口径一致。 - BI 资产与查询服务迁移:负责 FBI 数据集、看板及 Hologres 查询加速层相关资产迁移,完成 150+ 数据集、100+ 看板和 30+ 元数据表切换,保障迁移后业务查询与看板使用稳定。 - 成本管控与资源治理:开发成本核算应用层并搭建资源消耗看板,结合 ChatBI 建立成本预警机制,对超标任务进行 Owner 协同干预,推动资源使用可视化和异常消耗治理。 - 性能优化与资产瘦身:专项治理 ODPS 数据倾斜任务,优化 Join 策略和热点 Key 处理逻辑;排查任务基线与依赖关系,下线 2000+ 冗余/废弃历史任务,降低计算与存储资源浪费。 - 业务数据支撑:开发仓储集运
教育经历
2018-07-05 - 2024-09-13中国石油大学(华东)计算机科学与技术本科


