个人介绍
1. 熟练Python、Java、Scala,Shell语言进行大数据相关的开发,有良好的编码习惯
2. 熟练开发Spark,SparkSQL,SparkStreaming相关应用,有一定的调优经验
3. 熟练使用Flink,FlinkSQL进行实时数据分析
4. 熟练使用Flume , Canal , sqoop,Kafka 实现数据的处理 , 并了解组件的基本原理
5. 有一定Flink程序调优经验,在项目中解决过数据倾斜,反压等问题
6. 熟练掌握Hadoop体系HDFS、Yarn、MapReduce等组件的使用方法和基本原理
7. 熟练使用HiveSQL进行离线数据分析,有解决数据倾斜的问题经验
8. 参与过数据仓库搭建,有一定维度建模经验
9. 熟悉使用ClickHouse,Druid,Impala+Kudu等OLAP数据库
10.熟练使用 Doris 构建实时用户画像,基于 Unique 模型实现高并发点查与更新场景
11.熟悉使用HBase,有一定HBase调优经验,了解Rowkey设计原则
12.熟悉掌握Presto,Kylin,ClickHouse等即席查询工具,有在实时和离线项目的应用经验
13.熟悉WeData,Azkaban,Oozie等任务调度工具的使用
14.独立搭建 Hadoop 原生集群,CDH集群,有一定集群使用维护经验
15.熟悉Superset,DataEase,Grafana,百度sugar,datawind火山看板等BI工具的使用
工作经历
2026-01-01 -2026-10-10北京壹永科技集团数据开发
国家恶性肿瘤研究项目开发,原子特征研究变量开发,数据探查,漏斗开发,纳排开发锁库
2023-08-01 -2026-02-01北京金堤科技有限公司数据算法
商业查询push实现AI推送,以及广告投放全链路管理系统包含激活处理、数据统计分析和回调处理
2021-09-15 -2023-08-01蔚来汽车科技有限公司数据算法
整合蔚来汽车自动驾驶数据 ,从全局角度研发 ,为动静态感知,规控,仿真,车道线等团队提供了多维度,多模型,多方式的海量数据查询
2020-08-01 -2021-08-16上海得逸信息技术有限公司大数据开发
从事电商大数据开发,主要负责数据采集 ,清洗 ,存储 ,分析处理 ,生成多项分析指标 ,供营销 、市场等部门和公司管理层进行参考 ,为营销策略的指定和调整提供数据支撑
教育经历
2016-09-01 - 2020-07-01燕京理工学院计算机科学与技术本科



