proginn1131107131
4天前在线
全职 · 300/日  ·  6525/月
工作时间: 工作日21:00-23:30、周末08:00-08:00工作地点: 远程
服务企业: 0家累计提交: 0工时
聊一聊

APP聊一聊

个人介绍

1. 熟练Python、Java、Scala,Shell语言进行大数据相关的开发,有良好的编码习惯

2. 熟练开发Spark,SparkSQL,SparkStreaming相关应用,有一定的调优经验

3. 熟练使用Flink,FlinkSQL进行实时数据分析

4. 熟练使用Flume , Canal , sqoop,Kafka 实现数据的处理 , 并了解组件的基本原理

5. 有一定Flink程序调优经验,在项目中解决过数据倾斜,反压等问题

6. 熟练掌握Hadoop体系HDFS、Yarn、MapReduce等组件的使用方法和基本原理

7. 熟练使用HiveSQL进行离线数据分析,有解决数据倾斜的问题经验

8. 参与过数据仓库搭建,有一定维度建模经验

9. 熟悉使用ClickHouse,Druid,Impala+Kudu等OLAP数据库

10.熟练使用 Doris 构建实时用户画像,基于 Unique 模型实现高并发点查与更新场景

11.熟悉使用HBase,有一定HBase调优经验,了解Rowkey设计原则

12.熟悉掌握Presto,Kylin,ClickHouse等即席查询工具,有在实时和离线项目的应用经验

13.熟悉WeData,Azkaban,Oozie等任务调度工具的使用

14.独立搭建 Hadoop 原生集群,CDH集群,有一定集群使用维护经验

15.熟悉Superset,DataEase,Grafana,百度sugar,datawind火山看板等BI工具的使用

工作经历

  • 2026-01-01 -2026-10-10北京壹永科技集团数据开发

    国家恶性肿瘤研究项目开发,原子特征研究变量开发,数据探查,漏斗开发,纳排开发锁库

  • 2023-08-01 -2026-02-01北京金堤科技有限公司数据算法

    商业查询push实现AI推送,以及广告投放全链路管理系统包含激活处理、数据统计分析和回调处理

  • 2021-09-15 -2023-08-01蔚来汽车科技有限公司数据算法

    整合蔚来汽车自动驾驶数据 ,从全局角度研发 ,为动静态感知,规控,仿真,车道线等团队提供了多维度,多模型,多方式的海量数据查询

  • 2020-08-01 -2021-08-16上海得逸信息技术有限公司大数据开发

    从事电商大数据开发,主要负责数据采集 ,清洗 ,存储 ,分析处理 ,生成多项分析指标 ,供营销 、市场等部门和公司管理层进行参考 ,为营销策略的指定和调整提供数据支撑

教育经历

  • 2016-09-01 - 2020-07-01燕京理工学院计算机科学与技术本科

资质认证

语言

中文母语水平
0
1
2
3
4
5

技能

Java掌握
Python熟练
Shell熟练
Kafka熟练
Flask熟练
Hadoop精通
HDFS精通
0
1
2
3
4
5
0
1
2
3
4
5
更新于: 4天前 浏览: 3