个人介绍
⚫ 熟悉Java语言
⚫ 熟悉python语言,了解使用过常见的数据分析模块如Pandas、Numpy、Sklearn等。
⚫ 熟悉Linux操作系统,熟悉其常见的操作指令,能够进行常用shell 脚本的编写。
⚫ 熟悉数据仓库建模理论,了解基于维度建模的主题划分、数仓分层、指标建设、数据模型设计等流程。
⚫ 熟悉大数据基础框架Hadoop,熟悉MapReduce计算框架、HDFS文件系统、Yarn资源调度
⚫ 熟悉Hive数仓工具,熟悉其架构组成和运行机制,能够熟练编写HiveSQL ,了解常用的Hive调优方法。
⚫ 熟悉 Spark 框架,掌握 Spark编程,理解 Spark 任务的提交流程、阶段划分、任务调度等机制
⚫ 熟悉实时计算框架Flink,熟悉其基本架构和处理思想,了解其常用算子、状态管理、窗口和水位线等机制。
⚫ 了解常用的数据湖组件Iceberg、Hudi和OLAP引擎Clickhouse、Doris、Kylin等的基本使用。
⚫ 了解数据同步工具Flume、DataX、Seatunnel、Sqoop等,能够进行数据同步任务的配置。
工作经历
2024-01-01 -2025-01-01大疆创新大数据工程师
1、部门日常数据业务的承接,包含不限于数据开发、数据采集、数据治理、线上运维等 2、DJI数据湖重构建设,负责销售、物流等数据领域
教育经历
2025-07-01 - 深圳大学计算机科学与技术硕士
2020-10-01 - 2024-06-01河北工业大学计算机科学与技术本科
语言
中文母语水平
英语无工具书面交流
0
1
2
3
4
5





