masterOfShen
20天前在线
全职 · 300/日  ·  6525/月
工作时间: 工作日09:00-09:00工作地点: 远程
服务企业: 0家累计提交: 0工时
聊一聊

APP聊一聊

个人介绍

⚫ 熟悉Java语言

⚫ 熟悉python语言,了解使用过常见的数据分析模块如Pandas、Numpy、Sklearn等。

⚫ 熟悉Linux操作系统,熟悉其常见的操作指令,能够进行常用shell 脚本的编写。

⚫ 熟悉数据仓库建模理论,了解基于维度建模的主题划分、数仓分层、指标建设、数据模型设计等流程。

⚫ 熟悉大数据基础框架Hadoop,熟悉MapReduce计算框架、HDFS文件系统、Yarn资源调度

⚫ 熟悉Hive数仓工具,熟悉其架构组成和运行机制,能够熟练编写HiveSQL ,了解常用的Hive调优方法。

⚫ 熟悉 Spark 框架,掌握 Spark编程,理解 Spark 任务的提交流程、阶段划分、任务调度等机制

⚫ 熟悉实时计算框架Flink,熟悉其基本架构和处理思想,了解其常用算子、状态管理、窗口和水位线等机制。

⚫ 了解常用的数据湖组件Iceberg、Hudi和OLAP引擎Clickhouse、Doris、Kylin等的基本使用。

⚫ 了解数据同步工具Flume、DataX、Seatunnel、Sqoop等,能够进行数据同步任务的配置。 

工作经历

  • 2024-01-01 -2025-01-01大疆创新大数据工程师

    1、部门日常数据业务的承接,包含不限于数据开发、数据采集、数据治理、线上运维等 2、DJI数据湖重构建设,负责销售、物流等数据领域

教育经历

  • 2025-07-01 - 深圳大学计算机科学与技术硕士

  • 2020-10-01 - 2024-06-01河北工业大学计算机科学与技术本科

语言

中文母语水平
英语无工具书面交流
0
1
2
3
4
5
0
1
2
3
4
5

技能

Python熟练
Shell熟练
Hadoop熟练
HDFS熟练
Java掌握
0
1
2
3
4
5
0
1
2
3
4
5
更新于: 2025-12-23 浏览: 10