Leon
8小时前在线
全职 · 500/日  ·  10875/月
工作时间: 工作日18:00-22:00工作地点: 远程
服务企业: 0家累计提交: 0工时
聊一聊

APP聊一聊

个人介绍

熟练使用Java,Scala开发Flink,Spark等大数据程序。
熟悉 Linux 的环境及常用命令、shell脚本的编写。
熟练掌握Flink常用算子以及flinkSql,有实时数仓项目开发经验,有一定Flink程序调优经验。
熟练使用Scala编写SparkCore,SparkSql,有Spark算子性能调优相关经验。
熟悉kafka,有基于kafka构建实时数仓的经验。
熟练使用HiveSql进行复杂业务指标分析,有过离线数仓项目的开发经验。可以熟练对离线数据进行ETL相关操作。
熟悉Mysql,PgSql等主流关系型数据库以及Doris,StarRocks等OLAP数据库。
熟悉Hadoop生态圈,掌握MapReduce,Hive, Hbase 等相关组件的使用。
熟悉阿里云体系中的 DataWorks, DataQ,DataV等数据开发工具、及数据分析工具。
熟悉阿里云dataworks中maxcompute引擎的UDF函数开发。
熟悉华为云体系中的mrs集群,以及DataArts Studio数据治理中心等数据开发工具。
熟悉百度云体系中的EDAP平台,sugerBi等数据开发工具及数据分析工具。
熟悉dolphinscheduler大数据程序调度工具,有多种工作流的调度经验。
熟悉flink cdc,cloudCanal,datax,seatunnel 等数据同步工具。
熟悉常用的Bi工具,如FineBi,DataV,SugerBi等。
熟悉k8s,可以使用k8s部署flink程序。
熟悉数据湖hudi,iceberg,paimon等数据湖组件。

工作经历

  • 2021-07-15 -2025-08-16南京运享通信息科技有限公司数据开发

    负责流批一体数据平台的搭建。1. 负责实时数据的接入与处理,确保数据的即时性和准确性。 2. 主导数据仓库的设计与开发,优化数据存储结构,提升数据查询效率。 3. 针对不同业务需求,进行多维度指标的精确计算与分析。 4. 为公司各业务部门提供强有力的数据支持,助力业务决策与执行。 5. 积极参与前沿数据开发技术的调研,持续提升团队的技术竞争力。 6. 探索并实践新型数据处理工具,提高数据处理的自动化与智能化水平。 7. 针对数据流程进行优化调整,减少数据处理时间,提升数据应用的时效性。 8. 定期与团队分享数据开发领域的最新动态,促进团队技术视野的拓展。

教育经历

  • 2017-09-01 - 2021-07-13安徽工业大学工商学院计算机科学与技术本科

    完成学业,有多段实习经历,热爱大数据行业。1.熟悉Java,可以使用java编写flink dataStream,flink-sql程序。 2.熟悉Linux的环境及常用命令,shell脚本的编写。 3.可以独立搭建数据开发所用的各种组件,如hadoop,hive,flink,s

技能

Kafka熟练
Hadoop精通
Java熟练
MySQL熟练
0
1
2
3
4
5
0
1
2
3
4
5
更新于: 8小时前 浏览: 4