



个人介绍
1、熟悉数据仓库技术,和关系型数据库如 Oracle、MySQL 等 SQL 语句;
2、熟悉 Hadoop 大数据生态,如 Hadoop(HDFS、YARN、MR)、Hive 等原理和应用场景;
3、熟悉 ETL 工具(例如 kettle、sqoop、datax 等);
4、熟悉 Python 和 Shell 脚本开发,Plsql 的存储过程以及自定义函数,熟练掌握 Linux 操作系统;
5、熟悉 oracle 等关系型数据和 hive 数据库的 sql 语句优化;
6、熟悉维度建模的操作和概念,例如星型模型和雪花模型,以及数据库范式(三个范式);
7、能够熟练的运用 freedgo 等建模工具进行建模;
8、熟悉报表开发的流程,能够熟练使用报表工具例如 FineBi 等;
工作经历
2025-03-25 -至今centific数据开发工程师
1.通过已知需求,对数据迁移所需要的数据进行数据探源,并且编写对应的分析文档。 2.数据探源后,通过knime进行数据转换,清洗,关联等操作,完成数据的变化。 3.通过优化sql,pipeline的修改提升对应的性能。
2024-12-02 -2025-03-13奇瑞数据开发
1.通过从数据湖华为云将数据湖中的数据进行同步至数仓中。通过新系统对数据表格的结构逻辑改变,将 之前的历史数据进行切割同步至 hive 数仓中。 2.dwd 层通过星星模型进行数据建模,以及数据的一些简单的进行处理 3.在通过业务需求对 dwd 层数据进行聚合计算,以及通过维度表格进行字段的扩充拉出大宽标。 4.通过开发文档对数据进行开发,以供与报表开发进行使用。 5.参与并且完成部分报表的调研工作。
2024-08-02 -2024-11-29人寿保险数据开发
1.将 sqlserver 的存储过程直接修改成 OB 的存储过程:需要通过存储过程了解一定的逻辑,并且通过 with...as...形 式完成报表的修改。 2.将修改的存过过程中缺失的表格在 gauss 进行汇总。 3.通过云调度(DATAX)将数据调度 gauss 到 OB 或者 sqlserver 到 OB。 4.提交后与原数据进行对比并且完善出现的问题,修改至且达到上线标准。
教育经历
2017-09-01 - 2021-06-28湖南工学院信息与计算科学本科