个人介绍
擅长大数据项目管理、大数据开发、数据产品、数仓架构设计、维度建模、数仓分层建模(ods/dim/dwd/dws/ads)、数 据仓库开发、数据治理等,10年以上数据类相关经验; 熟练使用Oracle、Hive、Doris、Mysql、AnalyticDB等数据库,复杂Sql优化,善于分析和解决数据问题; 掌握Python、Java、Linux、Shell、Flink SQL、Spark SQL、PLSQL、阿里云MaxCompute、Hive、Sqoop、Otter、OG G、Datastage、Airflow、Oozie、DataX、Cognos、Metabase、Superset、Kafka等技术和工具; 具备离线数仓架构师、大数据开发工程师综合能力、实时数仓开发能力、数据项目管理能力; 践行数据治理,含:数据质量、元数据管理、数据标准、数据建模、数据字典、数据安全、性能调优等; 具备跨部门沟通和团队协助能力,分析问题和解决问题的能力
工作经历
2021-04-01 -2025-09-01重庆崇天小贷数据架构师
1. 设计并开发数仓维度模型及日常维护 2. 设计并开发对账系统及日常维护 3. 根据业务需要设计并开发BI报表及日常维护 4. 探索调研Doris新数仓,并实现数仓迁移和生产开发 5. 设计并开发生产预警功能系统 6. 数据质量跟踪和协调处理 7. 优化数据组各系统和大sql,保障数仓持续健康运行 8. 数据产品输出及推广使用等 9.设计并开发财务分录会计平台 10.指导和管理中级开发人员,项目进度推进,跨部门沟通协调,数据组日常事务管理等
2016-01-01 -2021-04-01上海微创软件数据仓库
1. 业务需求调研,确认需求,根据需求设计离线数仓报表、上报行业监管报表; 2. Hive离线数据仓库架构设计和分层分主题建模,参数配置,以及依赖影响评估,数据字典维护; 3. 使用Hql 和pySpark 设计开发ETL 程序,代码优化评估; 4. 清理并优化数据仓库和报表的疑难杂症; 5. 践行数据治理,含:数据质量、元数据管理、数据标准、数据建模、数据字典维护等; 6. 智能调度设计和开发; 7.Oracle储存过程转为hive 大数据执行程序等
2012-11-01 -2016-01-01易联软件数据库工程师
1.根据产品/项目需求,使用powerdesigner建设并优化数据库模型; 2.根据业务需求,与JAVA端和前端开发人员协调沟通,开发对应的PL/SQL程序(包、函数、视图、存储过程、触发器等); 3.协助项目经理,往复确认开发需求,并形成文档; 4.负责与公安部相关人员沟通协调,建设并监控维护数据上报工作(ETL); 5.核对并优化公安监管系统标准编码及系统参数工作,以及系统中使用到的自定义字典; 6.监控和维护各个OGG同步程序正常运行; 7.负责维护各个地区违法犯罪监管系统的日常工作处理; 8.根据重庆监管总队及其它地区总队不同的需求,制定统计各分析数据报表(ETL); 9.Oracle日常管理、备份恢复、监控、优化、异常处理等工作; 10.根据业务需求,审核并优化JAVA人员编写的SQL代码; 11.领导分配的其他工作
教育经历
2018-09-01 - 2022-06-01电子科技大学计算机科学与技术本科




