工作经历
2019-01-01 -2020-12-31神州信息高级数据开发工程师
项目介绍:保定银行数据仓库是基于oracle搭建的数据仓库,分为STA层、ODS层、FSD层、TPS层。STA层为贴源层用来存放原始数据,ODS层为数据存储层,根据表的业务类型对STA层表分增量、全量、历史拉链、每天一份全量进行历史存档, FSD层模型层通过对ODS层数据加工汇总到各个模型中。(存款、贷款、客户信息、卡账户信息等等),TPS层数据集市层针对行内各个经营决策指标对FSD层、ODS层数据进行加工汇总,最终通过BI工具展示出来。 我在次期间负责: 1、整个数据仓库的搭建,以及各个层存储过程模板设计(包括记录跑批日志、报错日志)。 2、部分FSD层模型的加工设计。 3、分析表业务类型以后,通过kettle抽取各个源系统数据到数据仓库。 4、为下游系统提供接口数据 5、负责公司业务报表开发,为行内经营决策提供数据支持。 6、负责与业务人员沟通需求,整理需求文档并根据工作的难易程度,评估工作量。 7、定期查看数据库AWR、ASH、ADDM、AWRDD、AWRSQRPT数据库性能报告。对数据库整体运行情况以及性能进行分析。对执行较长较频繁的sql进行优化(调整执行计划、索引、分区),
2015-04-06 -2018-12-31首自信大数据开发工程师
在基于hadoop搭建的首钢大数据平台,把业务数据抽取到大数据平台,通过hive、Spark、impala、flink、Scala、Kafka、Flume、Zookeeper等技术把数据进行加工整合,通过bi(帆软、congnos、润乾)工具展示出来,支撑公司战略决策。
教育经历
2012-10-01 - 2016-06-07华北理工大学信息与通信工程本科
在校期间负责学校机房软件运维






