个人介绍
本人具有良好的数学和计算机基础知识。对待工作认真负责,善于沟通,有很强的团队精神和学习能力。在工作上能够承受一定的工作压力,坚决服从领导的工作安排,并且能够快速融入团队和适应团队的开发节奏。为人比较随和,喜欢交朋友,有较强的适应能力和协调能力,愿意服从集体利益的需要,具有奉献精神。
工作经历
2019-10-08 -至今郑州时空隧道信息技术有限公司大数据开发
1.根据、需求进行数仓的构建 2.根据业务需求对数据进行实时/离线分析 3.负责公司采集、加工、清洗、处理程序的开发。 4.参与项目需求分析,数仓架构以及数据模型的设计 5.参与产品的架构规划、性能优化、稳定性保障建设 6.根据业务需求开发大屏、报表等
教育经历
2016-09-01 - 2020-06-01河南理工大学电子信息工程本科
我毕业于河南理工大学。曾一直担任班长,具有较强的团队意识。 个人方面:拥有较强的自学能力及表达沟通能力,喜欢研究新的知识,能快速适应各种环境,并融入其中,性格开朗活泼,喜欢交朋友,能吃苦耐劳,具有较强的抗压能力。 工作态度:工作中认真负责,不以自我为中心,具有团队合作精神,有自制
语言

该项目是一个数仓项目,该数仓的搭建流程是: 1、先将日志服务器中的埋点用户行为数据通过flume导入到Kafka,开启了ETL拦截器和日志类型区分拦截器,过滤掉时间戳不合法和json不完整的日志数据。 2、Flume消费Kafka的数据到hdfs中,开启的是Kafka channel,提高了传输效率。 3、将Kafka中的数据存入到ods层的hive表中,包括启动日志表和事件日志表。 4、将事件表用UDF函数将json数据解析出来,创建DWD层,DWD层中启动表和各种事件表 5、通过DWD层,求得各种主题,基础的主题有用户活跃主题、用户新增主题、用户留存主题,还有沉默用户数、本周回流用户数、最近连续三周活跃用户数等。


