个人介绍
擅长数据同步、ODPS数仓分层、Hive脚本开发、慢SQL优化、调度节点配置、任务报错修复、批量补数、指标口径梳理。
支持远程兼职、包月维护、临时加急、项目驻场支持,做事高效、交付稳定、不拖沓、无无效加班,可长期合作。
工作经历
2022-05-01 -至今中证数据数据开发,BI开发,数据运维
主导或参与4个项目:1.一库重构(基于旧数据库Tara data,新数据平台阿里云dataworks,将零散的业务表重新梳理入库,构建分层大数据仓库,提升数据易用性,一致性,复用性;该项目除o层源层外,共设计,开发,落盘270张表以及流任务配置) 2.一库中间层应用重构(可以看做一库重构二期,主要构建dwd,dws两个主题聚合层,构建更通用的数据架构,为指标层显示打基础;该项目共设计开发落盘180张主题聚合表,500个指标,200个数据服务产品,外加mc同步到holo平台的任务) 3.投资者投资分析(该项目针对业务分类的不同类别投资者,就投资行为做的指标以及显示平台;该项目共设计开发落盘500指标以及指标展示,33张数据表以及数据展示) 4.统计产品BI二期(针对统计业务展开,基于阿里云Hologres,smartBI对统计数据进行梳理显示,实现数据化,图表化,自动化;该项目共设计开发落盘135图表,12张文字,70个指标,35张高频查询模板)
2018-06-01 -2022-03-01开课吧数据开发
从事apach系统的大数据框架,基于公司课程业务,做离线,实时数据流开发。共参与3个项目: 1.hadoop的hdfs,mapReduce文件系统以及yarn任务调度系统离线数仓搭建开发 2.flink框架实时任务流设计开发 3.学员的用户画像,通过给学员打标签构成用户画像,后期业务运用再结合业务数据,实现用户数据的公用,复用
2017-03-01 -2018-01-01洪恩(完美)数据开发
基于日志数据做加工分流,实现数据分层,支撑最终的指标数据,负责历史,新日志数据的加工分流,分流基于业务逻辑,产品的分类自己衍生品的收益数据
2014-09-01 -2016-11-01普联中瑞软件实施
公司软件分模块补数,主要是数据库的补数,数据表新建,辅导用户使用,系统错误记录修复反馈,根据个性化需求对接公司再开发,进度推进
教育经历
2011-09-01 - 2015-07-01中原工学院信息管理与信息系统本科
本科期间学习信息管理与信息系统专业,四年时间曾学习计算机语言,操作系统,数据库等计算机及算法课程,科班出身,毕业经专业老师推荐从事计算机软件行业,具有专业的信息管理信息系统知识,有丰富的数据处理经验,一直在数据行业深耕。
语言

项目分为投资者概览,投资者检测,以及重点关注投资者三个大板块,概览展示投资者群体的大数据,检测重点展示对比数据以及不同维度下的趋势变化,重点关注投资者主要为更细致的行为数据展现





