彪少ca
1月前来过
全职 · 600/日  ·  13050/月
工作时间: 周末8:00-21:00工作地点:
服务企业: 5家累计提交: 4工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

技术能力  1、语言类(1)熟练掌握Java和Scala语言,够独立参与代码编写(2)熟悉Linux系统,会搭建hadoop集群并掌握Shell脚本语言,会基本的shell或python编程 2、数据仓库类(1)熟练掌握Hive,会使用hql语言,会编写UDF函数并对hive进行优化,,曾参与过多次数仓项目(2)会使用es、redis、mysql、hdfs、hbase等进行数据存储,及其增删改查(3) 会使用erwin建立模型3、Spark/Hadoop以及流式处理类(1)熟练掌握sparkcore、sparksql、sparkstreaming使用,理解RDD,DF、DS、DStream(2)熟练掌握MapReduce的shffle过程,会利用mr框架进行数据分析 (3)熟练掌握Hdfs、yarn、zookeeper、hbase、sqoop、flume等生态圈软件的使用 (4)熟练掌握Kafka的组件结构,可以解决数据传输的安全性问题(5)熟练掌握hue的使用,对CDH集群进行监控部署等 4、其他类(1)会使用svn、postman等小工具(2)会编写spring boot的api接口服务

工作经历

  • 2019-03-01 -至今中软国际大数据

    为华为数据中台onedata ,大数据工程师,对华为产品销售,运行后台产生的数据进行分析,提供给决策者 主要负责数仓的模型建设,数仓分层,hql语句开发,erwin模型建设,lts调度,sqoop脚本编写

  • 2016-06-01 -2019-03-01科大讯飞大数据工程师

    在科大讯飞工作两年,从事大数据工程师职位 期间参与了四个项目,自己主要负责两个项目,一个是基于数仓hive的k12教育考试系统

教育经历

  • 2013-09-01 - 2017-07-01安徽建筑大学电子信息工程学院本科

    获得英语四级证书,学院奖学金三等奖,绩点拿满

技能

Hive
Hadoop
Spark
0
1
2
3
4
5
0
1
2
3
4
5
作品
数据中台

数据中台,为公司提供一个公共的统一的获取数据的路径,项目分层ods层,dwi,dwr,dm层。目前在做dwr层,hive数仓建模,分析原子指标例如回款指标,应收指标,软件退税指标,由于项目涉密,无法展示页面

1
2019-08-08 10:16
基于数仓类的K12教育考试系统

该项目是一个教育系统项目,主要对学生每次考试的成绩进行统计,去判断学生的整体学习情况,查缺补漏,为学生推荐合适的题目,对他提供量身定做的补习模式,并做用户画像,贴上标签,以此在提高学生的成绩的同时提高品牌知名度和收益额。

0
2019-06-21 22:59

1 人评论
用户评价

用户217597
13916682018
专业度高
更新于: 2019-08-09 浏览: 544