Black丨Sun丶
1月前来过
全职 · 600/日  ·  13050/月
工作时间: 工作日09:00-18:30工作地点: 远程
服务企业: 1家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

对数据分析方面以及互联网技术发展方向有良好的意识,对于Hadoop生态圈的各类常用工具都相对比较熟悉,对大数据开发及分析方面有较强的实践经验,曾与中国联通总部各部门(财务部、市场部、渠道运营中心等)有过实际业务往来,并经常性的交流数据口径,对于其业务和数据的了解比较深刻。对于数据分析挖掘有浓厚的兴趣,有过充分的管理经验,曾带领20人的数据团队为甲方提供驻场服务,并稳定运营团队超过三年,具有优秀的沟通和协作能力,有创新精神,乐于接受挑战,能承受工作压力、责任心强,工作踏实。

工作经历

  • 2019-03-27 -至今中国联通北京总部大数据开发工程师

    个人职责: 带领团队对接客户业务,整理需求,提供BI服务 对联通O、B域数据进行钻研,分析,支撑业务 提供数据维护服务,保证7x24小时支撑。 项目描述: 联通的业务知识浩瀚如海,各种分支数不胜数,由此划分的数据 分类更是如同天上的繁星,让人目不暇接,故需要专业的数据分 析、建模、开发人员来与业务人员协作配合,共同提高联通数据 的应用广度、深度,提高信息价值,拓宽发展视野,在未来市场 中抢占先机。 技术要点: 1)使用Oracle等关系型数据库提供数据分析服务 2)应用hdfs分布式集群,利用hive进行离线快速支撑服务 3)使用Excel、Word等办公工具出具阶段性报告、服务支撑 情况及业务发展趋势报表。 4)利用ETL工具进行固定任务流水线化,提高工作效率 5)使用Linux系统与各部门进行数据交互,提高业务广度,拓 宽支撑范围。

  • 2017-08-09 -2018-11-14北京智慧星光有限公司大数据分析师

    参与需求分析、技术方案选型以及集群搭建及日常维护 负责数据分析并执行部分ETL工作 具体工作: Nginx集群会收集用户的行为事件(我们以通话记录为例),将数据发送到 Kafka消息队列,后端的Spark Streaming实时服务会从Kafka拉取数据进行消费,将数据读出来并进行实时计算分析,将结果写入Redis,可以实时获取用户的行为数据,同时将原生数据存入HDFS备份,周期性创建Hive分区表,再将原生数据导入Hive数据仓库中,以供离线综合统计分析。

教育经历

  • 2021-09-01 - 北京理工大学计算机科学与技术本科

    在校期间正常通过学校各类考试,修满学分后毕业,在校期间有过丰富的社交经验,实践经历丰富。

技能

MySQL
Oracle
项目管理
0
1
2
3
4
5
0
1
2
3
4
5
作品
北京体育局网站日志分析系统

项目描述: 系统实现合规审计、统计分析、全文检索、告警分析等功能,通过丰富的报表,协助管理者及时获悉全网整体运行态势。对一天、一周、一月的PV、UV、跳出率、重复访问率进行统计分析来反映表明用户品质,以达到及时处理的目的。 个人职责: 1、使用Flume来完成Apache服务器日志收集工作,并自动上传到指定的HDFS系统中存储。 2、负责项目中的MR数据清洗部分,将采集到的数据进行过滤,去除垃圾信息并存入hdfs中,并使用hive对数据进行统计分析存入Mysql中,并存入ES中进行备份。 3、参与日志系统的维护和管理。 技术要点: 使用flume实时收集生成的通话数据 将flume收集的log输入发送到kafka集群 将kafka消费的数据进行MR数据清洗、过滤 将干净的数据录入hive 使用hive抽取通话记录到mysql表中

0
2023-04-07 04:25
集群运维项目

项目描述: 针对公司已上线的稳定运营中的系统,提供实时运维服务,保证出现问题后及时响应并解决。 个人职责: 1)提供服务器运维服务,定时检测集群状态。 2)制作用户操作手册,管理用户操作权限。 3)提供运维技术服务,以老带新,建立运维团队。 技术要点: 1)熟悉Linux的搭建与维护,精通各类操作指令。 2)对于HA较为熟悉,了解业务后,可以通过定制化设置,调配集群资源,提高集群稳定性。

0
2023-04-07 04:26
联通常态化数据支撑项目(2022)

项目描述: 联通的业务知识浩瀚如海,各种分支数不胜数,由此划分的数据 分类更是如同天上的繁星,让人目不暇接,故需要专业的数据分 析、建模、开发人员来与业务人员协作配合,共同提高联通数据 的应用广度、深度,提高信息价值,拓宽发展视野,在未来市场 中抢占先机。 个人职责: 1)对接业务负责人,参与口径讨论会议 2)承接各类需求,指导开发人员开发问题 3)管理团队、对接客户,抢占业务资源,规划团队发展路线,优化支撑服务模式,引导团队前进。 技术要点: 1)使用Oracle等关系型数据库提供数据分析服务 2)应用hdfs分布式集群,利用hive进行离线快速支撑服务 3)使用Excel、Word等办公工具出具阶段性报告、服务支撑情况及业务发展趋势报表。 4)利用ETL工具进行固定任务流水线化,提高工作效率 5)使用Linux系统与各部门进行数据交互,提高业务广度,拓宽支撑范围。 6)使用帆软等可视化工具定制展示平台,提供可视化服务

0
2023-04-07 04:27
更新于: 2023-01-01 浏览: 225