



个人介绍
我是程序员客栈的【浩】,一名【大数据方向】; 我毕业于【山西大学】,担任过【猎户星空】的【数据开发】,担任过【汇智信通】的【数据开发】; 熟练使用【spark】,【hive】,【CDH】,【Java】,【SQL】,【HDFS】; 如果我能帮上您的忙,请点击“立即预约”或“发布需求”!
工作经历
2021-11-10 -2023-04-30汇智信通大数据开发
· 负责离线数据仓库的架构设计、开发、性能优化和稳定性保障。 · 支持离线数据的模型设计与ETL开发,产出支持各业务发展的公共主题数据及指标。 · 支持业务方数据提取、分析需求以及问题排查解决,对共性问题沉淀平台解决能力。 · 参与团队数据治理和架构优化,持续提升数据扩展性、时效性、易用性。
2018-05-19 -2021-05-01猎户星空大数据开发
· 参与公司数据平台的架构设计与开发,确保数据平台的高效性、稳定性和可扩展性,满足公司日益增长的数据处理和分析需求。 · 负责数据仓库、数据湖的建设和维护,包括数据模型设计、ETL(抽取、转换、加载)流程开发,保证数据的准确性、完整性和一 致性。 · 优化数据存储和处理架构,提高数据处理效率,降低存储成本,确保数据平台在高并发、大数据量场景下的稳定运行。 · 根据业务需求,从各种数据源(如数据库、文件系统、日志系统等)中提取、清洗和转换数据,为数据分析和挖掘提供高质量的数 据支持。 · 开发数据处理脚本和工具,实现数据自动化处理流程,提高数据处理的效率和质量,减少人工干预。
教育经历
2014-09-01 - 2017-06-30山西大学计算机科学与技术专科