个人介绍
深耕大数据开发、分析与行业定制化服务,精通 Python/Java/Shell/Scala 多语言开发,熟练运用 SQL/SPL 开展深度数据分析。具备Hadoop 生态圈全栈技术能力,精通离线 / 实时数据仓库搭建、ETL 流程开发、数据治理与性能调优。沉淀电商、金融、网络安全三大领域完整落地经验,可按需打造从数据采集、清洗、建模到可视化的全流程解决方案,助力企业实现数据价值最大化。
工作经历
2023-07-01 -至今网络安全厂商大数据开发
拥有 5 年 + IT 行业实战经验,深耕大数据全链路处理、分析与建模领域,沉淀形成标准化知识体系与落地方法论。 精通Splunk 全生态应用,可基于业务需求完成组件定制开发、场景化部署与性能调优,打造适配业务的日志分析、态势感知解决方案。 吃透Hadoop 生态圈技术栈,熟练驾驭 MR 分布式计算、OneData 数据仓库建模等核心模式,具备从数据采集到数仓搭建的端到端交付能力;熟练使用 Yarn、HDFS、Hive、HBase、Spark 等核心组件,可高效完成离线 / 实时数据处理程序开发。 熟练操作多类型数据存储与流转工具,涵盖关系型数据库(MySQL、Oracle)、列式数据库(ClickHouse)、缓存(Redis)、消息队列(Kafka)、数据同步(Canal)、日志采集(Flume)、分布式协调(Zookeeper),能根据业务场景灵活搭建数据链路。 精通 Java、Python、Scala 多语言开发,可针对性开发实时计算、离线批处理程序;熟练运维 SUSE、CentOS、Windows Server 等操作系统,保障大数据平台稳定运行。
教育经历
2016-09-12 - 2020-06-13山西晋中理工学院计算机科学与技术本科


