个人介绍
我是程序员客栈的【YIXIAO】,一名【Java全栈工程师】;
我毕业于【华南师范大学】的计算机科学与技术专业,具备6年开发经验,曾担任【深圳棠泽科技有限公司】数据开发工程师、【深圳仰悦科技有限公司】大数据开发工程师、【广州剑鱼科技有限公司】数据开发工程师;
负责过【憨兔智佣APP&蝉礼小程序】、【仰悦科技数据中台】、【广汽丰田新DMS数据基盘项目】、【用户画像分析平台】等项目的开发与落地;
熟练使用【Java/SpringBoot/SpringCloud/MyBatis-Plus】、【MySQL/Redis/TiDB】、【Hadoop/Hive/Spark/Flink】、【Doris/Paimon/Minio/Kafka】、【Docker/Kubernetes/DolphinScheduler/DataX】等技术栈;
擅长后端业务开发、实时/离线数仓建设、数据同步、数据质量监控、调度运维、大数据平台从0到1搭建及自动化工具开发。
如果我能帮上您的忙,请点击“立即预约”或“发布需求”!
工作经历
2025-03-17 -2026-05-31深圳棠泽科技有限公司数据开发工程师
公司业务主要围绕聚合支付、本地生活服务、商户运营及代理商分润结算等场景展开。任职期间主要负责憨兔智佣APP、蝉礼小程序及相关数据平台建设工作。后端方面,参与商户入驻、OCR证件***迹查询、营销活动发券、积分体系、对账中心等核心模块开发,技术栈包括SpringBoot、SpringCloud、Nacos、Gateway、MyBatis-Plus、Redis等。数据方面,主导CloudEon大数据平台在Kubernetes环境下从0到1搭建,集成Flink、Paimon、Doris、Minio、DolphinScheduler、DataX等组件,构建实时湖仓一体架构和自动化调度体系,支撑业务数据实时同步、离线计算、报表分析和数据服务交付。
2024-05-29 -2025-10-31深圳仰悦科技有限公司大数据开发工程师
公司业务涉及海外业务增长、AR产品数据分析及多地区运营数据管理。任职期间主要负责公司数据中台和实时数仓建设工作,从0到1搭建DataSophon大数据平台,集成Flink、Kafka、Doris、DolphinScheduler、DataX、StreamPark、Superset等组件,支撑日均TB级数据处理需求。参与Flink+Doris实时离线一体化数仓设计,基于FlinkSQL和DataWorks完成业务数据实时同步,降低数据延迟并提升查询效率。同时负责AR产品报表和Superset可视化看板开发,覆盖用户增长、营收、产品使用等核心指标,并编写Python自动化脚本生成Doris建表语句和Flink同步任务,提高数据开发效率。
2022-03-01 -2024-02-05广州剑鱼科技有限公司数据开发工程师
任职期间主要参与广汽丰田新DMS数据基盘项目,围绕汽车销售线索、二手车业务、营销分析等场景进行离线数仓建设。负责销售线索与二手车两大核心模块的Hive离线数仓设计与开发,完成100+业务指标梳理和落地,支撑营销部门数据分析和业务决策。参与数据质量监控体系建设,覆盖条数比对、枚举值转换、字段正确性校验等多项规则,提升数据准确率。日常工作还包括HiveSQL、Spark、Impala、Oozie等组件开发与调度维护,编写Python自动化工具生成Hive表结构、初始化SQL、增量SQL和数据点检SQL,并维护Scala测试报告生成逻辑,提升开发和测试效率。
2019-07-01 -2022-02-02信必优(深圳)信息技术有限公司大数据开发工程师
公司主要为客户提供信息技术服务、数据开发及系统交付支持。任职期间主要参与用户画像分析平台和离线数仓相关建设工作,负责MySQL等业务数据源到Hive数仓的数据抽取、清洗和加载,使用Sqoop完成全量及增量同步,保障日均大规模数据稳定入仓。基于SparkonHive和SparkSQL开发离线分析任务,完成订单、浏览、点击、用户行为等数据加工,构建用户标签体系,支撑用户画像、精准营销和业务报表场景。参与DolphinScheduler调度体系搭建,实现标签加工和报表任务自动化运行,并负责Hadoop、Hive、Spark等组件的日常维护与性能优化,解决数据倾斜、任务耗时过长等问题。
教育经历
2024-04-01 - 华南师范大学计算机科学与技术本科
2016-09-01 - 2019-06-30广东交通职业技术学院物联网应用技术专科
2017/5:曾获院校级“移动互联竞赛”二等奖 2017/11:参加国家级的全国大学生“挑战杯”大赛 2019/8:机动车驾驶证(C1驾驶证) 2019/3:用于船底固着生物智能清理装置的悬挂组件的实用新型专利证书 2019/1:全国计算机信息高新技术考试合格证书(物联网证书)
技能
相似推荐 换一批

Java工程师
800元/天
前尚德机构
技能:Java,Kafka,Shell,Nginx,NIO,Zookeeper,SpringCloud,Mybatis,Spring,SpringMVC,Maven,Redis,Netty

Java
600元/天
前杭州传信网络科技有限公司
技能:Java,多线程,Shell,HTTP,加密解密,Spring,Mybatis,Maven,Redis,JavaScript,jQuery,Ajax

java开发
500元/天
腾讯
技能:Java,Python

技术经理
300元/天
福寿康(上海)医疗养老服务有限公司
技能:Java,MySQL,Spring,Mybatis,SpringMVC,SpringCloud,Redis,多线程,Oracle,前端


