个人介绍
我是程序员客栈的【norman_zhou】,一名资深后端与大数据架构师;
我毕业于北京航空航天大学(计算机技术硕士),曾担任新浪网的后端开发工程师,担任过美团的高级后端开发工程师;
负责过百度实时流计算平台基建,美团短视频/小说千万级DAU推荐服务与RTA/RTB广告投放引擎重构,以及新浪小视频/绿洲推荐系统向量召回与在线训练链路的开发;
熟练使用C++,Java/Golang,Vue/React,Flink/K8S,Redis/MySQL/DuckDB;
如果我能帮上您的忙,请点击“立即预约”或“发布需求”!
工作经历
2023-11-01 -2026-06-15百度在线网络技术(北京)有限公司数据工程师
负责实时流计算平台的开发: 负责实时流计算平台的框架侧基建, 覆盖执行引擎、调度、算子开发模式与部署运维全链路 针对微批场景下的小文件问题进行合并优化, 减少小文件对存储系统的压力 引入DuckDB 作为新的执行引擎, 完成与原有框架的适配, 使用列式计算提升资源利用率(优化30% 成 本), 并将算子开发模式从C++ 升级为SQL, 算子迭代周期明显缩短 扩展多源Join 能力与常用格式转换UDF, 打通Redis/MySQL 等外部数据源与流内数据的实时关联 开发基于K8S 的部署运维服务, 支持算子DAG 的发布、扩缩容与运行态管理, 降低业务接入/运维成本
2021-10-01 -2023-11-01北京三快在线科技有限公司后端工程师
负责广告投放系统的设计与开发: 重构RTA 引擎核心链路, 单机QPS 由1000 提升至2500(+150%), 平响由40ms 降至30ms, 对应机器 成本下降约40% 从0 搭建广告预估能力, 打通特征生产到模型推理全流程, 支持本地XGBoost 与远端TensorFlow Serv- ing 双模式 设计并实现正排物料的双版本离散存储方案, 解决Redis 热点key 问题 从0 搭建RTB 广告服务, 基于Closure 扩展出统一的同步/异步Handler 规范与对象池, 为后续业务迭 代提供稳定底座
2019-07-01 -2021-10-01新浪网技术(中国)有限公司算法工程师
负责视频推荐策略的算法迭代以及推荐系统的开发与运维: 基于Eigen/自研PS 服务重构FM 模型在线训练(原Flink 实现), 衔接TensorFlow 训练链路, 训练吞吐 与资源利用率显著提升 基于Faiss 构建向量召回体系, 支持物料向量离线建库与用户向量在线召回, 解决原服务因索引切换引发 的接口尖峰; 冷启动链路引入PID 流量控制, 保量曝光完成率提升至98% 优化标签倒排召回引擎的存储结构(pb 懒解码+TTL Cache), 单机物料容量+20%; 针对TensorFlow Serving 裁剪User 特征传输, HTTP 接口耗时下降30% 使用Golang(Echo) 重构原Python 物料工程, 物料更新时效从分钟级提升至秒级
教育经历
2016-09-01 - 2019-01-15北京航空航天大学计算机科学与技术硕士
2011-09-01 - 2015-07-01东北财经大学数学本科



