dwlongs
6天前在线
全职 · 800/日  ·  17400/月
工作时间: 工作地点: 远程
服务企业: 0家累计提交: 0工时
联系方式:
********
********
********
聊一聊

使用APP扫码聊一聊

个人介绍

l 解决方案设计能力:

n 数据治理方案设计:精通 DAMA 数据治理框架、华为数据之道、精益数据治理方法论,覆盖数据标准、指标、标签、质量、元数据、主数据、资产目录、地图、需求、入湖、开发、服务、运维、分析与应用、运营的制度、规范、流程、工具的规划、方案设计、落地

n 业务需求分析与产品设计:擅长从业务场景中快速识别数据痛点,将需求拆解为场景、指标、数据源、时效及质量规则的可执行方案,并通过跨部门协同实现需求与业务目标精准对齐

n 数据模型设计:擅长从多个行业业务流程中抽象实体关系,运用范式建模、维度建模等方法论构建分层清晰、适配技术架构且嵌入质量规则的数据模型体系,涉及多个行业产、供、销、服相关数据模型,以支撑业务分析与数据资产化

n 大数据架构设计与实施:精通基于大数据开源技术栈、华为云、阿里云、Azure云等云原生服务设计流批一体、湖仓一体高可用、可扩展的大数据技术方案,涵盖数据采集、存储、计算、服务全链路,并实现性能优化与工程化落地

l 技术体系:

n 编程语言:精通SQL、Python、Java,熟悉shell、Scala、Javascript、Html等

n 大数据技术栈:深度掌握 Spark/Flink/Hive/Kafka/ClickHouse/Hadoop 生态,具备组件二开与性能优化经验(如 Flink Shuffle 优化、Spark SQL 优化等)

n 大数据云服务与工具链:熟悉Azure云Databricks和Synapse等,华为云数据治理平台DataArts、GaussDB和MRS、GaussDB等,阿里云E-MR、MaxCompute、DataWorks等云服务;熟悉FineBI、Tableau、QuickBI等BI工具

n 应用开发技术栈:Django、Flask、FastAPI、Springboot、Spring Cloud、Spring Securtiy、Docker、K8s、Devops工具链、日志监控与分析工具、serverless云原生技术

n 机器学习工程:熟悉常用机器学习算法、Scikit-learn、PyTorch、RAG、AI-agent、MCP的原理和应用场景

l 项目管理能力:

n 全周期流程管控:主导数据项目从需求分析、方案设计到开发交付的全流程,制定详细实施计划(如里程碑节点、资源分配),监控进度与质量,确保项目按 SLA 交付,成功落地多个 200W + 规模数据治理、数据平台等项目

n 多方协同与资源整合:协调开发、测试、客户等多团队,推动方案评审与决策落地(如跨部门需求对齐会、技术方案论证会),整合内外部资源(如云服务选型、开源组件二次开发),保障项目高效推进

n 风险预控与成本优化:提前识别需求变更风险与技术瓶颈(如计算性能、数据倾斜、存储压缩),制定应急预案(如 POC 验证、架构冗余设计);优化资源配置,平衡项目质量与成本

工作经历

  • 2016-12-20 -2025-04-30Thoughtworks数据架构师

    关键职责:解决方案设计+数据治理+技术架构设计+项目全周期交付 1、项目交付:独立负责带领团队完成了两个大型数据项目(200W-400W)解决方设计+技术架构设计与实施+项目管理工作,业务覆盖汽车、能源、制造等多个行业,涉及生产、财务、营销等 2、解决方案设计:负责多个数据产品应用方案设计、数据治理规划和详细方案设计、数据仓库模型设计与重构 3、技术实施:大数据平台技术架构设计与工程化实施、大数据开源组件(flink/spark/hadoop等)二开与性能优化、ETL开发与性能优化等

教育经历

  • 2008-09-01 - 2012-07-01西北农林科技大学信息管理与信息系统本科

语言

普通话
0
1
2
3
4
5
0
1
2
3
4
5

技能

HTML5
Vue
MySQL
Django
Hadoop
HDFS
0
1
2
3
4
5
0
1
2
3
4
5
更新于: 6天前 浏览: 14