




个人介绍
6年python开发经验,擅长web开发,数据采集&分析&挖掘&可视化,大数据开发。
技术栈:
Web:django,flask,fastapi
数据分析:numpy,pandas,polars
数据挖掘&可视化:Sklearn,pytorch,matplotlib,redash
大数据:Hadoop,Hive,Spark,azkaban
其他:RDBMS,NoSQL,Redis,Nginx,Docker,Thrift
前端:简单Vue3
优势:条理清晰,沟通高效
工作经历
和TA聊聊APP扫码和程序员直接沟通

该用户选择隐藏工作经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看
教育经历
和TA聊聊APP扫码和程序员直接沟通

该用户选择隐藏教育经历信息,如需查看详细信息,可点击右上角“和TA聊一聊”查看
资质认证
技能

从0搭建大数据平台。fastapi定期ETL多个数据源多个层级&字段&类型的大量数据,日0.7tb。polars清洗入数据仓库HDFS ods,spark定期计算mds/sds数据存储Hive,Azkaban管理同步任务&计算任务,redash展示灵活透视表。 简单的ARMA预测模型预测业务未来走势,图表输出。推荐模型构建业务主特征,提高转化率和效率,指导销售工作。


aiohttp定时拉取多个平台不同数据源大量数据,清洗aiohttp快速入库。numpy + pandas计算导出透视表及各种日报/趋势类可视化图表echart。 千万级数据单机实时计算输出透视表。手动实现全量业务数据的类Excel自助透视表功能,支持导出。Sklearn计算各类基础指标,实现BI商业智能。
