扶光
8小时前在线
全职 · 800/日  ·  17400/月
工作时间: 工作日11:00-15:00、周末09:00-18:00工作地点:
服务企业: 0家累计提交: 0工时

APP聊一聊

个人介绍

我是程序员客栈的扶光,一名Python开发工程师; 我毕业于唐山学院,担任过万象新动的Python开发工程师,担任过贵士的Python开发工程师; 负责过多个平台的数据采集项目的开发与维护; 熟练使用python,js逆向,plqywright,rag,langchain; 如果我能帮上您的忙,请点击“立即预约”或“发布需求”!

工作经历

  • 2020-04-27 -至今贵士python工程师

    1. 负责企业数据采集系统核心模块开发与维护,包括采集任务、数据清洗及任务调度功能。 2. 负责动态网页采集方案实现,处理登录状态维护、分页加载、异步请求及反爬兼容等问题。 3. 负责 Playwright/Selenium 自动化采集流程开发,优化浏览器实例复用与 Cookie 持久化机制,降低频繁登录带来的任务失败问题。 4. 负责 Redis + Celery 异步任务调度,实现批量任务执行、失败重试及任务状态监控。 5. 负责数据清洗与结构化处理,对采集结果进行字段统一、异常过滤及格式标准化。 6. 负责 FastAPI 数据接口开发,为内部系统提供统一数据服务能力。 7. 参与系统性能优化与稳定性维护,提升长时间运行场景下的任务成功率与可维护性。

教育经历

  • 2013-09-01 - 2017-06-30唐山学院计算机科学与技术本科

语言

中文母语水平
英语借工具书面交流
0
1
2
3
4
5
0
1
2
3
4
5

技能

Python精通
0
1
2
3
4
5
作品
企业级数据采集与自动化处理平台

支持动态网页、分页数据、异步接口等多种类型的数据采集。支持Cookie持久化、浏览器实例复用,减少频繁登录带来的失效问题。支持定时任务、批量任务、失败重试及任务状态监控。对采集结果进行结构化处理、字段映射及异常数据过滤。提供统一的数据查询接口,支持第三方系统调用。支持任务日志记录、异常报警及运行状态

0
2026-05-08 15:46
更新于: 9小时前 浏览: 1