个人介绍
本人专注于Python自动化开发方向,熟悉Python语言及网络数据采集技术,具备使用requests、BeautifulSoup、Playwright进行网页数据抓取和自动化处理的能力。熟悉数据清洗、Excel自动化处理以及文件管理等业务场景,能够根据需求开发自动化工具,提高工作效率。
具备独立完成项目设计、开发和优化的能力,拥有多个Python项目实践经验,包括网络热搜数据监控系统、图片资源自动采集系统、动态网页文章采集系统等。能够解决网页数据获取、动态页面处理、数据整理等实际问题。
工作经历
2024-11-01 -2026-06-01一号线商贸自动化工程师
岗位职责: 负责使用 Python 开发自动化工具,提高业务处理效率;根据业务需求完成数据采集、数据处理、文件自动化处理等功能开发;维护和优化已有脚本,提升程序稳定性。 工作内容: * 使用 Python 开发数据采集、自动化处理脚本; * 编写网络爬虫程序获取公开数据; * 处理 Excel、CSV 等业务数据; * 开发自动化办公工具,减少重复性工作; * 解决程序运行异常和数据处理问题。
2023-12-15 -2024-10-01上海云聚数据数据采集工程师
岗位职责: 负责业务数据收集、整理和加工,通过自动化方式提升数据处理效率,为运营和分析提供可靠数据。 工作内容: * 自动采集互联网公开数据; * 进行数据清洗、格式转换和去重处理; * 使用 Python 完成数据批量处理; * 输出 Excel 报表和数据文件; * 协助业务部门完成数据分析需求。
教育经历
2019-09-01 - 2023-06-01贵州大学科技学院计算机科学与技术本科
资质认证
语言

本项目主要实现动态网页文章自动采集功能。系统采用Playwright自动化浏览器技术,模拟真实用户访问网页行为,解决传统爬虫无法获取JavaScript动态加载内容的问题。程序能够自动打开掘金网站,通过模拟页面滚动触发文章加载,并提取文章标题和链接信息。系统支持数据去重处理,并利用openpyxl将

本项目主要实现网站高清图片自动采集与下载功能。系统通过requests库发送网络请求,获取目标网站页面数据;使用BeautifulSoup对网页HTML结构进行解析,自动提取图片详情页链接,并进一步获取高清原图地址。系统支持按照图片分类创建独立文件夹,实现图片分类保存。同时加入下载记录管理机制,通过




