



个人介绍
我是程序员客栈的小瑞,一名爬虫工程师;
毕业与安徽新华学院;
掌握Python爬虫开发,熟悉JavaScript,熟悉HTTP协议,熟悉MySQL,掌握Scrapy、BeautifulSoup框架及反爬策略应对,熟练xpath和re解析库,了解CSS
工作经历
2024-11-04 -2025-02-05铭新扬科技有限公司后端开发
提供数字化解决方案,助力客户实现业务升级。在该公司担任后端开发期间,我深度参与项目架构设计,基于 Python 技术栈,运用 Django 框架搭建高性能后端服务,保障系统稳定运行;负责数据库优化,通过合理设计表结构、编写高效 SQL,提升数据读写效率;参与接口开发与维护,协同前端团队完成数据交互联调,同时运用爬虫技术(如 requests、BeautifulSoup 等库 )采集行业公开数据,为业务分析提供数据支撑,推动项目高效落地。
教育经历
2021-09-06 - 2025-06-13安徽新华学院智能科学与技术本科
资质认证
技能

本项目聚焦于爬取 PulteGroup 招聘网站(https://pultegroup.wd1.myworkdayjobs.com/PGI )的招聘数据 。运用 Python 语言,结合 requests 库模拟浏览器发起网络请求,通过 Session 维持会话状态,先访问目标页面获取关键的 X - Calypso - Csrf - Token ,借助该 Token 构建合法请求头,携带 User - Agent 模拟真实浏览器环境、以 application/json 规范数据传输类型,保障请求的有效性与合规性 。后续计划基于 BeautifulSoup 解析页面,提取招聘岗位名称、职责、要求等信息,还将实现动态翻页逻辑,全面采集站点内的招聘数据,为招聘信息分析、市场人才需求调研等场景,提供精准、结构化的数据源支持 。
