运维工程师中文母语水平
0
1
2
3
4
5
工作经历
2024-06-30 -2025-12-31自由职业者运维工程师
1. 负责电商平台、社交媒体等网站的数据采集需求，设计并实现高可用的爬虫系统 2. 分析目标网站反爬机制，制定对应的反反爬策略，保障爬虫稳定性和数据完整性 3. 维护爬虫代理池和任务调度系统，优化爬虫性能，降低被封禁概率 4. 对采集的数据进行清洗、去重、结构化处理，输出标准化数据格式
教育经历
2020-08-20 - 2024-06-30电子科技大学计算机科学与技术本科
语言
技能
Python精通
0
1
2
3
4
5
作品
案例使用了 ddddocr开源项目进行图片识别和处理。 使用DrissionPage进行自动化操作，目前大多数网站还无法对DrissionPage工具进行特征检测，无法进行有效的反扒。 Drissionpage的listen组件，可以进行网页请求监听，无需js逆向就可以拿到数据，同时还能自动化处理非常6 DrissionPage==4.0.5.6 ddddocr==1.5.5
02024-09-09 15:34
下载次数：0
￥3
