• 五星
  • 四星
  • 三星
  • 二星
  • 一星
(4)
北京 北京万能青年科技有限公司 总经理

1000元/天

可工作地点: 北京 远程

可工作时间: 工作日09:00-06:00、周末09:00-06:00

13
关注
4
粉丝
44
开始时间 :2018/03/14
验收时间 :  2018/04/23

使用技术:

Python3.6.5
Selenium
Chrome WebDriver
Celery
第三方打码服务
第三方收码服务

该项目是客栈推送的项目,是一个爬虫项目,由前端查询展示模块与后端爬虫模块组成。该爬虫项目的难点在于滑块验证码的破解和调度。

验证码破解方面我采用了 selenium 和 chrome webdriver 结合的方式,在调度方面使用了 celery 。数据库采用 mysql。
我在其中担任爬虫工程师,与客户的另一位员工配合完成项目的研发,项目的研发比较顺利,难点在于容错处理上,因为第三方打码和接码服务时长不稳定。该爬虫项目至今运行良好。