开始爬虫boss直聘时一直访问失败,发现是没有加入cookie数据造成的,加入cookie之后爬取4条数据便又失效了,随后通过selenium自动控制浏览器绕过Boss直聘网站的反爬虫,爬取数据后保存至mongodb。
点击空白处退出提示
演示地址
https://blog.csdn.net/beyond_LYC/article/details/1
开始爬虫boss直聘时一直访问失败,发现是没有加入cookie数据造成的,加入cookie之后爬取4条数据便又失效了,随后通过selenium自动控制浏览器绕过Boss直聘网站的反爬虫,爬取数据后保存至mongodb。
评论