常爬爬网站,总有些害怕突然返回一个不是200的状态码,不是网不好,就是被反爬了,不过大多数网站还是蛮“友好”的,但难免还是会被网站封了IP,于是乎想到了前辈们说的代理ip池
.IP代理池的搭建及使用需要实现以下几点功能
1.找到合适的代理ip的网站(西刺代理)
2.解析网页获取ip
3.判断ip是否有效
4.读写数据
点击空白处退出提示
常爬爬网站,总有些害怕突然返回一个不是200的状态码,不是网不好,就是被反爬了,不过大多数网站还是蛮“友好”的,但难免还是会被网站封了IP,于是乎想到了前辈们说的代理ip池
.IP代理池的搭建及使用需要实现以下几点功能
1.找到合适的代理ip的网站(西刺代理)
2.解析网页获取ip
3.判断ip是否有效
4.读写数据
评论