实现不同筛选条件的电影爬取
代码部分安装requests包(在cmd命令行中输入以下语句进行自动下载安装):
前提需要电脑上已经装有python且配置了环境变量
pip install -i https://pypi.tuna.tsinghua.edu.cn/simple requests
import requests
url = 'https://fanyi.baidu.com/sug'
headers = {
'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/98.0.4758.102 Safari/537.36 Edg/98.0.1108.56'
}
UA伪装:可以理解为将我们的爬虫程序伪装起来,增加请求成功的可能性。
只需在数据包的标头中,拉到最下面,即可以找到这个User-Agent,将其复制下来,像小编一样在python用字典进行封装即可确定参数,并对数据接口发起请求获得返回结果
点击空白处退出提示












评论