首先明确目标,要爬取什么?
我们爬取王者荣耀的图片及信息
分析页面,查看我们要获取的信息的存放位置
确定了目标,编写spider.py
编写pipelines.py,自定义图片下载设置
编写middlewares.py,在请求每个页面时,需要做反反爬操作
最后配置settings.py
点击空白处退出提示
首先明确目标,要爬取什么?
我们爬取王者荣耀的图片及信息
分析页面,查看我们要获取的信息的存放位置
确定了目标,编写spider.py
编写pipelines.py,自定义图片下载设置
编写middlewares.py,在请求每个页面时,需要做反反爬操作
最后配置settings.py
评论