这是一个纯后台的脚本
目的
获取深圳住建局官网上发布的各种通知通告文件
模块设计
1. 网页源码爬取
2. 源码内容分析,提取下载的附件链接
3. 文件保存
我的任务
通过爬取指定的网页,以及网页中可以跳转的其他网页,进行递归爬取,分析关键字以及附件类型,提取目标附件链接,然后下载到本地指定的目录中
点击空白处退出提示
这是一个纯后台的脚本
目的
获取深圳住建局官网上发布的各种通知通告文件
模块设计
1. 网页源码爬取
2. 源码内容分析,提取下载的附件链接
3. 文件保存
我的任务
通过爬取指定的网页,以及网页中可以跳转的其他网页,进行递归爬取,分析关键字以及附件类型,提取目标附件链接,然后下载到本地指定的目录中
评论