crawl-me 轻量级网页图片下载工具开源项目

我要开发同款
匿名用户2014年06月10日
21阅读
开发技术Python
所属分类应用工具、网络爬虫
授权协议MIT

作品详情

crawl-me是一个基于plugin的轻量级快速网页图片下载工具。crawl-me通过简单的命令行就可以用你想要的方式下载各个网站下的图片。目前暂时只支持gamersky(游明星空),pixiv(P站),更多plugin尽请期待,欢迎为它添加新的plugin。

特性

 

支持Httprange-headers并发分段下载,速度更快支持添加plugin自定义新的行为,例如添加对微博用户相册下载的支持

现有的插件

 

pixiv:P站图片下载插件,支持下载某P主所有作品gamersky:游明星空图库下载插件,支持下载游民星空图库中的某一个专题的所有图片

如何使用?

下载gamersky下的https://www.gamersky.com/ent/201404/352055.shtml 的第1页到第10页的所有图片到当前目录的gamersky-crawl文件夹下

crawl-megamerskyhttps://www.gamersky.com/ent/201404/352055.shtml./gamersky-crawl110

一键下载P站藤原桑的所有作品到pixiv-crawl文件夹(藤原桑的id是27517)

crawl-mepixiv27517./pixiv-crawl<yourpixivloginid><yourpassword>

 

 

 

 

查看全文
声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论