Asyncpy 异步请求框架开源项目

匿名用户2021年01月14日

7阅读

开发技术Python

所属分类应用工具、网络爬虫

授权协议Apache

作品详情

Asyncpy是基于asyncio和aiohttp开发的一个轻便高效的爬虫框架，采用了scrapy的设计模式，参考了github上一些开源框架的处理逻辑。

更多详细内容可参考demo， Asyncpy使用文档

查看全文

声明：本文仅代表作者观点，不代表本站立场。如果侵犯到您的合法权益，请联系我们删除侵权资源！如果遇到资源链接失效，请您通过评论或工单的方式通知管理员。未经允许，不得转载，本站所有资源文章禁止商业使用运营!

下载安装【程序员客栈】APP

实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

分类

推荐作品

爬冠状病毒新型肺炎疫情实时数据+数据持久化+邮件通知。数据源来自“丁香园” ：https://3g.dxy.cn/newh5/view/pneumonia_peopleapp?from=tim...

________ _________________ ___ __ \___________ /_____ /____________ __ / / / __ \ __...

一个轻量级的基于事件分发的爬虫框架。功能介绍基于完全自定义事件处理机制的爬虫框架。模块化的设计，提供强大的可扩展性。基于HttpClient支持同步和异步数据抓取。支持多线程。基于J...

AntNest 简明飞快的异步爬虫框架（python3.6+），只有600行左右的代码功能开箱即用的HTTP客户端提供Item extractor, 可以明确地声明如何从response解...

WebCollector-Python WebCollector-Python 是一个无须配置、便于二次开发的 Python 爬虫框架（内核），它提供精简的的 API，只需少量代码即可实现一个功...

我也要上传

点击空白处退出提示

您好 👋

我们能提供什么帮助？

向我们发送消息

常见问题、使用帮助、人工咨询等

使用微信扫一扫