Scrapy，Python开发的一个快速、高层次的屏幕抓取和web抓取框架，用于抓取web站点并从页面中提取结构化的数据。Scrapy用途广泛，可以用于数据挖掘、监测和自动化测试。 下面对每个组件都做了简单介绍，数据流如下所描述。作者：Treehl链接：https://www.jianshu.com/p/a6d3db78bbc9来源：简书著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。