Scrapy 2.3.0 发布，Python 爬虫框架

内容简介：Scrapy 2.3.0 发布了。Scrapy 是一套基于 Twisted 的异步处理框架，纯 Python 实现的爬虫框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片。 此版本主要更新亮点包括： ...

Scrapy 2.3.0 发布了。Scrapy 是一套基于 Twisted 的异步处理框架，纯 Python 实现的爬虫框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片。

此版本主要更新亮点包括：

• Feed 导出现在支持 Google Cloud Storage 作为存储后端

• 新的 FEED_EXPORT_BATCH_ITEM_COUNT 设置允许分批交付输出条目，最多不超过指定数量的条目

• 条目加载程序的基本实现已移至单独的库 itemloaders，从而允许从 Scrapy 外部使用，也具有单独的发布时间表

更新说明：

https://github.com/scrapy/scrapy/releases/tag/2.3.0

以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

• 超级易懂爬虫系列之爬虫框架scrapy
• python网络爬虫（14）使用Scrapy搭建爬虫框架
• 一个咸鱼的python爬虫之路（五）：scrapy 爬虫框架
• 11、web爬虫讲解2—Scrapy框架爬虫—Scrapy使用
• Scrapy框架-----爬虫
• 网络爬虫框架开发笔记

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。