Scrapy 1.6.0 发布，Web 爬虫框架

栏目: 编程工具 · 发布时间: 5年前

内容简介：Scrapy 1.6.0 发布了，Scrapy 是一套基于 Twisted 的异步处理框架，纯 Python 实现的爬虫框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片。主要更新内容有：详细更新内容请看

Scrapy 1.6.0 发布了，Scrapy 是一套基于 Twisted 的异步处理框架，纯 Python 实现的爬虫框架，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片。

主要更新内容有：

更好的 Windows 支持；
兼容 Python 3.7；
文档更新，包括了从 .extract_first() + .extract() API 到 .get() + .getall() API 的转移；；
feed exports，FilePipeline 和 MediaPipeline 性能提升；
更好的可扩展性，包括 item_error 和 request_reached_downloader 信号、以及 from_crawler 对 feed exporters, feed storages 和 dupefilters 更好的支持；
scrapy.contracts 的修复和新特性；
telnet 终端安全性提升（作为 backport 首次发表在 Scrapy 1.5.2 (2019-01-22) ）；
清理已弃用代码，Bug 修复，其他新特性的新增等……

详细更新内容请看更新说明

下载地址：

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。

码农书籍

算法学

哈雷尔 / 第1版 (2006年2月1日) / 2006年2月1日 / 38.0

本书的意图在于按序学习或研究，而不是作为一个参考。因而按照每章依赖于前面章节的结构组织本书，且流畅易读。第一部分预备知识中的大部分材料对于那些具有程序设计背景的人是熟悉的。无论是否恰当，本书包含了计算机科学家当前感兴趣的研究专题的简明讨论。这本教科书的书后有每章详细参考书目的注记，并通过“后向”指针把教科书中的讨论与相关文献联系起来。目前的版本包含大量习题，以及大约三分之一的题解。可用题解作为教科......一起来看看《算法学》这本书的介绍吧!

码农工具

UNIX 时间戳转换

HEX HSV 转换工具

HEX HSV 互换工具