内容简介:风铃虫是一款轻量级的高效爬虫工具,配置简单,方便二次开发,能抓取js渲染的网页,可以抓取任何数据,支持保存网页快照,智能防封杀,天然适合分布式。 本次版本是一个修复性版本,主要是为了解决与优化上一版中...
风铃虫是一款轻量级的高效爬虫工具,配置简单,方便二次开发,能抓取js渲染的网页,可以抓取任何数据,支持保存网页快照,智能防封杀,天然适合分布式。
本次版本是一个修复性版本,主要是为了解决与优化上一版中存在的一些问题,优化系统默认参数,并解决在运行过程中出现的线程安全问题。
本次更新内容如下:
- 修改默认请求超时时间为30秒
- 修改默认的线程数为单线程
- 解决 java 8中并行流引起的线程安全问题
本次更新特别感谢 @ supperfire 同学提出的宝贵意见,同时欢迎大家提出更多的使用意见,大家一起使用风铃虫变得更加完美。
以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网
猜你喜欢:- 风铃虫 2.0.0 发布,新增抓取深度限制
- 风铃虫 2.2.0 发布,优化任务停止机制
- 风铃虫 2.2.1 发布,新增数据传递功能
- 风铃虫 1.2.0 发布了,新增脚本提取功能
- 风铃虫 2.1.0 发布,支持多任务多线程
- 风铃虫 1.3.0 发布了,新增请求上下文
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
Python学习手册
Mark Lutz / 侯靖 / 机械工业出版社 / 2009-8 / 89.00元
《Python学习手册(第3版)》讲述了:Python可移植、功能强大、易于使用,是编写独立应用程序和脚本应用程序的理想选择。无论你是刚接触编程或者刚接触Python,通过学习《Python学习手册(第3版)》,你可以迅速高效地精通核心Python语言基础。读完《Python学习手册(第3版)》,你会对这门语言有足够的了解,从而可以在你所从事的任何应用领域中使用它。 《Python学习手册(......一起来看看 《Python学习手册》 这本书的介绍吧!