内容简介:风铃虫是一款轻量级的高效爬虫工具,配置简单,方便二次开发,能抓取js渲染的网页,可以抓取任何数据,支持保存网页快照,智能防封杀,天然适合分布式。 本次更新内容如下: 1 修复测试接口中传入参数异常时不能正...
风铃虫是一款轻量级的高效爬虫工具,配置简单,方便二次开发,能抓取js渲染的网页,可以抓取任何数据,支持保存网页快照,智能防封杀,天然适合分布式。
本次更新内容如下:
1 修复测试接口中传入参数异常时不能正常工作的bug。
2 优化多任务多线程时的同步机制,能更加灵活扩展
3 优化任务状态监控机制
4 优化任务停止逻辑,停止逻辑更加合理
5 其他一些bug优化
风铃虫平台效果演示
1 配置基本信息
2 配置链接爬取信息
3 配置站点信息
4 提取项配置
5 属性提取配置
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网
猜你喜欢:- 风铃虫 1.3.0 发布,修复若干 bug
- 风铃虫 2.0.0 发布,新增抓取深度限制
- 风铃虫 2.2.1 发布,新增数据传递功能
- 风铃虫 1.2.0 发布了,新增脚本提取功能
- 风铃虫 2.1.0 发布,支持多任务多线程
- 风铃虫 1.3.0 发布了,新增请求上下文
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。
HTML 编码/解码
HTML 编码/解码
XML、JSON 在线转换
在线XML、JSON转换工具