内容简介:spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫 更新日志 新增Cookie自动管理功能 新增resp.links()、resp.images()、resp.title函数 新增url批量下载,不用先爬取再下载 新增string.last...
spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫
更新日志
- 新增Cookie自动管理功能
- 新增resp.links()、resp.images()、resp.title函数
- 新增url批量下载,不用先爬取再下载
- 新增string.lastIndexOf、thread.sleep()、list.filterStr函数
- 新增多函数执行方法
- 新增任务状态、任务执行记录
- 修复爬虫名称有空格时,tab页打不开的BUG
- 修复爬虫名称在编辑时未能获取到名称的BUG
- 优化对返回结果resp.json、resp.html进行缓存
- 优化请求延迟时间对第一次执行也生效
以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网
猜你喜欢:- 开源 | 2019 新型冠状病毒疫情实时爬虫
- spider-flow 0.4.0 发布,Java 开源爬虫平台
- spider-flow 0.4.1 发布,Java 开源爬虫平台
- spider-flow 0.4.2 发布,Java 开源爬虫平台
- spider-flow 0.5.0 发布,Java 开源爬虫平台
- spider-flow 0.1.0 发布,Java 开源爬虫平台
本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们。