spider-flow 0.4.1 发布,Java 开源爬虫平台

栏目: 软件资讯 · 发布时间: 6年前

内容简介:spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫 新增ForkJoin执行器(用于等待之前的节点结束) 新增日志下载功能 #I1BQ35 新增docker部署 移除LoopJoin执行器,用ForkJoin代替 修复输出csv文...

spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫  

  • 新增ForkJoin执行器(用于等待之前的节点结束)
  • 新增日志下载功能 #I1BQ35
  • 新增 docker 部署
  • 移除LoopJoin执行器,用ForkJoin代替
  • 修复输出csv文件没有表头的问题
  • 修复最大线程数为1时爬虫不执行的问题
  • 修复strVar.xpath方法无法获取内容的问题
  • 修复修复节点形成递归时判断其是否结束的BUG
  • 修复前端日志打印不完整的BUG
  • 优化sidebar,取消滚动条,改为自适应 #I1BQ5

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

挑战编程

挑战编程

斯基纳 / 刘汝佳 / 2009-7 / 39.00元

《挑战编程:程序设计竞赛训练手册》分为14章,分别介绍在线评测系统的基本使用方法、数据结构、字符串、排序、算术与代数、组合数学、数论、回溯法、图遍历、图算法、动态规划、网格、几何,以及计算几何,并在附录中介绍了一些著名的程序设计竞赛以及相应的备赛建议与比赛技巧。每章的正文用十余页的篇幅覆盖了该领域最核心的概念和算法,然后给出八道可在线提交的完整编程挑战题目供读者练习。 全书内容紧凑、信息量大......一起来看看 《挑战编程》 这本书的介绍吧!

RGB转16进制工具
RGB转16进制工具

RGB HEX 互转工具

HTML 编码/解码
HTML 编码/解码

HTML 编码/解码

UNIX 时间戳转换
UNIX 时间戳转换

UNIX 时间戳转换