spider-flow 0.5.0 发布,Java 开源爬虫平台

栏目: 软件资讯 · 发布时间: 4年前

内容简介:spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫。 本次更新内容如下: 新增注释节点 新增字符串反转义函数 新增属性窗口切换靠右/靠底 新增消息通知功能(任务启动通知、任务停止通知) 新...

spider-flow 是一个无需写代码的爬虫平台,通过定义流程的方式制定爬虫。 

本次更新内容如下:

  • 新增注释节点
  • 新增字符串反转义函数
  • 新增属性窗口切换靠右/靠底
  • 新增消息通知功能(任务启动通知、任务停止通知)
  • 新增自动重试功能
  • 新增自动去重功能
  • 新增流程历史版本记录
  • 新增rest服务异步启动、查看状态、停止接口
  • 新增长任务模式
  • 新增输出节点可选编码格式
  • 新增函数elementsVar.htmls、outerHtmls、texts、attrs、ownTexts、wholeTexts等方法
  • 修复全局参数回显不出值的BUG
  • 修复删除任务时未停止任务的BUG
  • 修复日志下载内容为空的BUG
  • 修复输出csv文件被锁定的问题
  • 优化编辑器可跨页面/tab复制粘贴节点
  • 优化循环,增加开始位置、结束位置、循环次数或集合,循环下标等
  • 优化页面样式
  • 优化文档

ocr插件

  • 优化配置,单独提取出配置列表(与数据源类似)

mailbox插件

  • 优化配置,单独提取出配置列表(与数据源类似)

产品规划

从v0.6.0版本起前端将改用vue重构,有兴趣的小伙伴可以联系我~

截图

spider-flow 0.5.0 发布,Java 开源爬虫平台

spider-flow 0.5.0 发布,Java 开源爬虫平台

spider-flow 0.5.0 发布,Java 开源爬虫平台

spider-flow 0.5.0 发布,Java 开源爬虫平台

Github 

https://github.com/javamxd/spider-flow 


以上所述就是小编给大家介绍的《spider-flow 0.5.0 发布,Java 开源爬虫平台》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

APP蓝图

APP蓝图

吕皓月 / 清华大学出版社 / 2015-1-1 / 69.00

移动互联网原型设计,简单来说,就是使用建模软件制作基于手机或者平板电脑的App,HTML 5网站的高保真原型。在7.0 之前的版本中,使用Axure RP进行移动互联网的建模也是可以的。比如,对于桌面的网站模型,制作一个1024像素宽度的页面就可以了;现在针对移动设备,制作320像素宽度的页面就好了。但是在新版本的Axure RP 7.0 中,加入了大量对于移动互联网的支持,如手指滑动,拖动,横屏......一起来看看 《APP蓝图》 这本书的介绍吧!

HTML 压缩/解压工具
HTML 压缩/解压工具

在线压缩/解压 HTML 代码

XML、JSON 在线转换
XML、JSON 在线转换

在线XML、JSON转换工具

RGB HSV 转换
RGB HSV 转换

RGB HSV 互转工具