开源大数据流水线系统 PiFlow V0.9 发布

栏目: 软件资讯 · 发布时间: 3年前

内容简介:PiFlow是一个基于分布式计算框架Spark开发的大数据流水线系统。该系统将数据的采集、清洗、计算、存储等各个环节封装成组件,以所见即所得方式进行流水线配置。简单易用,功能强大。本次版本更新如下特性: 增加可...

开源大数据流水线系统 PiFlow V0.9 发布

PiFlow是一个基于分布式计算框架Spark开发的大数据流水线系统。该系统将数据的采集、清洗、计算、存储等各个环节封装成组件,以所见即所得方式进行流水线配置。简单易用,功能强大。本次版本更新如下特性:

  1. 增加可视化分析功能,包括线性图、柱状图、饼状图、散点图;
  2. 增加可编程特性,无缝衔接上下游组件,按需在线开发和调试;
  3. 增加多语言特性,支持Scala、 PythonShell 等多种语言的编程;
  4. 增加Spark依赖jar包管理

Gitee地址: https://gitee.com/opensci/piflow
GitHub地址: https://github.com/cas-bigdatalab/piflow

1)可视化分析

开源大数据流水线系统 PiFlow V0.9 发布

开源大数据流水线系统 PiFlow V0.9 发布

开源大数据流水线系统 PiFlow V0.9 发布

开源大数据流水线系统 PiFlow V0.9 发布

开源大数据流水线系统 PiFlow V0.9 发布

2)可编程+多语言

开源大数据流水线系统 PiFlow V0.9 发布

开源大数据流水线系统 PiFlow V0.9 发布

3)Spark jar包管理

开源大数据流水线系统 PiFlow V0.9 发布


以上所述就是小编给大家介绍的《开源大数据流水线系统 PiFlow V0.9 发布》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

结网

结网

王坚 / 人民邮电出版社 / 2010-4 / 55.00元

本书作者一直从事互联网产品的研究和实战,经验丰富,同时作为导师,指导了大量优秀的产品经理,本书的内容也是作者8年来培养产品经理新兵的经验集萃。如果你缺乏培养产品经理的教材,本书正好总结了产品经理知识体系,无疑是你很好的选择。 本书覆盖了相当全面的互联网知识,对于想要了解互联网行业或想要借助互联网进行营销的人来说,都是很好的入门读物。 本书并不是一本完善的互联网创业指南,而是写给胸怀互联......一起来看看 《结网》 这本书的介绍吧!

CSS 压缩/解压工具
CSS 压缩/解压工具

在线压缩/解压 CSS 代码

URL 编码/解码
URL 编码/解码

URL 编码/解码

正则表达式在线测试
正则表达式在线测试

正则表达式在线测试