Linkis 0.9.4 版本发布

栏目: 软件资讯 · 发布时间: 5年前

内容简介:什么是计算中间件Linkis Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、HiveQL、Scala等脚本的计算...

什么是计算中间件Linkis

Linkis是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、 Python 和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行 SQL 、Pyspark、HiveQL、Scala等脚本的计算中间件。

Linkis 0.9.4发布,新增统一上下文服务模块以及基于统一上下文服务模块对其他Linkis模块如执行服务、gateway、存储服务等进行改造;新增统一数据源服务模块,为上层接入Linkis的应用提供统一的数据源服务,现在已经有社区伙伴开始基于Linkis统一数据源进行服务开发;对Linkis公共包的依赖以及启动脚本进行了优化,同时修复了若干社区用户提出的bug。

特性增强

  • [Linkis-371] 添加上下文服务的客户端模块。

  • [Linkis-372] 支持上下文服务的搜索功能。

  • [Linkis-376] 添加上下文的服务端模块。

  • [Linkis-375] 支持上下文服务的持久化。

  • [Linkis-368] 添加上下文服务的缓存机制和数据结构模块。

  • [Linkis-428] Linkis执行模块基于上下文服务进行改造。

  • [Linkis-432] 添加上下文服务公共模块。

  • [Linkis-434] Linkis-gateway模块基于上下文服务进行改造,支持上下文服务器的HA。

  • [Linkis-388] http依赖模块的优化,去除dispatch依赖,并优化Linkis底层包的依赖。

  • [Linkis-395] 将ListenerBus的queue默认改为ArrayBlockingQueue的实现。

  • [Linkis-297] 添加数据源管理的公共模块。

  • [Linkis-298] 添加 mysql 数据库数据源管理模块。

  • [Linkis-299] 添加数据源管理服务端模块。

  • [Linkis-300] 添加Hive数据源服务模块。

  • [Linkis-301] 添加ElasticSearch数据源服务模块。

  • [Linkis-302] 添加数据源管理公共模块。

  • [Linkis-303] 添加数据源管理服务端模块。

Bug修复

  • [Linkis-406] 修改数据源模块的目录结构,优化编译。

  • [Linkis-407] 修复向导性建表中ds字段重复的bug。

  • [Linkis-383] 修改Linkis ujes client的测试类适配Linkis的更新。

  • [Linkis-438] Linkis0.9.4编译问题修复。

· 新贡献者

· Linkis0.9.4的发布,离不开WeDataSphere社区的贡献者,他们无私地贡献自己的代码,积极地与社区伙伴进行技术交流,有了他们的助力,Linkis0.9.4才能顺利地发布,在此感谢各位社区的贡献者! 排名不分先后:

liangqilang:贡献了httpclient替换dispatch的代码

Davidhua1996: 贡献了数据源管理的基础模块和功能实现.

zhengfan199525:添加了hive的数据源管理模块.

alexzyWu: 贡献了数据源管理的服务端模块.

jaminlu:优化了数据源管理的目录结构和编译.

bleachzk: 贡献了数据源管理的公共模块.

liaoyt:添加数据源管理的rest接口.

SelfImpr001: 贡献了数据源管理的部分内容.

Linkis开源项目地址如下,欢迎大家提交issue及star:

gitee地址:https://gitee.com/WeBank/Linkis

Github地址:https://github.com/WeBankFinTech/Linkis


以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

Remote

Remote

Jason Fried、David Heinemeier Hansson / Crown Business / 2013-10-29 / CAD 26.95

The “work from home” phenomenon is thoroughly explored in this illuminating new book from bestselling 37signals founders Fried and Hansson, who point to the surging trend of employees working from hom......一起来看看 《Remote》 这本书的介绍吧!

JSON 在线解析
JSON 在线解析

在线 JSON 格式化工具

RGB转16进制工具
RGB转16进制工具

RGB HEX 互转工具

UNIX 时间戳转换
UNIX 时间戳转换

UNIX 时间戳转换