StreamX v1.2.1 发布，Flink 开发脚手架、流批一体平台

栏目: 软件资讯 · 发布时间: 4年前

内容简介：再过几日就是中国传统的农历新年，提前祝大家新年快乐。经过贡献者们的不懈努力，终于在春节来临之际，迎来了 StreamX 1.2.1 的正式发布，欢迎大家下载使用。 Gitee: https://gitee.com/streamxhub/streamx Gith...

再过几日就是中国传统的农历新年，提前祝大家新年快乐。经过贡献者们的不懈努力，终于在春节来临之际，迎来了 StreamX 1.2.1 的正式发布，欢迎大家下载使用。

Gitee: https://gitee.com/streamxhub/streamx

Github: https://github.com/streamxhub/streamx

StreamX 让流处理更简单，Flink & Spark 极速开发框架，流批一体一站式大数据平台。继上个版本支持 k8s 之后，本次重点功能是 Flink 任务构建 / 运行分离和本地上传Jar任务支持，并且在可用性和稳定性上得到了很大的提升。

新特性

本地上传 Jar 类型任务支持 #237
Flink K8s 自动集成 Hadoop 构建 #436
Flink 任务构建 / 运行分离 #437
项目支持修改 #650

[Flink 任务构建 / 运行分离]

改进

全新官网上线，文档重新归类
增加 Checkstyle 进一步规范编码格式 #480
优化打包，前后端可以混合|分离打包 #533
FlinkSql 任务自动检测pom依赖里的scala版本 #551
新增常用参数 yarn queue 设置 #596

Bug修复

修复构建项目时前端看不到实时日志的bug #458
修复 hadoop-user-name 不生效的bug #449
修复 Flink version 获取可能失败的bug #447
修复 Custom-Code 模式下选择 FatJar 存在的bug #473
修复不能添加系统角色的bug #467
修复 Flink 任务状态重启后不准确的bug #536
修复添加 Flink home 时软链接导致的bug #519
修复任务运行的结束时间错误的bug #516
修复 ddl sql 中的bug #487
修复 LfsOperator 中相关文件操作的bug#475
修复 ddl sql 中主键太长导致报错的bug #465
修复新增用户授权后重新登录空白页面的bug #583
修复 Editor 不能跟随系统主题同步切换的bug #620
修复任务参数 jvm-metaspace.size 单位错误的bug #562

鸣谢

特别感谢开源中国给予的认可, 感谢所有参与 StreamX 1.2.1 版本设计、开发、测试、讨论的社区贡献者们。特别感谢 jiezi2026 (张英杰) 提供的测试服务器。

贡献者 github id (排名不分先后)

wolfboys、Al-assad、xinzhuxiansheng、lvshaokang、monrg、Whojohn、leo65535、wuchunfu、Zclhlmgqzc、zhangjun0x01、haoziaigemao、BruceWong96

未来规划

目前 StreamX 已完成 Flink 任务的托管，这部分工作非常重要，感谢所有开发者们付出的努力。但这只是万里长征第一步，接下来的 1.3.0 中我们关注的重点是流式数仓(Streaming-Warehouse) 和 云原生(Cloud-Native)。计划会新增全新的开发工作台 - SQL Workbench(草稿、调试、预览、发布、锁定、版本管理...)具体请移步 1.3.0的 roadmap。

StreamX v1.2.1 发布，Flink 开发脚手架、流批一体平台

[ SQL Workbench Preview]

参与贡献

StreamX 遵循 Apache-2.0 开源协议，将会是个长期更新的活跃项目，自项目开源以来就受到很多同行的关注和认可，其中不乏业内大佬。目前在没有任何形式推广的情况下，靠口碑在不到一年的时间里已经累计 780+ star，于2021年11月荣获开源中国「最有价值开源项目」。随后荣获「2021 年度 OSC 中国开源项目评选」的「最受欢迎项目」，特别感谢开源中国给予的认可 ，我们坚信未来会更好。

流批一体，流式数仓，数据湖是大数据领域的趋势，StreamX 虽离这个目标还有一段距离，但我们始终坚信: 道阻且长，行则将至，行而不辍，未来可期。我们会进一步积极进取，相关功能持续迭代，进一步建设好社区，和所有社区小伙伴一起努力，让 StreamX 成为一个功能完善，体验更佳，用户更多的产品，可以被更多人认可。真诚欢迎热爱开源的伙伴加入到贡献中来，为做一个优秀实用的好项目献上一份自己的力量。