CloudCanal 社区版正式发布 1.0.1，支持数据校验与数据订正并修复若干问题

内容简介：CloudCanal是一款由ClouGence发行的集结构迁移、数据全量迁移/校验/订正、增量实时同步为一体的数据迁移同步平台。产品包含完整的产品化能力，助力企业打破数据孤岛、完成数据互融互通，从而更好的使用数据。 版本...

CloudCanal是一款由ClouGence发行的集结构迁移、数据全量迁移/校验/订正、增量实时同步为一体的数据迁移同步平台。产品包含完整的产品化能力，助力企业打破数据孤岛、完成数据互融互通，从而更好的使用数据。

版本发布

CloudCanal社区版1.0.1正式发布

新特性

• 创建任务支持批量裁剪列
• 支持MySQL->MySQL数据源数据校验、订正任务
• 支持数据校验和数据订正任务的重跑
• 无主键无唯一键表也支持update delete
• 支持用户自定义配置异步任务调度相关参数
• parser新增监控项：增量数据处理与写入队列发布延迟
• 支持oracle->oracle迁移
• 支持pg->pg 无嵌套结构的array类型结构迁移和同步
• 新增约束冲突处理策略，针对pg/tidb为对端时，发生duplicated key时支持insert转update逻辑
• 新增kafka commit log

BUG FIX&优化

• 内核获取列meta信息性能优化
• 优化页面展示数据源顺序，优先展示使用频次高的数据源
• 修复polardb reader读取时cpu load异常偏高的问题
• 修复任务状态展示异常问题
• Oracle->Oracle结构迁移采用新的schema体系
• ES写入优化，单主键表使用主键作为默认_id值
• 修复由于没有获取时间精度、timeformat等ES结构迁移异常
• 优化oracle 物化视图drop index逻辑
• 修复ClickHouse写入null值问题
• 修复mysql->ck无主键表结构迁移问题
• 修复mysql->pg结构迁移中约束中列的映射问题
• 隐藏资源限制相关无效页面
• 修复mysql->tidb同步时schema is null的问题

关联资料

CloudCanal Release信息汇总

CloudCanal安装使用文档(含下载地址)

MySQL到ClickHouse实时同步-CloudCanal实战

以上就是本文的全部内容，希望对大家的学习有所帮助，也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

• 4 万字全面掌握数据库、数据仓库、数据集市、数据湖、数据中台
• 数据映射如何支持数据转换和数据集成？
• 大数据产品经理必备的数据挖掘知识概述（一）认识数据之数据可视化
• 避免“数据湖”成为“数据沼泽”，流动的“数据河”是关键
• Oracle数据库查询重复数据及删除重复数据方法
• Redis数据持久化、数据备份、数据的故障恢复

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。