暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

第八章:OceanBase 生态工具介绍 8.2 数据迁移产品

106

8.2 数据迁移产品


DataX 数据交换平台

DataX 是阿里巴巴开源的一款实用产品,项目地址:https://github.com/alibaba/datax

DataX 是阿里云 DataWorks 数据集成的开源版本,是在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。

DataX 实现了包括 OceanBase、MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS 等各种异构数据源之间高效的数据同步功能。


Canal 数据增量工具

Canal 也是阿里巴巴开源的一款数据同步产品,项目地址:https://github.com/alibaba/canal

Canal 主要用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费。基于日志增量订阅和消费的业务包括:

  • 数据库镜像

  • 数据库实时备份

  • 索引构建和实时维护(拆分异构索引、倒排索引等)

  • 业务 cache 刷新

  • 带业务逻辑的增量数据处理

当前的 Canal 支持源端 MySQL 版本(包括 5.1.x、5.5.x、5.6.x、5.7.x 和 8.0.x)。

Canal 跟 DataX 结合可以实现将 MySQL 数据实时同步到 OceanBase 的 MySQL 租户中。

「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

评论