8.2 数据迁移产品
DataX 数据交换平台
DataX 是阿里巴巴开源的一款实用产品,项目地址:https://github.com/alibaba/datax。
DataX 是阿里云 DataWorks 数据集成的开源版本,是在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。
DataX 实现了包括 OceanBase、MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS 等各种异构数据源之间高效的数据同步功能。
Canal 数据增量工具
Canal 也是阿里巴巴开源的一款数据同步产品,项目地址:https://github.com/alibaba/canal。
Canal 主要用途是基于 MySQL 数据库增量日志解析,提供增量数据订阅和消费。基于日志增量订阅和消费的业务包括:
数据库镜像
数据库实时备份
索引构建和实时维护(拆分异构索引、倒排索引等)
业务 cache 刷新
带业务逻辑的增量数据处理
当前的 Canal 支持源端 MySQL 版本(包括 5.1.x、5.5.x、5.6.x、5.7.x 和 8.0.x)。
Canal 跟 DataX 结合可以实现将 MySQL 数据实时同步到 OceanBase 的 MySQL 租户中。
「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。




