数据同步系统通过 OGG 复制 Oracle 的业务数据到 GBase 8a MPP Cluster,为了应对业务系统可能的峰值,在系统中加入 Kafka 消息队列作为缓冲区。总体流程如下:

OGG 发送端(GoldenGate Extract) 从 Oracle 的在线日志和归档日志中抽取事务信息, 生成 Trail 文件。 OGG 接收端(GoldenGate Replicat)收到 Trail 文件抽取事务
信息转换为目标格式,并生产事务消息到 Kafka。 Consumer 从 Kafka 中消费事务消息,将数据更新到 8a MPP Cluster 中。
Kafka consumer 的主要功能就是同步 Kafka 数据到 8a MPP Cluster:
1、根据配置,可以指定需要同步的业务;
2、在同步过程中,提供同步状态查询功能;
3、 实现数据同步的高可用性和事务数据一致性
「喜欢这篇文章,您的关注和赞赏是给作者最好的鼓励」
关注作者
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文章的来源(墨天轮),文章链接,文章作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。




