暂无图片
多个平台MySQL数据库到单套kafka集群通过canal做同步,这个架构怎么搭建比较好?
我来答
分享
快go💨
2022-01-10
多个平台MySQL数据库到单套kafka集群通过canal做同步,这个架构怎么搭建比较好?

我目前是把canel放到kafka集群节点,目前同步量级比较小,后期量上来了,感觉会扛不住

我来答
添加附件
收藏
分享
问题补充
3条回答
默认
最新
严少安
暂无图片

kafka至少三节点的集群,硬盘要速度快,容量大,kafka里java相关的参数肯定要调整。
另外最好考虑增量模式,全量模式可能会浪费磁盘空间。

暂无图片 评论
暂无图片 有用 1
暂无图片
薛晓刚

你担心扛不住是担心canel还是kafka?

理论上canel解析binlog,变化多少传多少,就和从库一样。如果这个也有压力,那么主从也是问题。

如果担心kafka不行。kafka最佳实践就是ssd硬盘多节点,往上加。


还有就事要问多个MySQL到kafka就结束了?

ogg可以直接从mysql到kafka,甚至直接到你后面最终的终点。

暂无图片 评论
暂无图片 有用 1
快go💨

主要是担心kafka

暂无图片 评论
暂无图片 有用 0
回答交流
提交
问题信息
请登录之后查看
邀请回答
暂无人订阅该标签,敬请期待~~
暂无图片墨值悬赏