【GoldenDB】基于Etcd的分布式中间件元数据管理方法、设备及存储介质_CN202410421211.6_金篆信科有限责任公司.PDF
免费下载
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202410421211 .6
(22)申请日 2024 .04 .09
(71)申请人 金篆信科有限责任公司
地址 100176 北京市大兴区北京经济技术
开发区科谷一街10号院8号楼18层(北
京自贸试验区高端产业片区亦庄组
团)
(72)发明人 袁锐 朱柯见
(74)专利代理机构 南京利丰知识产权代理事务
所(特殊普通合伙) 32256
专利代理师 艾中兰
(51)Int.Cl .
G06F
16/27
(2019 .01)
G06F
16/22
(2019 .01)
(54)发明名称
基于Etcd的分布式中间件元数据管理方法、
设备及存储介质
(57)摘要
本申请提供了一种基于Etcd的分布式中间
件元数据管理方法、设备及存储介质，该方法基
于Etcd键值存储系统存储关键元数据信息，结合
多个Etcd节点和多个管理节点的集群部署，利用
Etcd节点数据版本号作为中间件元数据管理的
版本标识实现版本控制和同步，利用Etcd的订阅
发布机制实现元数据变更的广播通知，实现跨节
点的元数据同步，确保元数据管理的一致性和及
时性，对分布式环境具有高度适应性，能够有效
处理节点故障引起的数据同步问题，轻松应对不
断增长的数据规模。
权利要求书2页 说明书7页 附图5页
CN 118296077 A
2024.07.05
CN 118296077 A
1 .一种基于 Etcd 的分布式中间件元数据管理方法，其特征在于，包括：
元数据全量加载，包括：
管理节点集群向Etcd集群请求并获取元数据；
元数据变更推送增量，包括：
在线执行器接收DDL变更请求，发送给随机选择的一第一管理节点；
第一管理节点在Etcd节点上持久化数据变更，记录Etcd节点数据版本号作为元数据变
更记录版本号；
第一管理节点利用Etcd的订阅发布机制广播元数据变更任务；
管理节点集群中的其他管理节点利用Etcd的订阅发布机制接收元数据变更任务，分别
向其在线执行器推送；
其他管理节点的在线执行器响应元数据变更任务推送，应用增量更新；
第一管理节点更新Etcd节点中的变更任务信息；
第一管理节点检查是否收到所有其他管理节点的响应信息，将广播结果反馈给发送
DDL变更请求的在线执行器；
元数据定时比对变更，包括：
在线执行器定时发送本地元数据信息给其管理节点，本地元数据信息包括本地元数据
的压缩包、变更记录版本号及快照；
管理节点将本地元数据快照的哈希值与管理节点当前元数据快照的哈希值进行比对；
当哈希值不一致，管理节点解压缩本地元数据，比对每一条变更记录，根据变更记录版
本号是否一致决定是否向其在线执行器推送元数据变更任务；
在线执行器响应元数据变更任务推送，应用增量更新。
2 .如权利要求1所述的基于 Etcd 的分布式中间件元数据管理方法，其特征在于，还包
括断链恢复检查元数据：当在线执行器与其管理节点发生断链并重新连接时，在线执行器
主动发起增量比对，以对齐元数据。
3 .如权利要求2所述的基于 Etcd 的分布式中间件元数据管理方法，其特征在于，在线
执行器主动发起增量比对，以对齐元数据，包括：
在线执行器发送本地元数据变更记录版本号及快照给其管理节点；
管理节点将本地元数据变更记录版本号、快照的哈希值分别与管理节点当前元数据变
更记录版本号、快照的哈希值进行比对；
当哈希值不一致或本地元数据变更记录版本号较旧，管理节点下发增量信息到在线执
行器；
在线执行器应用增量更新，确保元数据保持同步。
4 .如权利要求1所述的基于 Etcd 的分布式中间件元数据管理方法，其特征在于，元数
据变更推送增量还包括：第一管理节点创建一个任务节点用于监视元数据变更任务，任务
节点被管理节点集群中的所有管理节点监视。
5 .如权利要求4所述的基于 Etcd 的分布式中间件元数据管理方法，其特征在于，其他
管理节点的在线执行器响应元数据变更任务推送，应用增量更新后，还包括：
当其他管理节点收到其在线执行器元数据变更任务的响应，在任务节点中写入元数据
变更任务响应信息；
权 利 要 求 书
1/2 页
2
CN 118296077 A
2
of 15
免费下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
文档被以下合辑收录
评论