数据处理方法、装置、设备和程序产品_CN119226320A_南大通用.pdf
免费下载
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202411748449.6
(22)申请日 2024 .12.02
(71)申请人 天津南大通用数据技术股份有限公
司
地址 300450 天津市滨海新区滨海科技园
高新六路39号2号楼2单元201-33号
(72)发明人 马凯旋
(74)专利代理机构 中科专利商标代理有限责任
公司 11021
专利代理师 尉静波
(51)Int.Cl.
G06F
16/242
(2019 .01)
G06F
16/2458
(2019 .01)
G06F
16/27
(2019 .01)
G06F
16/248
(2019 .01)
(54)发明名称
数据处理方法、装置、设备和程序产品
(57)摘要
本发明提供了一种数据处理方法、装置、设
备和程序产品，可以应用于分布式数据库技术领
域。该方法包括：获取查询语句的执行结果集合，
执行结果集合中的每个执行结果包括查询语句、
用于执行查询语句的分布式节点和查询语句执
行完成信息；在确定执行结果集合中的查询语句
执行完成信息符合预定完成类型的情况下，从执
行结果集合中确定与执行结果对应的目标分布
式节点；在目标分布式节点的任务执行数量大于
预设目标阈值的情况下，将目标分布式节点确定
为出错节点；在确定分布式集群中存在出错节点
所包括的分片对应的备份分片的情况下，将出错
节点下线。
权利要求书2页 说明书12页 附图4页
CN 119226320 A
2024.12.31
CN 119226320 A
1 .一种数据处理方法，其特征在于，所述方法包括：
获取查询语句的执行结果集合，其中，所述查询语句满足语句执行时间大于预设阈值，
所述执行结果集合中的每个执行结果包括查询语句、用于执行所述查询语句的分布式节点
和查询语句执行完成信息；
在确定所述执行结果集合中的查询语句执行完成信息符合预定完成类型的情况下，从
所述执行结果集合中确定与所述执行结果对应的目标分布式节点；
在所述目标分布式节点的任务执行数量大于预设目标阈值的情况下，将所述目标分布
式节点确定为出错节点，其中，所述任务执行数量表征查询语句执行完成信息符合预定完
成类型的执行结果数量；
在确定分布式集群中存在所述出错节点所包括的分片对应的备份分片的情况下，将所
述出错节点下线，其中，所述备份分片分布在所述分布式集群的除所述出错节点外的其他
节点上。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
确定所述出错节点中至少一个分片各自的分片信息；
基于所述分片信息，从所述分布式集群的所述其他节点中查询与所述至少一个分片一
一对应的至少一个备份分片；
在确定所述分布式集群的所述其他节点上存在所述至少一个备份分片的情况下，确定
在所述分布式集群中存在所述出错节点所包括的分片对应的所述备份分片。
3.根据权利要求1所述的方法，其特征在于，在将所述出错节点下线之前，所述方法还
包括：
对所述备份分片对应其他节点进行预定任务处理，得到任务处理结果；
基于所述备份分片对应其他节点的任务处理结果，确定所述备份分片的可用状态信
息，以便在所述备份分片的可用状态信息指示所述备份分片可用的情况下，将所述出错节
点下线。
4 .根据权利要求1所述的方法，其特征在于，所述方法还包括：
从所述执行结果集合中确定所述目标分布式节点的节点标识出现数量；
根据所述节点标识出现数量，确定所述任务执行数量。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在确定所述分布式集群的所述其他节点上不存在所述备份分片的情况下，将所述情况
存储于日志中。
6.根据权利要求1所述的方法，其特征在于，所述从所述执行结果集合中确定与所述执
行结果对应的目标分布式节点，包括：
从所述执行结果集合中确定与所述执行结果对应的初始分布式节点；
在基于所述初始分布式节点的状态参数确定所述初始分布式节点为网络运行正常的
情况下，将所述初始分布式节点作为所述目标分布式节点。
7 .根据权利要求1所述的方法，其特征在于，所述将所述出错节点下线包括：
将所述出错节点的分片的运行标识更新为下线标识。
8.一种数据处理装置，其特征在于，所述装置包括：
获取模块，用于获取查询语句的执行结果集合，其中，所述查询语句满足语句执行时间
权 利 要 求 书
1/2 页
2
CN 119226320 A
2
of 19
免费下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
评论