1
数据对象的存储方法、装置、设备及存储介质-CN117472870A-肖建光-武智晖-鲁楠-刘辉-王一同-邓星辰-李远哲-尚晶-陈卓-陈乐-中移动信息技术有限公司.pdf
免费下载
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202311385634 .9
(22)申请日 2023 .10.24
(71)申请人 中移动信息技术有限公司
地址 102209 北京市昌平区未来科学城英
才北三街16号院16号楼1006室
申请人 中国移动通信集团有限公司
(72)发明人 肖建光 武智晖 鲁楠 刘辉
王一同 邓星辰 李远哲 尚晶
陈卓 陈乐
(74)专利代理机构 北京东方亿思知识产权代理
有限责任公司 11258
专利代理师 尹婧
(51)Int.Cl.
G06F
16/182
(2019 .01)
G06F
16/172
(2019 .01)
G06F
16/16
(2019 .01)
H04L
67/1097
(2022 .01)
G06F
18/23213
(2023 .01)
(54)发明名称
数据对象的存储方法、装置、设备及存储介
质
(57)摘要
本申请公开了一种数据对象的存储方法、装
置、设备及存储介质，涉及数据湖技术领域。其方
法包括：获取至少一个待存储对象及各待存储对
象的对象编号，各对象编号与各待存储对象一一
对应，至少一个待存储对象为根据待存储数据文
件得到的数据对象；将至少一个待存储对象及各
待存储对象的对象编号，存储至对象存储服务器
中，并得到各待存储对象的元数据，各元数据用
于表征各待存储对象的存储位置；生成各元数据
的提交申请，并将各提交申请发送至提交队列，
提交队列指示各提交申请的执行顺序；基于提交
队列指示的执行顺序，响应于各提交申请，执行
各元数据的提交操作，各提交操作用于将各元数
据提交至对象存储服务器中。
权利要求书3页 说明书14页 附图4页
CN 117472870 A
2024.01.30
CN 117472870 A
1 .一种数据对象的存储方法，其特征在于，应用于集群服务器，所述集群服务器与对象
存储服务器连接，所述方法包括：
获取至少一个待存储对象及各所述待存储对象的对象编号，各所述对象编号与各待存
储对象一一对应，所述至少一个待存储对象为根据待存储数据文件得到的数据对象；
将所述至少一个待存储对象及各所述待存储对象的对象编号，存储至所述对象存储服
务器中，并得到各所述待存储对象的元数据，各所述元数据用于表征各所述待存储对象的
存储位置；
生成各所述元数据的提交申请，并将各所述提交申请发送至提交队列，所述提交队列
指示各所述提交申请的执行顺序；
基于所述提交队列指示的执行顺序，响应于各所述提交申请，执行各所述元数据的提
交操作，各所述提交操作用于将各所述元数据提交至所述对象存储服务器中。
2 .根据权利要求1所述的方法，其特征在于，所述获取至少一个待存储对象及各所述待
存储对象的对象编号，包括：
获取所述待存储数据文件；
将所述待存储数据文件按照预设的第一容量阈值进行切分，得到所述待存储数据文件
的至少一个待存储对象；
基于预设的编码规则，给各所述待存储对象分配唯一的对象编号，各所述对象编号用
于指示各所述待存储对象。
3 .根据权利要求1所述的方法，其特征在于，所述对象存储服务器，包括至少一个对象
存储子服务器，各所述对象存储子服务器配置有对象存储子服务器编号；
所述将所述至少一个待存储对象及各所述待存储对象的对象编号，存储至所述对象存
储服务器中，包括：
基于所述至少一个待存储对象的对象编号及预设数据分布规则，确定各所述待存储对
象映射的对象存储子服务器编号；
将各所述待存储对象及各所述待存储对象的对象编号，存储至各所述对象存储子服务
器编号的对象存储子服务器中。
4 .根据权利要求1所述的方法，其特征在于，所述集群服务器包括控制节点服务器和至
少一个工作节点服务器，所述控制节点服务器包括所述提交队列；
所述生成各所述元数据的提交申请，并将各所述提交申请发送至提交队列，包括：
各所述工作节点服务器生成各所述元数据的提交申请；
各所述工作节点服务器基于预设的提交策略将各所述提交申请发送至所述控制节点
服务器的提交队列，
所述提交策略包括写稀疏型策略和写密集型策略。
5 .根据权利要求4所述的方法，其特征在于，所述各所述工作节点服务器基于预设的提
交策略将各所述提交申请发送至所述控制节点服务器的提交队列，包括：
在所述提交策略为所述写稀疏型策略的情况下，各所述工作节点服务器直接将各所述
提交申请发送至所述控制节点服务器的提交队列。
6 .根据权利要求4所述的方法，其特征在于，所述各所述工作节点服务器基于预设的提
交策略将各所述提交申请发送至所述控制节点服务器的提交队列，包括：
权 利 要 求 书
1/3 页
2
CN 117472870 A
2
of 22
免费下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
文档被以下合辑收录
评论