一种元数据访问方法、装置和存储介质_CN115470008A_王淏舟;杨峻峰;冯雷_拓数派.pdf
免费下载
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202211418015.0
(22)申请日 2022.11 .14
(71)申请人 杭州拓数派科技发展有限公司
地址 311200 浙江省杭州市萧山区经济技
术开发区建设三路733号信息港五期
一号楼205-18
(72)发明人 王淏舟 杨峻峰 冯雷
(74)专利代理机构 杭州华进联浙知识产权代理
有限公司 33250
专利代理师 安威威
(51)Int.Cl.
G06F
9/50
(2006 .01)
G06F
9/54
(2006 .01)
(54)发明名称
一种元数据访问方法、装置和存储介质
(57)摘要
本申请涉及一种元数据访问方法、装置和存
储介质，该方法包括：将目标元数据的缓存数据
加载至第一内存中；所述目标元数据为元数据服
务中数据更新频次低于第一预设值且数据访问
频次高于第二预设值的元数据；响应于主节点的
元数据访问请求，将所述第一内存中的所述目标
元数据的缓存数据加载至所述主节点对应的从
节点的第二内存中；所述从节点读取所述第二内
存，以访问所述目标元数据。通过本申请减小了
元数据服务的访问压力，解决了现有技术中存在
的所有节点均需访问元数据服务导致元数据服
务负载高的问题。
权利要求书2页 说明书9页 附图4页
CN 115470008 A
2022.12.13
CN 115470008 A
1 .一种元数据访问方法，其特征在于，所述方法包括：
将目标元数据的缓存数据加载至第一内存中；所述目标元数据为元数据服务中数据更
新频次低于第一预设值且数据访问频次高于第二预设值的元数据；
响应于主节点的元数据访问请求，将所述第一内存中的所述目标元数据的缓存数据加
载至所述主节点对应的从节点的第二内存中；所述从节点读取所述第二内存，以访问所述
目标元数据。
2.根据权利要求1所述的元数据访问方法，其特征在于，所述将目标元数据的缓存数据
加载至第一内存中之前包括：
获取所述元数据服务中的目标元数据；
根据获取到的所述目标元数据，生成所述目标元数据的缓存数据。
3 .根据权利要求2所述的元数据访问方法，其特征在于，所述根据获取到的所述目标元
数据，生成所述目标元数据的缓存数据包括：
根据所述目标元数据的数据类型对所述目标元数据进行分类，获取类型信息；
对所述目标元数据进行特征提取；
对提取到的特征和分类后的目标元数据进行编码，得到编码数据；
根据所述编码数据和所述类型信息，生成所述缓存数据。
4 .根据权利要求2所述的元数据访问方法，其特征在于，所述根据获取到的所述目标元
数据，生成所述目标元数据的缓存数据包括：
获取所述目标元数据的版本信息，根据所述版本信息生成所述缓存数据。
5 .根据权利要求1所述的元数据访问方法，其特征在于，所述方法还包括：
响应于元数据服务发送的数据更新指令，获取所述从节点的任务的执行状态；所述数
据更新指令用于指示更新所述第一内存中存储的所述目标元数据的缓存数据；
根据所述执行状态，从所述第一内存中选择与所述执行状态对应的所述目标元数据的
缓存数据加载至所述从节点的所述第二内存中。
6 .根据权利要求5所述的元数据访问方法，其特征在于，所述根据所述执行状态，从所
述第一内存中选择与所述执行状态对应的所述目标元数据的缓存数据加载至所述从节点
的所述第二内存中包括：
当所述执行状态为所述从节点执行任务时，从所述第一内存中选择更新前的所述目标
元数据的缓存数据加载至所述从节点的所述第二内存中；
当所述执行状态为所述从节点空闲时，从所述第一内存中选择更新后的所述目标元数
据的缓存数据加载至所述从节点的所述第二内存中。
7 .根据权利要求1所述的元数据访问方法，其特征在于，所述方法还包括：
响应于从节点的接入请求，将所述第一内存的地址连接到待接入的从节点中。
8.根据权利要求1至权利要求7中任一项所述的元数据访问方法，其特征在于，所述从
节点为无状态计算节点。
9.一种元数据访问装置，其特征在于，所述装置包括：
第一加载模块，用于将目标元数据的缓存数据加载至第一内存中；所述目标元数据为
元数据服务中数据更新频次低于第一预设值且数据访问频次高于第二预设值的元数据；
访问模块，用于响应于主节点的元数据访问请求，将所述第一内存中的所述目标元数
权 利 要 求 书
1/2 页
2
CN 115470008 A
2
of 16
免费下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
评论