CN117827836A-数据处理方法、装置、设备及存储介质_人大金仓.PDF
免费下载
(19)国家知识产权局
(12)发明专利申请
(10)申请公布号
(43)申请公布日
(21)申请号 202311864478 .4
(22)申请日 2023 .12.29
(71)申请人 北京人大金仓信息技术股份有限公
司
地址 100102 北京市朝阳区容达路7号院5
号楼1至3层101内二层201
(72)发明人 王飞 杨尚 孙文奇
(74)专利代理机构 北京同立钧成知识产权代理
有限公司 11205
专利代理师 李湘 臧建明
(51)Int.Cl.
G06F
16/22
(2019 .01)
(54)发明名称
数据处理方法、装置、设备及存储介质
(57)摘要
本申请提供一种数据处理方法、装置、设备
及存储介质。该方法包括：实时监控索引页面的
剩余容量以及目标索引数据集合中各目标索引
数据的数据量；其中，目标索引数据集中包括至
少一个目标索引数据；将目标索引数据集合中的
各目标索引数据依次设置为待存储的目标索引
数据；若索引页面的剩余容量小于或等于待存储
的目标索引数据的数据量，则对索引页面中存储
的索引数据以及待存储的目标索引数据进行去
重压缩处理，得到去重压缩处理后的索引数据；
并将去重压缩处理后的索引数据存储至索引页
面中；若索引页面的剩余容量大于待存储的目标
索引数据的数据量，则将待存储的目标索引数据
存储至索引页面中。本申请的方法，降低了索引
的容量占比。
权利要求书3页 说明书11页 附图2页
CN 117827836 A
2024.04.05
CN 117827836 A
1 .一种数据处理方法，其特征在于，包括：
实时监控索引页面的剩余容量以及目标索引数据集合中各目标索引数据的数据量；其
中，所述索引页面用于存储索引数据；其中，所述索引数据包括索引键以及索引值；所述索
引值用于表征数据行位置；其中，所述目标索引数据集中包括至少一个目标索引数据；
将所述目标索引数据集合中的各目标索引数据依次设置为待存储的目标索引数据；
若所述索引页面的剩余容量小于或等于待存储的目标索引数据的数据量，则对所述索
引页面中存储的索引数据以及所述待存储的目标索引数据进行去重压缩处理，得到去重压
缩处理后的索引数据；其中，所述去重压缩处理后的索引数据中包括至少一个索引元组；其
中，所述索引元组中包括：元组索引键以及元组索引键对应的元组索引值列表；其中，所述
元组索引值列表中包括至少一个元组索引值；并将所述去重压缩处理后的索引数据存储至
所述索引页面中；
若所述索引页面的剩余容量大于所述待存储的目标索引数据的数据量，则将所述待存
储的目标索引数据存储至所述索引页面中。
2 .根据权利要求1所述的方法，其特征在于，对所述索引页面中存储的索引数据以及所
述待存储的目标索引数据进行去重压缩处理，得到去重压缩处理后的索引数据，包括：
确定所述索引页面中存储的索引数据中是否包括历史索引元组；
若包括所述历史索引元组，则从所述历史索引元组中提取历史元组索引键，并根据所
述历史元组索引键，对所述索引页面中存储的其他索引数据以及所述待存储的目标索引数
据进行去重压缩处理，得到所述去重压缩处理后的索引数据；
若不包括所述历史索引元组，则将待存储的目标索引数据的索引键确定为预元组索引
键，并根据所述预元组索引键，对所述待存储的目标索引数据进行去重压缩处理，得到所述
去重压缩处理后的待存储的目标索引数据。
3 .根据权利要求2所述的方法，其特征在于，根据所述历史元组索引键，对所述索引页
面中存储的其他索引数据以及所述待存储的目标索引数据进行去重压缩处理，得到所述去
重压缩处理后的索引数据，包括：
将所述待存储的目标索引数据的索引键与所述历史元组索引键进行匹配；
若所述待存储的目标索引数据的索引键与所述历史元组索引键匹配成功，则将所述待
存储的目标索引数据保存至所述历史元组索引键对应的历史索引元组中，得到所述去重压
缩处理后的当前待存储索引数据；
若所述待存储的目标索引数据的索引键与所述历史元组索引键未匹配成功，则将所述
待存储的目标索引数据的索引键确定为预元组索引键，并根据所述预元组索引键，对所述
待存储的目标索引数据进行去重压缩处理，得到所述去重压缩处理后的待存储的目标索引
数据。
4 .根据权利要求1所述的方法，其特征在于，将所述去重压缩处理后的索引数据存储至
所述索引页面中，包括：
实时监控所述去重压缩处理后的索引数据的数据量；
若所述索引页面的剩余容量大于所述去重压缩处理后的索引数据的数据量，则将所示
所述去重压缩处理后的索引数据存储至所述索引页面中；
若所述索引页面的剩余容量小于或等于所述去重压缩处理后的索引数据的数据量，则
权 利 要 求 书
1/3 页
2
CN 117827836 A
2
of 17
免费下载
【版权声明】本文为墨天轮用户原创内容，转载时必须标注文档的来源（墨天轮），文档链接，文档作者等基本信息，否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容，欢迎发送邮件至：contact@modb.pro进行举报，并提供相关证据，一经查实，墨天轮将立刻删除相关内容。
下载排行榜
评论