[发明专利]一种分布式存储系统的对象聚合方法和装置在审
申请号: | 202110962042.3 | 申请日: | 2021-08-20 |
公开(公告)号: | CN113821164A | 公开(公告)日: | 2021-12-21 |
发明(设计)人: | 许银龙;陶桐桐;穆向东 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京连和连知识产权代理有限公司 11278 | 代理人: | 刘小峰;杨帆 |
地址: | 250000 山东省济南市中国(山东)自由贸易*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 存储系统 对象 聚合 方法 装置 | ||
1.一种分布式存储系统的对象聚合方法,其特征在于,包括执行以下步骤:
在分布式存储系统的业务进程运转的状态下,为分布式存储系统中分配缓存聚合存储池;
启动并通过遍历进程来遍历分布式存储系统中的原始数据以确定所述原始数据是否具有聚合特征,其中所述遍历进程独立于所述业务进程并且相对于所述业务进程具有更低的资源调用优先级;
响应于确定所述遍历进程遍历到的所述原始数据具有所述聚合特征而将所述原始数据写入所述缓存聚合存储池;
启动并通过聚合进程来将所述缓存聚合存储池中的所述原始数据聚合为聚合数据并写入分布式存储系统。
2.根据权利要求1所述的方法,其特征在于,还包括执行以下步骤:
响应于所述业务进程在运转中请求读取未经所述遍历进程遍历的请求数据而使所述业务进程读取所述请求数据,同时使所述遍历进程确定所述请求数据是否具有聚合特征;
响应于确定所述业务进程读取的所述请求数据具有所述聚合特征而将所述请求数据作为所述原始数据写入所述缓存聚合存储池,并将所述请求数据标记为已经被所述遍历进程遍历过。
3.根据权利要求1所述的方法,其特征在于,还包括执行以下步骤:
响应于所述业务进程在运转中请求写入请求数据而使所述业务进程写入所述请求数据,同时使所述遍历进程确定所述请求数据是否具有聚合特征;
响应于确定所述业务进程写入的所述请求数据具有所述聚合特征而将所述请求数据作为所述原始数据直接写入所述缓存聚合存储池。
4.根据权利要求1所述的方法,其特征在于,确定所述原始数据是否具有聚合特征包括:确定所述原始数据的术语尺寸是否小于预定的聚合尺寸阈值。
5.根据权利要求1所述的方法,其特征在于,还包括执行以下步骤:
响应于确定所述聚合数据成功写入分布式存储系统而从所述缓存聚合存储池中删除所述原始数据和所述聚合数据。
6.一种分布式存储系统的对象聚合装置,其特征在于,包括:
处理器;
控制器,存储有所述处理器可运行的程序代码,所述处理器在运行所述程序代码时执行以下步骤:
在分布式存储系统的业务进程运转的状态下,为分布式存储系统中分配缓存聚合存储池;
启动并通过遍历进程来遍历分布式存储系统中的原始数据以确定所述原始数据是否具有聚合特征,其中所述遍历进程独立于所述业务进程并且相对于所述业务进程具有更低的资源调用优先级;
响应于确定所述遍历进程遍历到的所述原始数据具有所述聚合特征而将所述原始数据写入所述缓存聚合存储池;
启动并通过聚合进程来将所述缓存聚合存储池中的所述原始数据聚合为聚合数据并写入分布式存储系统。
7.根据权利要求6所述的装置,其特征在于,还包括执行以下步骤:
响应于所述业务进程在运转中请求读取未经所述遍历进程遍历的请求数据而使所述业务进程读取所述请求数据,同时使所述遍历进程确定所述请求数据是否具有聚合特征;
响应于确定所述业务进程读取的所述请求数据具有所述聚合特征而将所述请求数据作为所述原始数据写入所述缓存聚合存储池,并将所述请求数据标记为已经被所述遍历进程遍历过。
8.根据权利要求6所述的装置,其特征在于,还包括执行以下步骤:
响应于所述业务进程在运转中请求写入请求数据而使所述业务进程写入所述请求数据,同时使所述遍历进程确定所述请求数据是否具有聚合特征;
响应于确定所述业务进程写入的所述请求数据具有所述聚合特征而将所述请求数据作为所述原始数据直接写入所述缓存聚合存储池。
9.根据权利要求6所述的装置,其特征在于,确定所述原始数据是否具有聚合特征包括:确定所述原始数据的术语尺寸是否小于预定的聚合尺寸阈值。
10.根据权利要求6所述的装置,其特征在于,还包括执行以下步骤:
响应于确定所述聚合数据成功写入分布式存储系统而从所述缓存聚合存储池中删除所述原始数据和所述聚合数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110962042.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种机械配件多形状夹持装置
- 下一篇:基于数字钻进评价振冲碎石桩密实度的方法