[发明专利]用于数据冗余储存的方法及装置在审
申请号: | 201710831412.3 | 申请日: | 2017-09-15 |
公开(公告)号: | CN109522151A | 公开(公告)日: | 2019-03-26 |
发明(设计)人: | 李希亮 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06Q40/00 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 阚梓瑄;王卫忠 |
地址: | 100195 北京市海淀区杏石口路6*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 热度 待处理数据 数据冗余 储存 计算机数据处理 访问量数据 存储空间 等级确定 节点负载 阈值确定 不均衡 访问量 申请 | ||
1.一种用于数据冗余储存的方法,其特征在于,包括:
获取待处理数据;
确定所述待处理数据的文件热度数值;
根据所述文件热度数值与预定热度阈值确定所述待处理数据的热度等级;以及
根据所述热度等级确定所述待处理数据的数据冗余策略。
2.如权利要求1所述的方法,其特征在于,所述待处理数据包括:
对账单数据与交易流水数据。
3.如权利要求1所述的方法,其特征在于,所述根据所述热度等级确定所述待处理数据的数据冗余策略,包括:
根据所述热度等级,通过完全副本冗余处理所述待处理数据。
4.如权利要求1所述的方法,其特征在于,所述根据所述热度等级确定所述待处理数据的数据冗余策略,还包括:
根据所述热度等级,通过副本缩减处理所述待处理数据。
5.如权利要求1所述的方法,其特征在于,所述根据所述热度等级确定所述待处理数据的数据冗余策略,还包括:
根据所述热度等级,通过RS纠删码冗余处理所述待处理数据。
6.如权利要求1所述的方法,其特征在于,所述确定所述待处理数据的文件热度数值,包括:
通过热度计算公式确定所述待处理数据的文件热度数值:
其中,Hi为第i个周期文件的热度,Hi-1为第i-1个周期文件的热度,mi为第i个周期文件的访问次数,Ni为第i个周期系统中所有文件的总访问次数,a为历史访问系数,a>0,b为周期访问系数b>0,a+b=1。
7.如权利要求6所述的方法,其特征在于,所述热度计算公式,还包括:
其中,Havr为平均热度,Hi为第i个周期文件的热度。
8.一种用于用于数据冗余储存的装置,其特征在于,包括:
数据模块,用于获取待处理数据;
热度数值模块,用于确定所述待处理数据的文件热度数值;
热度等级模块,用于根据所述文件热度数值与预定热度阈值确定所述待处理数据的热度等级;以及
数据冗余模块,用于根据所述热度等级确定所述待处理数据的数据冗余策略。
9.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710831412.3/1.html,转载请声明来源钻瓜专利网。