[发明专利]一种数据备份方法及云HDFS系统有效
申请号: | 201610268816.1 | 申请日: | 2016-04-27 |
公开(公告)号: | CN107315652B | 公开(公告)日: | 2021-04-16 |
发明(设计)人: | 鲁瑞;侯建卫;付长东 | 申请(专利权)人: | 中国移动通信集团山西有限公司;北京天和科瑞信息技术有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 江宇;张颖玲 |
地址: | 030032 山西*** | 国省代码: | 山西;14 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 备份 方法 hdfs 系统 | ||
1.一种数据备份方法,其特征在于,所述方法包括:
在当前备份周期内,通过预定接口从数据的源存储平台获取至少一种待备份数据,所述源存储平台为关系数据库管理系统RDBMS系统平台、大规模并行处理机制MPP系统平台和基于云架构的分布式文件系统HDFS系统平台中的至少一个;
获取所述至少一种待备份数据中每种待备份数据的第一信息、存储时间信息和迁移度信息,将每种待备份数据的迁移度信息与存储时间信息进行相除运算,得到第一运算结果;将每种待备份数据的第一信息与对应的第一运算结果进行相乘运算,得到每种待备份数据的属性信息;
其中,所述第一信息表征为在历史周期内的待备份数据被用户操作的频繁程度,所述存储时间信息表征为待备份数据在所述至少一源存储平台中的存放时间,所述迁移度信息表征为待备份数据在所有源存储平台的至少两个源存储平台中的迁移次数;
依据所述属性信息,对所述至少一种待备份数据进行备份。
2.根据权利要求1所述的方法,其特征在于,所述通过预定接口从数据的源存储平台获取至少一种待备份数据,包括:
通过预定接口读取存储在所述源存储平台中的数据,得到所述至少一种待备份数据。
3.根据权利要求1所述的方法,其特征在于,所述依据所述属性信息,对所述至少一种待备份数据进行备份,包括:
将所有待备份数据的属性信息进行大小关系的比较,得到第一排序,所述第一排序是按照属性信息的从大到小的顺序进行排列的;
按照第一排序中的属性信息的大小关系,对所述至少一种待备份数据进行备份,其中所述属性信息表征为待备份数据的使用价值。
4.一种云HDFS系统,其特征在于,所述系统包括:
第一获取单元,用于在当前备份周期内,通过预定接口从数据的源存储平台获取至少一种待备份数据,所述源存储平台为关系数据库管理系统RDBMS系统平台、大规模并行处理机制MPP系统平台和基于云架构的分布式文件系统HDFS系统平台中的至少一个;第一计算单元,用于获取所述至少一种待备份数据中每种待备份数据的第一信息、存储时间信息和迁移度信息,依据每种待备份数据的第一信息、存储时间信息及迁移度信息,计算当前备份周期内的每种待备份数据的属性信息;其中,所述第一信息表征为在历史周期内的待备份数据被用户操作的频繁程度,所述存储时间信息表征为待备份数据在所述至少一源存储平台中的存放时间,所述迁移度信息表征为待备份数据在所有源存储平台的至少两个源存储平台中的迁移次数;
所述第一计算单元,还用于:
将每种待备份数据的迁移度信息与存储时间信息进行相除运算,得到第一运算结果;
将每种待备份数据的第一信息与对应的第一运算结果进行相乘运算,得到每种待备份数据的属性信息;
第一备份单元,用于依据所述属性信息,对所述至少一种待备份数据进行备份。
5.根据权利要求4所述的系统,其特征在于,所述第一获取单元,还用于:
通过预定接口读取存储在所述源存储平台中的数据,得到所述至少一种待备份数据。
6.根据权利要求4所述的系统,其特征在于,所述第一备份单元,还用于:
将所有待备份数据的属性信息进行大小关系的比较,得到第一排序,所述第一排序是按照属性信息的从大到小的顺序进行排列的;
按照第一排序中的属性信息的大小关系,对所述至少一种待备份数据进行备份,其中所述属性信息表征为待备份数据的使用价值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团山西有限公司;北京天和科瑞信息技术有限公司,未经中国移动通信集团山西有限公司;北京天和科瑞信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610268816.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于虚拟化备份的技术
- 下一篇:一种实时统计的排行榜数据恢复方法与装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置