[发明专利]一种数据迁移方法、系统、设备以及介质在审
申请号: | 202110176463.3 | 申请日: | 2021-02-09 |
公开(公告)号: | CN112860188A | 公开(公告)日: | 2021-05-28 |
发明(设计)人: | 张廷雷;何营 | 申请(专利权)人: | 山东英信计算机技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京连和连知识产权代理有限公司 11278 | 代理人: | 杨帆;宋薇薇 |
地址: | 250101 山东省济南市高新区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 迁移 方法 系统 设备 以及 介质 | ||
本发明公开了一种数据迁移方法,包括以下步骤:在源卷中创建访问热度表;将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中;响应于接收到数据迁移的指令,获取所述访问热度表中数据对象的ID;根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明提出的方案优先选择频繁访问的数据进行迁移,这样可以实现数据的分级迁移,缩短数据迁移的时间,减轻数据迁移对分布式存储中其他数据卷读写的影响,保证数据中心数据访问业务的高效正常运行。
技术领域
本发明涉及数据迁移领域,具体涉及一种数据迁移方法、系统、设备以及存储介质。
背景技术
数据卷的迁移过程中会影响数据卷的正常读写,导致数据卷的读写IOPS和带宽下降。如果数据卷的数据量大,也会导致数据迁移的时间加长,从而导致数据卷的读写受到严重影响。目前,现有的研究主要集中在数据卷的迁移算法的实现,没有考虑数据迁移过程中对其它数据卷读写的影响,虽然可以实现数据卷的迁移,但对其他数据卷的读写影响较大。
发明内容
有鉴于此,为了克服上述问题的至少一个方面,本发明实施例提出一种数据迁移方法,包括以下步骤:
在源卷中创建访问热度表;
将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中;
响应于接收到数据迁移的指令,获取所述访问热度表中数据对象的ID;
根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中,根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中,进一步包括:
判断所述访问热度表中数据对象的ID的数量是否大于预设值;
响应于大于所述预设值,根据所述访问热度表中数据对象的ID进行迁移;
响应于不大于所述预设值,等待预设时间段,若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束,根据所述访问热度表中数据对象的ID进行迁移。
在一些实施例中,还包括:
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID;
响应于进行数据对象迁移后,所述访问热度表中数据对象的ID的数量再次大于预设值,再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中,还包括:
响应于当前系统的资源利用率小于预设利用率,将所述源卷中剩余的数据对象迁移到所述目标卷中。
基于同一发明构思,根据本发明的另一个方面,本发明的实施例还提供了一种数据迁移系统,包括:
创建模块,所述创建模块配置为在源卷中创建访问热度表;
记录模块,所述记录模块配置为将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中;
获取模块,所述获取模块配置为响应于接收到数据迁移的指令,获取所述访问热度表中数据对象的ID;
迁移模块,所述迁移模块配置为根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中,所述迁移模块还配置为:
判断所述访问热度表中数据对象的ID的数量是否大于预设值;
响应于大于所述预设值,根据所述访问热度表中数据对象的ID进行迁移;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东英信计算机技术有限公司,未经山东英信计算机技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110176463.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置