[发明专利]提高快照数据处理速度的方法、装置与处理器有效
| 申请号: | 202010732799.9 | 申请日: | 2020-07-27 |
| 公开(公告)号: | CN111897678B | 公开(公告)日: | 2023-10-03 |
| 发明(设计)人: | 顾斯鸣;张旭明;王豪迈;胥昕 | 申请(专利权)人: | 北京星辰天合科技股份有限公司 |
| 主分类号: | G06F11/14 | 分类号: | G06F11/14 |
| 代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 霍文娟 |
| 地址: | 100094 北京市海淀*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 提高 快照 数据处理 速度 方法 装置 处理器 | ||
本申请提供了一种提高快照数据处理速度的方法、装置与处理器,该方法包括:获取导出需求;根据导出需求,创建第一管道;获取第一Rados块设备和第一数据保护模块;应用第一Rados块设备、第一管道和第一数据保护模块,将第一数据卷中的第一快照数据导出至第一备份端中;和/或,获取导入需求;根据导入需求,创建第二管道;获取第二Rados块设备和第二数据保护模块;应用第二数据保护模块、第二管道和第二Rados块设备,将第二备份端中的第三快照数据导入至第二数据卷中。该方案使用第一管道和第二管道替代了硬盘,提高了快照数据的处理速度。
技术领域
本申请涉及数据处理领域,具体而言,涉及一种提高快照数据处理速度的方法、装置、计算机可读存储介质与处理器。
背景技术
现有的数据保护技术中,在处理第一Rados块设备导出的快照数据时,需要将快照缓存在内存或者硬盘上,再由第一数据保护模块读取并进行相应的处理。为了减少内存或者硬盘的消耗,通常会将快照数据分成多个片段,分别处理。
在恢复快照时,第二数据保护模块会先从第二备份端获得快照数据,将数据处理后写入本地硬盘中,之后第二Rados块设备会从本地将此快照数据导入到集群(即第二数据卷)来恢复数据。
现有的使用硬盘缓存快照数据时,由于硬盘速度比内存慢很多,第一数据保护模块处理快照数据的速度可能受硬盘速率的影响,并可能影响其他使用硬盘的业务;由于快照的每个片段都占用较大的内存和硬盘,导致不能提高第一数据保护模块的并发度,来充分利用cpu资源,进而提升效率;在不占用更多内存或硬盘资源的情况下,第一数据保护模块需要等第一Rados块设备完全导出快照片段后才能进行后续处理,这样会降低整体的处理速度;第一Rados块设备导出的快照数据一般会很大,会占用很多内存或硬盘资源。
在背景技术部分中公开的以上信息只是用来加强对本文所描述技术的背景技术的理解,因此,背景技术中可能包含某些信息,这些信息对于本领域技术人员来说并未形成在本国已知的现有技术。
发明内容
本申请的主要目的在于提供一种提高快照数据处理速度的方法、装置、计算机可读存储介质与处理器,以解决现有技术中对快照数据的处理效率较低的问题。
为了实现上述目的,根据本申请的一个方面,提供了一种提高快照数据处理速度的方法,包括:获取导出需求,所述导出需求为将第一数据卷中的第一快照数据导出至第一备份端中的需求,导入所述第一备份端中的数据为第二快照数据;根据所述导出需求,创建第一管道;获取第一Rados块设备和第一数据保护模块;应用所述第一Rados块设备、所述第一管道和所述第一数据保护模块,将所述第一数据卷中的所述第一快照数据导出至所述第一备份端中;和/或,获取导入需求,所述导入需求为将第二备份端中的第三快照数据导入至第二数据卷中的需求,导入至所述第二数据卷中的数据为第四快照数据;根据所述导入需求,创建第二管道;获取第二Rados块设备和第二数据保护模块;应用所述第二数据保护模块、所述第二管道和所述第二Rados块设备,将所述第二备份端中的所述第三快照数据导入至所述第二数据卷中。
可选地,应用所述第一Rados块设备、所述第一管道和所述第一数据保护模块,将所述第一数据卷中的所述第一快照数据导出至所述第一备份端中,包括:所述第一Rados块设备将所述第一数据卷中的所述第一快照数据读出,且将所述第一快照数据发送至所述第一管道;所述第一快照数据经过所述第一管道传送至所述第一数据保护模块;所述第一数据保护模块对所述第一快照数据进行第一预定处理,得到所述第二快照数据,且将所述第二快照数据发送至所述第一备份端;所述第一备份端接收所述第二快照数据且存储所述第二快照数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京星辰天合科技股份有限公司,未经北京星辰天合科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010732799.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种可调式且贴合效果好的锅炉安装底座
- 下一篇:一种计算机机箱的自动除尘机构





