[发明专利]云存储数据处理方法、装置、电子设备和存储介质在审
申请号: | 202010871838.3 | 申请日: | 2020-08-26 |
公开(公告)号: | CN114115697A | 公开(公告)日: | 2022-03-01 |
发明(设计)人: | 姚婷 | 申请(专利权)人: | 浙江宇视科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/14 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 310051 浙江省杭州市滨江区西兴街道江陵路*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储 数据处理 方法 装置 电子设备 介质 | ||
本发明实施例公开了一种云存储数据处理方法、装置、电子设备和存储介质。该云存储数据处理方法包括:接收到待写入数据的覆盖写指令后,确定待写入的数据对象;根据所述待写入数据的大小与所述数据对象的大小的比较结果,将所述待写入数据覆盖所述数据对象,并删除所述数据对象在关联的对象存储设备中的已有数据。本发明实施例基于对数据对象的覆盖写指令,直接在已有存储数据的数据对象中将待写入数据写入,省去对数据对象中已有数据恢复重建的过程,并在待写入数据覆盖数据对象后,删除该数据对象在关联的对象存储设备中的已有数据分片。实现待写入数据的冗余和一致性,优化重建和数据迁移过程中的数据写流程。
技术领域
本发明实施例涉及存储技术领域,尤其涉及一种云存储数据处理方法、装置、电子设备和存储介质。
背景技术
覆盖写是存储系统中一种常见的数据写入方式,是指在已写入的数据的基础上覆盖新写入的数据。在很多应用场景均采用覆盖写的方式执行写操作,例如在存储节点或磁盘故障的情况下,通常采用覆盖写的方式实现存储节点或磁盘中的数据冗余。
但是现有技术中在采用覆盖写的方式对存储节点或磁盘进行操作时,首先需要对存储节点或磁盘中的已有数据进行数据重建,完成数据重建后才能写入新数据。在数据重建失败的情况下,会造成写入业务无法进行,影响数据覆盖写的效率。
发明内容
本发明实施例提供一种云存储数据处理方法、装置、电子设备和存储介质,以提高云存储的存储节点或磁盘故障时覆盖写的效率。
第一方面,本发明实施例提供了一种云存储数据处理方法,包括:
接收到待写入数据的覆盖写指令后,确定待写入的数据对象;其中,所述数据对象包括如下至少一种:待重建的数据对象、待迁移的数据对象和失效的数据对象;
根据所述待写入数据的大小与所述数据对象的大小的比较结果,将所述待写入数据覆盖所述数据对象,并删除所述数据对象在关联的对象存储设备中的已有数据。
第二方面,本发明实施例还提供了一种云存储数据处理装置,包括:
数据对象确定模块,用于接收到待写入数据的覆盖写指令后,确定待写入的数据对象;其中,所述数据对象包括如下至少一种:待重建的数据对象、待迁移的数据对象和失效的数据对象;
覆盖写模块,用于根据所述待写入数据的大小与所述数据对象的大小的比较结果,将所述待写入数据覆盖所述数据对象,并删除所述数据对象在关联的对象存储设备中的已有数据。
第三方面,本发明实施例还提供了一种电子设备,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明任一实施例所述的云存储数据处理方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任一实施例所述的云存储数据处理方法。
本发明实施例基于对数据对象的覆盖写指令,直接在已有存储数据的数据对象中将待写入数据写入,省去对数据对象中已有数据恢复重建的过程或对象数据迁移的过程,在原有数据对象失效时保证覆盖写继续业务不中断,并在待写入数据覆盖数据对象后,删除该数据对象在关联的对象存储设备中的已有数据分片。实现待写入数据的冗余和一致性,优化重建和数据迁移过程中的数据写流程,保证原有失效数据对象写业务的连续性。
附图说明
图1是本发明实施例一中的云存储数据处理方法的流程图;
图2是本发明实施例二中的云存储数据处理方法的流程图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江宇视科技有限公司,未经浙江宇视科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010871838.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种旋转张力测试装置
- 下一篇:夹具切换滑台装置