[发明专利]一种数据处理方法、装置、设备及可读存储介质有效
申请号: | 202110779968.9 | 申请日: | 2021-07-09 |
公开(公告)号: | CN113419684B | 公开(公告)日: | 2023-02-24 |
发明(设计)人: | 唐晓栋;陈祥 | 申请(专利权)人: | 深圳大普微电子科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 陈彦如 |
地址: | 518000 广东省深圳市龙岗*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 设备 可读 存储 介质 | ||
本申请公开了一种数据处理方法、装置、设备及可读存储介质。本申请针对固态硬盘使用EC算法进行数据可靠性保护,由于EC算法中的校验数据块的个数m可配置,故本申请可容忍盘内更多DIE故障,不易丢失数据,具有足够的灵活度,适用于保护大容量存储盘。同时,本申请按照当前可用的数据块组中的n个用户数据块和m个校验数据块的排列顺序使数据对应落盘,能够保障校验数据在盘内的随机性,也就是:可以使盘内各个DIE中都有可能存储校验数据,从而进一步保护数据不丢失。相应地,本申请提供的一种数据处理装置、设备及可读存储介质,也同样具有上述技术效果。
技术领域
本申请涉及计算机技术领域,特别涉及一种数据处理方法、装置、设备及可读存储介质。
背景技术
目前,常用的数据可靠性保护方法最多只能容忍存储盘内有2个DIE故障,有更多DIE故障时会导致数据无法恢复,容易丢数据。常用的数据可靠性保护方法如:异或算法、RAID(Redundant Arrays of Independent Disks,磁盘阵列)5、RAID6等。其中,异或算法和RAID5仅能容忍盘内有1个DIE故障,RAID6仅能容忍盘内有2个DIE故障。其中,DIE也称为LUN,是nand flash里的技术术语,DIE/LUN是接收和执行闪存命令的基本单元。
而当前随着盘存储容量的增大,盘内DIE的个数越来越多,导致出现故障的DIE的概率也随之增大。一旦出现1个或2个DIE故障,就需要进行数据恢复,会耗费大量的存储算力。可见,现有的数据可靠性保护方法不够灵活,在用于保护大容量存储盘时,容易导致数据丢失,且容易频繁执行的数据恢复流程会耗费大量存储算力。
因此,如何针对大容量存储盘进行数据可靠性保护,是本领域技术人员需要解决的问题。
发明内容
有鉴于此,本申请的目的在于提供一种数据处理方法、装置、设备及可读存储介质,以针对大容量存储盘进行数据可靠性保护。其具体方案如下:
第一方面,本申请提供了一种数据处理方法,应用于固态硬盘,包括:
接收主机发送的目标数据,并将所述目标数据写入内存;
若所述目标数据在所述内存中占用n个内存节点,则将所述n个内存节点确定为n个数据节点;
利用EC算法引擎计算所述目标数据的校验数据,利用m个内存节点存储所述校验数据后,将所述m个内存节点确定为m个校验节点;n和m的取值预设于当前固态硬盘的EC属性中;
确定当前可用的数据块组,并查询所述数据块组中的n个用户数据块和m个校验数据块的排列顺序;
按照所述排列顺序将所述n个数据节点和所述m个校验节点排列为链表;
基于所述链表,将所述n个数据节点中的数据对应写入所述n个用户数据块,将所述m个校验节点中的数据对应写入所述m个校验数据块,以存储所述目标数据。
优选地,所述利用EC算法引擎计算所述目标数据的校验数据,利用m个内存节点存储所述校验数据,包括:
向所述内存申请所述m个内存节点;
将所述n个数据节点和所述m个内存节点传输至所述EC算法引擎,以使所述EC算法引擎基于所述n个数据节点计算所述校验数据,并将所述校验数据写入所述m个内存节点;
或
将所述n个数据节点传输至所述EC算法引擎,以使所述EC算法引擎基于所述n个数据节点计算所述校验数据,并向所述内存申请所述m个内存节点后,将所述校验数据写入所述m个内存节点。
优选地,所述按照所述排列顺序将所述n个数据节点和所述m个校验节点排列为链表,包括:
将所述m个校验节点排列在所述n个数据节点的尾部,以得到所述链表。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳大普微电子科技有限公司,未经深圳大普微电子科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110779968.9/2.html,转载请声明来源钻瓜专利网。