[发明专利]一种数据对象下刷方法、装置、设备及介质

说明书

本申请公开了一种数据对象下刷方法、装置、设备及介质，涉及计算机技术领域，包括：将固态硬盘中被修改的数据对象确定为脏数据对象，并将其添加至脏数据对象队列；按照机械硬盘的预设单元长度对脏数据对象进行划分得到若干划分区间；将脏数据总量大于下刷阈值的划分区间中的脏数据下刷至机械硬盘；将下刷后脏数据对象添加至目标队列，并判断下刷后脏数据对象中是否存在脏数据，如果存在，则重新将脏数据对象添加至脏数据对象队列，如果不存在，则对目标队列中下刷后数据对象进行释放。本申请优先下刷脏数据总量大于下刷阈值的划分区间中的脏数据，避免下刷零散脏数据，如此一来，增加了下刷聚合程度，降低了对机械硬盘的压力。

技术领域

本发明涉及计算机技术领域，特别涉及一种数据对象下刷方法、装置、设备及介质。

背景技术

SSD(Solid State Drives，固态硬盘)具有较高随机IO(Input/Output，数据读写)性能，因此当前很多存储系统都会使用SSD作为缓存盘，让业务IO先写入缓存盘，后续通过异步下刷将数据从SSD缓存盘上下刷到HDD(Hard Disk Drive，机械硬盘)。目前大部分存储系统都以数据对象作为系统处理数据的基本单元，因此目前通常以整对象为最小单元进行下刷。在业务IO修改了某个数据对象后，将该数据对象标记为脏数据对象并加入到脏数据对象LRU(Least Recently Used，最近最少使用)队列中，然后下刷模块从脏数据对象LRU中取出脏数据对象，计算其脏数据段并进行下刷，下刷完毕后将该数据对象加入目标数据对象LRU队列中，表示该对象所有数据已写入主存，但缓存中的数据还未删除，需要在后续回收缓存空间时再对该对象的目标数据进行释放。

然而一个数据对象通常为4M或者更大的大小，在随机小IO的业务场景中，一个数据对象上可能会产生上百个脏数据段，在这些脏数据段中，可能其中的一些数据段已经聚合为一个比较大的脏数据段，但另一些脏数据段仍然比较分散。因此当对整个数据对象进行下刷时，大量随机的IO使得HDD需要频繁寻道，会对HDD瞬间产生较大的压力，下刷的效率较低并且会由于磁盘的繁忙导致其时延增大影响业务的性能。

为此，如何避免下刷零散脏数据以及减少机械硬盘寻道次数，以降低对机械硬盘的压力并提高业务性能是本领域亟待解决的问题。

发明内容

有鉴于此，本发明的目的在于提供一种数据对象下刷方法、装置、设备及介质，能够避免下刷零散脏数据以及减少机械硬盘寻道次数，以降低对机械硬盘的压力并提高业务性能，其具体方案如下：

第一方面，本申请公开了一种数据对象下刷方法，包括：

当检测到客户端对固态硬盘中的数据对象的修改操作，则确定所述数据对象为脏数据对象，并将所述脏数据对象添加至预设的脏数据对象队列；

从所述脏数据对象队列中确定出所述脏数据对象，并按照机械硬盘的预设单元长度对所述脏数据对象进行划分，得到若干个划分区间；

判断每一所述划分区间对应的所述脏数据对象中的各个数据段的脏数据总量是否大于预设的脏数据量下刷阈值，并将脏数据总量大于所述预设的脏数据量下刷阈值的所述划分区间中的脏数据下刷至所述机械硬盘；

将下刷后的所述脏数据对象添加至预设的目标对象队列，并判断所述下刷后的所述脏数据对象中是否存在脏数据，如果存在，则重新执行所述将所述脏数据对象添加至预设的脏数据对象队列的步骤，如果不存在，则对所述目标对象队列中的所述下刷后的所述数据对象进行数据释放。

可选的，所述当检测到客户端对固态硬盘中的数据对象的修改操作，则确定所述数据对象为脏数据对象，并将所述脏数据对象添加至预设的脏数据对象队列，包括：

当检测到客户端对固态硬盘中的数据对象中的数据段的修改操作，则确定所述数据对象为脏数据对象，并确定所述数据段为脏数据段，然后将所述脏数据对象添加至预设的脏数据对象队列。