[发明专利]一种IO栈中数据分层的方法和装置

说明书

技术领域

本发明属于数据存储技术领域，特别是涉及一种IO栈中数据分层的方法和装置。

背景技术

当今社会数据量越来越大，机械磁盘容量大，价格便宜，但是性能比较低，目前已经很难满足用户对性能的要求；而固态存储存储容量较小，性能较好，但是价格比较高。为了解决上述矛盾，在介于机械磁盘和全固态磁盘(全闪存磁盘)之间引入了一种混合存储方式，解决了全机械盘性能低的问题以及全闪存磁盘价格高的问题。具体的，根据用户使用的频度(数据的热度)，将磁盘中的数据进行分层存储，经常使用的数据(热点数据)存储在固态盘中，使用频率低的数据存储在机械磁盘中，从而达到较佳用户体验效果，但是现有技术中还没有一种单独的模块实现上述数据分层。

发明内容

为解决上述问题，本发明提供了一种IO栈中数据分层的方法和装置，能提高磁盘的利用率，提升用户体验，节省成本。

本发明提供的一种IO栈中数据分层的方法，包括：

以预设的统计窗口期，对用户数据的频度进行统计；

根据得到的统计结果，将不同的数据频度进行排序，保存在队列中；

根据排序之后的数据频度，产生数据迁移策略；

利用所述数据迁移策略，进行数据迁移。

优选的，在上述IO栈中数据分层的方法中，

所述对用户数据的频度进行统计为：

对用户数据的IOPS、响应时间或高峰带宽利用滑动平均指数方式进行统计。

优选的，在上述IO栈中数据分层的方法中，

所述预设的统计窗口期为24小时。

优选的，在上述IO栈中数据分层的方法中，

所述利用所述数据迁移策略，进行数据迁移包括：

将热点数据迁移至SSD中，将冷数据迁移至近线磁盘中，将温数据保留在企业级磁盘上。

优选的，在上述IO栈中数据分层的方法中，

所述利用所述数据迁移策略，进行数据迁移之后，还包括：

将所述SSD、所述近线磁盘以及所述企业级磁盘中的数据进行同一层级之间的均衡。

本发明提供的一种IO栈中数据分层的装置，包括：

统计单元，用于以预设的统计窗口期，对用户数据的频度进行统计；

排序单元，用于根据得到的统计结果，将不同的数据频度进行排序，保存在队列中；

策略产生单元，用于根据排序之后的数据频度，产生数据迁移策略；

迁移单元，用于利用所述数据迁移策略，进行数据迁移。

优选的，在上述IO栈中数据分层的装置中，

所述统计单元具体用于对用户数据的IOPS、响应时间或高峰带宽利用滑动平均指数方式进行统计。

优选的，在上述IO栈中数据分层的装置中，

所述统计单元具体用于以24小时的窗口期对用户数据的频度进行统计。

优选的，在上述IO栈中数据分层的装置中，

所述迁移单元具体用于将热点数据迁移至SSD中，将冷数据迁移至近线磁盘中，将温数据保留在企业级磁盘上。

优选的，在上述IO栈中数据分层的装置中，

还包括：

均衡单元，用于将所述SSD、所述近线磁盘以及所述企业级磁盘中的数据进行同一层级之间的均衡。

通过上述描述可知，本发明提供的上述IO栈中数据分层的方法和装置，由于该方法包括以预设的统计窗口期，对用户数据的频度进行统计；根据得到的统计结果，将不同的数据频度进行排序，保存在队列中；根据排序之后的数据频度，产生数据迁移策略；利用所述数据迁移策略，进行数据迁移，因此能提高磁盘的利用率，提升用户体验，节省成本。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请实施例提供的第一种IO栈中数据分层的方法的示意图；

图2为数据迁移过程的示意图；

图3为本申请实施例提供的第一种IO栈中数据分层的装置的示意图。

具体实施方式

本发明的核心思想在于提供一种IO栈中数据分层的方法和装置，能提高磁盘的利用率，提升用户体验，节省成本。