[发明专利]确定用于数据集和用于迁移数据集的最优存储环境在审

专利信息
申请号: 201980045200.X 申请日: 2019-07-10
公开(公告)号: CN112368673A 公开(公告)日: 2021-02-12
发明(设计)人: C·A·左罗陶;T·W·比什;B·J·克林根伯格;P·库普;J·V·迪兰尼 申请(专利权)人: 国际商业机器公司
主分类号: G06F3/06 分类号: G06F3/06;G06N20/00
代理公司: 中国贸促会专利商标事务所有限公司 11038 代理人: 鲍进
地址: 美国*** 国省代码: 暂无信息
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 确定 用于 数据 迁移 最优 存储 环境
【权利要求书】:

1.一种用于管理多个存储环境中的数据集的存储的计算机程序产品,其中所述计算机程序产品包括计算机可读存储介质,所述计算机可读存储介质具有体现在其中的计算机可读程序代码,所述计算机可读程序代码在被执行时执行操作,所述操作包括:

维护每个应用的元数据,所述元数据指示由所述应用用来存储数据集的存储池,其中每个存储池被配置在使用不同组织方案来存储数据集的多个存储环境之一中,并且其中至少一个应用的所述元数据指示从不同存储环境分配的用来存储所述应用的所述数据集的存储池;

处理应用的所述元数据,以确定存储在在第一存储环境中实现的第一存储池中的应用的数据集,该数据集应当被存储在第二存储环境中;以及

将所确定的数据集从所述第一存储池迁移到在所述第二存储环境中实现的第二存储池。

2.根据权利要求1所述的计算机程序产品,其中所述存储环境至少包括多个存储环境,所述多个存储环境包括:块存储、文件存储、对象存储和计数关键数据(CKD)存储。

3.根据权利要求1所述的计算机程序产品,其中所述操作进一步包括:

更新所述应用的所述元数据以指示所确定的数据集被存储在所述第二存储池中。

4.根据权利要求1所述的计算机程序产品,其中所述操作进一步包括:

提供第一守护进程,用于管理对根据所述第一存储环境配置的第一存储的访问;

提供第二守护进程,用于管理对根据所述第二存储环境配置的第二存储的访问;

其中,将分配给所述第一存储池的所述数据集迁移到所述第二存储池包括:

由所述第一守护进程从所述第一存储中的所述第一存储池读取所确定的数据集;

由所述第一守护进程将所确定的数据集从用于所述第一存储环境的第一数据格式转换为用于所述第二存储环境的第二数据格式;以及

将所述第二数据格式的数据集发送到所述第二守护进程以写入所述第二存储。

5.根据权利要求1所述的计算机程序产品,其中所述操作进一步包括:

收集关于对存储在所述第一存储池和所述第二存储池中的应用的所述数据集的输入/输出(I/O)访问的数据访问模式的数据访问信息,其中,确定所述第一存储池中的应当存储在所述第二存储环境中的数据集确定针对所述数据集收集的所述数据访问信息指示所述数据集应当存储在所述第二存储环境中。

6.根据权利要求5所述的计算机程序产品,其中,确定所述数据访问信息指示所确定的数据集应当存储在所述第二存储环境中包括:

将所述数据集的所述元数据中的所述数据访问信息提供给机器学习模块;

由所述机器学习模块将所提供的数据访问信息分类到多个访问模式分类中的一个;以及

应用规则以从所述数据集的访问模式分类确定所述数据集应当存储在其中的多个存储环境中的最优存储环境,其中所确定的数据集被分类为具有访问模式分类,其中应用所述规则确定所述第二存储环境是所述数据集的最优存储环境。

7.根据权利要求6所述的计算机程序产品,其中所述操作还包括:

对于为其确定了最优存储环境的每个数据集,确定所述数据集是否被存储在为所述数据集所确定的最优存储环境中;以及

将当前未存储在所确定的用于所述数据集的最优存储环境中的每个数据集迁移到所确定的用于所述数据集的最优存储环境。

8.根据权利要求6所述的计算机程序产品,其中,对所述数据集的所述数据访问信息进行分类是由机器学习算法执行的,所述机器学习算法被训练成基于所述数据集的所述数据访问信息来产生所述访问模式分类中的一个。

9.根据权利要求6所述的计算机程序产品,其中,对于不同的数据集,所述数据访问信息包括每秒多个I/O操作、访问中的延迟、由于延迟导致的超时、数据访问模式、工作负载类型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201980045200.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top