[发明专利]确定用于数据集和用于迁移数据集的最优存储环境在审
申请号: | 201980045200.X | 申请日: | 2019-07-10 |
公开(公告)号: | CN112368673A | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | C·A·左罗陶;T·W·比什;B·J·克林根伯格;P·库普;J·V·迪兰尼 | 申请(专利权)人: | 国际商业机器公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06N20/00 |
代理公司: | 中国贸促会专利商标事务所有限公司 11038 | 代理人: | 鲍进 |
地址: | 美国*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 确定 用于 数据 迁移 最优 存储 环境 | ||
1.一种用于管理多个存储环境中的数据集的存储的计算机程序产品,其中所述计算机程序产品包括计算机可读存储介质,所述计算机可读存储介质具有体现在其中的计算机可读程序代码,所述计算机可读程序代码在被执行时执行操作,所述操作包括:
维护每个应用的元数据,所述元数据指示由所述应用用来存储数据集的存储池,其中每个存储池被配置在使用不同组织方案来存储数据集的多个存储环境之一中,并且其中至少一个应用的所述元数据指示从不同存储环境分配的用来存储所述应用的所述数据集的存储池;
处理应用的所述元数据,以确定存储在在第一存储环境中实现的第一存储池中的应用的数据集,该数据集应当被存储在第二存储环境中;以及
将所确定的数据集从所述第一存储池迁移到在所述第二存储环境中实现的第二存储池。
2.根据权利要求1所述的计算机程序产品,其中所述存储环境至少包括多个存储环境,所述多个存储环境包括:块存储、文件存储、对象存储和计数关键数据(CKD)存储。
3.根据权利要求1所述的计算机程序产品,其中所述操作进一步包括:
更新所述应用的所述元数据以指示所确定的数据集被存储在所述第二存储池中。
4.根据权利要求1所述的计算机程序产品,其中所述操作进一步包括:
提供第一守护进程,用于管理对根据所述第一存储环境配置的第一存储的访问;
提供第二守护进程,用于管理对根据所述第二存储环境配置的第二存储的访问;
其中,将分配给所述第一存储池的所述数据集迁移到所述第二存储池包括:
由所述第一守护进程从所述第一存储中的所述第一存储池读取所确定的数据集;
由所述第一守护进程将所确定的数据集从用于所述第一存储环境的第一数据格式转换为用于所述第二存储环境的第二数据格式;以及
将所述第二数据格式的数据集发送到所述第二守护进程以写入所述第二存储。
5.根据权利要求1所述的计算机程序产品,其中所述操作进一步包括:
收集关于对存储在所述第一存储池和所述第二存储池中的应用的所述数据集的输入/输出(I/O)访问的数据访问模式的数据访问信息,其中,确定所述第一存储池中的应当存储在所述第二存储环境中的数据集确定针对所述数据集收集的所述数据访问信息指示所述数据集应当存储在所述第二存储环境中。
6.根据权利要求5所述的计算机程序产品,其中,确定所述数据访问信息指示所确定的数据集应当存储在所述第二存储环境中包括:
将所述数据集的所述元数据中的所述数据访问信息提供给机器学习模块;
由所述机器学习模块将所提供的数据访问信息分类到多个访问模式分类中的一个;以及
应用规则以从所述数据集的访问模式分类确定所述数据集应当存储在其中的多个存储环境中的最优存储环境,其中所确定的数据集被分类为具有访问模式分类,其中应用所述规则确定所述第二存储环境是所述数据集的最优存储环境。
7.根据权利要求6所述的计算机程序产品,其中所述操作还包括:
对于为其确定了最优存储环境的每个数据集,确定所述数据集是否被存储在为所述数据集所确定的最优存储环境中;以及
将当前未存储在所确定的用于所述数据集的最优存储环境中的每个数据集迁移到所确定的用于所述数据集的最优存储环境。
8.根据权利要求6所述的计算机程序产品,其中,对所述数据集的所述数据访问信息进行分类是由机器学习算法执行的,所述机器学习算法被训练成基于所述数据集的所述数据访问信息来产生所述访问模式分类中的一个。
9.根据权利要求6所述的计算机程序产品,其中,对于不同的数据集,所述数据访问信息包括每秒多个I/O操作、访问中的延迟、由于延迟导致的超时、数据访问模式、工作负载类型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201980045200.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:利用PDCCH重复的PDSCH调度的时隙的确定规则
- 下一篇:有机光检测器
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置