[发明专利]一种数据存储方法、装置和系统

说明书

一种数据存储方法、装置和系统。用于将源节点的待存储的数据分布存储到分布式存储系统中，该方法包括：从所述分布式存储系统确定N个存储节点(S202)；获取所述N个存储节点中每个存储节点的带宽信息(S204)，所述每个存储节点的带宽信息为所述每个存储节点到所述源节点的数据传输路径的传输带宽；根据所述待存储的数据以及所述每个存储节点的带宽信息，为所述每个存储节点分配对应的待存储的数据(S206)；将所述每个存储节点分配到的待存储的数据发送给所述每个存储节点(208)。根据传输带宽为每一个存储节点分配数据块大小，为传输带宽大的存储节点分配的较大的数据块，从而提高了数据传输效率，缩短了数据的访问时间，实现了资源的合理利用。

技术领域

本发明实施例涉及计算机领域，尤其涉及一种数据存储方法、装置和系统。

背景技术

存储速度在过去几年中有了显著的提高，例如现今主流的固态硬盘(Solid StateDrive，SSD)能够提供比传统硬盘存储(Hard Disk Drive，HDD)的接入速度有10倍以上的提升。但相比存储，近几年来网络速度的提升也是达到10倍之多，直到今日，存储速度仍一直落后于网络传输速度。

随着信息和数据的爆炸性增长，对存储容量的需求也达到了前所未有的高度。传统存储系统和存储网络在面对如今这种超大容量的需求时显得力不从心，即便能够满足需求，但是其高昂的造价也成为了壁垒。

随着分布式数据架构应用于云存储系统中，存储节点可以部署在网络的不同位置，为了充分利用分布式存储网络的速度，数据被分为多个数据块，并存储在不同的存储节点中，从而实现对多个存储节点的并行访存。

现有技术中，在分布式存储网络中一般将数据分为大小相同的数据块，并为数据块随机或者基于最小时延策略选择对应的存储节点，然后将数据块存储于不同的存储节点。随着存储规模的快速增长，为了应对网络流量的高速增长，大量高耗能器件的数量也随之增长，现有技术中均分数据块，以及为数据块随机选取存储节点或最小时延策略已经无法满足实际应用的需求，需要对分布式存储方法进行进一步的优化。

发明内容

有鉴于此，本发明实施例提供了一种数据存储方法、装置和系统，实现了分布式存储方法的优化。

第一方面，本发明实施例提供了一种数据存储方法，用于将源节点的待存储的数据分布存储到分布式存储系统中，包括：所述源节点从所述分布式存储系统确定N个存储节点，其中，N为大于1的正整数；所述源节点获取所述N个存储节点中每个存储节点的带宽信息，所述N个存储节点中的所述每个存储节点的带宽信息为所述N个存储节点中的所述每个存储节点到所述源节点的数据传输路径的传输带宽；所述源节点根据所述待存储的数据以及所述N个存储节点中的所述每个存储节点的带宽信息，为所述N个存储节点中的所述每个存储节点分配对应的待存储的数据；所述源节点将所述N个存储节点中的所述每个存储节点分配到的待存储的数据发送给所述N个存储节点中的所述每个存储节点。

结合第一方面，在第一方面第一种可能的实现方式中，所述源节点根据所述待存储的数据以及所述N个存储节点中的所述每个存储节点的带宽信息，为所述N个存储节点中的所述每个存储节点分配对应的待存储的数据，包括：所述源节点为所述N个存储节点中的J个存储节点分别分配对应的待存储的数据，其中，所述J个存储节点中的第j个存储节点分配到的待存储的数据的大小与所述第j个存储节点的传输带宽呈正相关关系，所述J为大于1小于等于N的正整数，所述j为从1逐一递增到J的正整数。

结合第一方面或第一方面以上任一种可能的实现方式，在第一方面第二种可能的实现方式中，所述源节点从所述分布式存储系统确定N个存储节点，包括：所述源节点获取所述分布式存储系统中的M个存储节点的功耗信息，所述功耗信息为所述M个存储节点中的每个存储节点到所述源节点的传输功耗，M为大于等于N的正整数；所述源节点根据所述M个存储节点的功耗信息，从所述M个存储节点中选择所述N个存储节点。