[发明专利]一种数据传输方法、装置、一种存储系统及设备和介质有效
申请号: | 202310024492.7 | 申请日: | 2023-01-09 |
公开(公告)号: | CN115904253B | 公开(公告)日: | 2023-06-13 |
发明(设计)人: | 于鲁宪;张在贵;李雪生 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;H04L67/1097;H04L12/66 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 姚文杰 |
地址: | 215100 江苏省苏州*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据传输 方法 装置 存储系统 设备 介质 | ||
本申请公开了一种数据传输方法、装置、一种存储系统及设备和介质,该方法包括:接收传输请求;确定所述传输请求对应的数据流;将所述数据流分别发送至分布式存储系统中的多个存储节点;其中,所述分布式存储系统包括主存储节点、一个或多个从存储节点。本申请消除了原存储节点间东西向数据拷贝,减少了分布式存储系统中数据拷贝所消耗的资源。
技术领域
本申请涉及存储技术领域,更具体地说,涉及一种数据传输方法、装置、一种存储系统及一种电子设备和一种计算机可读存储介质。
背景技术
分布式存储系统为了保证数据安全,通常需要在集群内部节点间做数据冗余,一份数据通过冗余计算以后,最终集群内部存储的数据实际上会超过原始的一份数据量。在现有技术中,存储架构一般采用主从机制,数据由集群关网接入后先发送到主本,再由主本计算冗余数据转发到从本,冗余数据由主本发送到从本的过程,就是集群内部节点间东西向数据拷贝的过程。在高速存储介质,例如全闪环境下,集群读写性能很高,但伴随高IO(输入/输出,Input/Output)的同时,也产生了大量的集群内部节点间的东西向数据拷贝,极大的消耗网络和CPU(中央处理器,central processing unit)资源。
因此,如何减少分布式存储系统中数据拷贝所消耗的资源是本领域技术人员需要解决的技术问题。
发明内容
本申请的目的在于提供一种数据传输方法、装置、一种存储系统及一种电子设备和一种计算机可读存储介质,减少了分布式存储系统中数据拷贝所消耗的资源。
为实现上述目的,本申请提供了一种数据传输方法,应用于网关设备,包括:
接收传输请求;
确定所述传输请求对应的数据流;
将所述数据流分别发送至分布式存储系统中的多个存储节点;其中,所述分布式存储系统包括主存储节点、一个或多个从存储节点。
其中,将所述数据流分别发送至分布式存储系统中的多个存储节点之前,还包括:
对所述数据流进行冗余计算。
其中,将所述数据流分别发送至分布式存储系统中的多个存储节点,包括:
将冗余计算后的数据流分别发送至分布式存储系统中的多个存储节点。
其中,所述确定所述传输请求对应的数据流,包括:
将所述传输请求拆分为数据流和控制流消息。
其中,将所述数据流分别发送至分布式存储系统中的多个存储节点,包括:
通过远程直接数据存取将所述数据流分别发送至分布式存储系统中的多个存储节点。
其中,所述通过远程直接数据存取将所述数据流分别发送至分布式存储系统中的多个存储节点,包括:
通过远程直接数据存取的单边协议将所述数据流分别发送至分布式存储系统中的多个存储节点。
其中,所述接收传输请求之后,还包括:
确定所述传输请求对应的控制流消息。
其中,所述确定所述传输请求对应的控制流消息,包括:
将所述传输请求拆分为数据流和控制流消息。
其中,所述确定所述传输请求对应的控制流消息之后,还包括:
将所述控制流消息发送至所述分布式存储系统中的主存储节点,以便所述主存储节点将所述控制流消息转发至所述分布式存储系统中的从存储节点。
为实现上述目的,本申请提供了一种数据传输方法,应用于分布式存储系统中的主存储节点,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310024492.7/2.html,转载请声明来源钻瓜专利网。