[发明专利]分布式存储节点的处理系统、方法、装置、设备和介质在审
申请号: | 202110270100.6 | 申请日: | 2021-03-12 |
公开(公告)号: | CN115079931A | 公开(公告)日: | 2022-09-20 |
发明(设计)人: | 胡丹;陈孝委;单江华;郑磊;张志远 | 申请(专利权)人: | 天翼云科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 孙宝海;袁礼君 |
地址: | 100007 北京市东城区青*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 存储 节点 处理 系统 方法 装置 设备 介质 | ||
本公开提供了一种分布式存储节点的处理系统、方法、装置、设备和介质,涉及数据压缩技术领域。其中,分布式存储节点的数据处理系统包括:至少一个存储节点,存储节点包括:存储盘,用于存储数据内容;具有非易失性存储器的网卡,网卡对待写入的数据内容进行分级存储;内存,内存、网卡和存储盘能够进行数据交互,内存根据网卡的数据交互指令控制读写存储盘中的数据内容。通过本公开的技术方案,提升了分布式存储节点的数据读写效率,降低了对CPU和存储盘的性能要求。
技术领域
本公开涉及数据存储技术领域,尤其涉及一种分布式存储节点的处理系统、方法、装置、设备和介质。
背景技术
通常智能网卡是包括具有处理能力和存储能力的可编程网络接口卡设备。智能网卡通常用于数据压缩/解压缩和加密/解密,还可以提供网络可访问的数据缓存和/或提供紧凑的密钥值存储。
在云数据存储系统中,将数据镜像到多个节点以保护数据,以及将对象数据分布在可能多个节点之间等概念,使得通过智能网卡来提高数据处理性能成为一个复杂的问题。
相关技术中,云数据存储系统中为了匹配日益增强的应用需求,需要不断增强存储节点CPU以及存储盘的性能,一方面,增加了选型难度和成本要求,另一方面,可能无法满足特殊应用的读取速度的要求。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的目的在于提供一种分布式存储节点的处理系统、方法、装置、设备和介质,至少在一定程度上克服由于相关技术中分布式存储节点的数据读写速度慢的问题。
本公开的其他特性和优点将通过后续的详细描述变得显然,或部分地通过本公开的实践而习得。
根据本公开的一个方面,提供一种分布式存储节点的数据处理方法,包括:至少一个存储节点,存储节点包括:存储盘,用于存储数据内容;具有非易失性存储器的网卡,网卡对待写入的数据内容进行分级存储;内存,内存、网卡和存储盘能够进行数据交互,内存根据网卡的数据交互指令控制读写存储盘中的数据内容。
在本公开的一个实施例中,网卡对待写入的数据内容进行第一级存储,第一级存储用于将待写入的数据内容存储于非易失性存储器;网卡对数据内容进行第二级存储,第二级存储用于将非易失性存储器中的数据内容存储至存储盘;删除非易失性存储器中的已完成第二级存储的数据内容。
在本公开的一个实施例中,存储节点包括第一类节点和第二类节点,第一类节点的网卡对待写入的数据内容进行第一级存储,第一级存储用于将待写入的数据内容存储于非易失性存储器;第一类节点的网卡确定完成第一级存储的数据内容是否来自于第一客户端设备;第一类节点的网卡将来自于第一客户端设备的数据内容的副本数据段由非易失性存储器发送至第二类节点的网卡。
在本公开的一个实施例中,存储节点包括第一类节点和第二类节点,第一类节点的网卡对待写入的数据内容进行第一级存储,第一级存储用于将待写入的数据内容存储于非易失性存储器;第一类节点的网卡确定完成第一级存储的数据内容是否来自于第二类节点;第一类节点的网卡确定第二类节点的节点标识号,第一类节点的网卡根据节点标识号对来自于第二类节点的数据内容进行第二级存储。
在本公开的一个实施例中,存储节点包括第一类节点和第二类节点,第一类节点的网卡接收第二客户端设备发送的读取数据内容的请求;第一类节点的网卡根据请求确定存储有数据内容的第二类节点;第一类节点的网卡根据数据内容的关联序列号对第二类节点存储的数据内容进行排序;第一类节点的网卡按照排序将数据内容有序发送至第二客户端设备。
在本公开的一个实施例中,第一类节点的网卡对已发送至第二客户端设备的数据内容释放存储空间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天翼云科技有限公司,未经天翼云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110270100.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:用户信息找回方法、装置、介质及电子设备
- 下一篇:一种多像素近远光透镜模组