[发明专利]一种数据传输的处理方法及处理系统在审
| 申请号: | 202110910517.4 | 申请日: | 2021-08-09 |
| 公开(公告)号: | CN113590630A | 公开(公告)日: | 2021-11-02 |
| 发明(设计)人: | 徐小君 | 申请(专利权)人: | 北京隆普智能科技有限公司 |
| 主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2455;G06F16/27 |
| 代理公司: | 北京卓特专利代理事务所(普通合伙) 11572 | 代理人: | 段旺 |
| 地址: | 101300 北京市顺义区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据传输 处理 方法 系统 | ||
本申请公开了一种数据传输的处理方法及处理系统,其中数据传输的处理方法具体包括以下步骤:接收数据;接收数据后,进行数据存储传输路径的构建;对数据存储传输路径进行检测;若数据存储传输路径检测未通过,对数据存储传输路径进行调整;将接收的数据依次存储在数据存储传输路径中。本申请能够在接收数据后,对数据的传输存储路径进行有效和高效的规划,并不断对该路径进行优化,保证了数据传输过程的可靠与安全性。
技术领域
本申请涉及数据处理领域,具体地,涉及一种数据传输的处理方法及处理系统。
背景技术
随着数据的爆炸式增长,分布式存储系统如何对海量数据有效的进行查询、写入等处理成为了数据存储领域的研究重点。目前数据存储的方式主要是,通过设置一大型数据库来专用的存储海量数据,这种数据存储方式,虽然可通过大型数据库满足海量数据的高存储量要求,但从大型数据库中查询、写入某一数据的效率大幅的降低,牺牲了数据处理效率。并且,在数据的传输过程中,也会遭遇各种不确定的因素而导致传输链路所不能传输数据。
因此如何在兼顾数据处理效率,和海量数据的高存储量要求的情况下,实现数据的传输和处理,成为本领域技术人员急需解决的问题。
发明内容
本申请提供了一种数据传输的处理方法,具体包括以下步骤:接收数据;接收数据后,进行数据存储传输路径的构建;对数据存储传输路径进行检测;若数据存储传输路径检测未通过,对数据存储传输路径进行调整;将接收的数据依次存储在数据存储传输路径中。
如上的,其中,若数据存储传输路径检测通过,则直接将接收的数据依次存储在数据存储传输路径中。
如上的,其中,若数据能正常存储在系统节点中,存储传输路径由系统节点构成,系统节点包括根节点、中路节点和叶节点。
如上的,其中,将接收的数据存储至中路节点与叶节点中。
如上的,其中,进行数据存储传输路径的构建包括,确定系统节点中,任意两个节点的相连的边,以及相连的边的数量。
如上的,其中,对数据存储传输路径进行检测,包括以下子步骤:初始化边权重的大小;根据初始化边权重的大小,获取系统节点的阻碍带宽的概率分布;对阻碍带宽的概率分布进行判断。
如上的,其中,阻碍带宽的概率分布f(i:N)(x)表示为:
其中,N表示系统节点中相连边的数量,i表示根据预先设置的边权重大于指定阈值对应的相连边的数量,F(x)表示带宽小于指定阈值对应的节点落在系统指定区域的概率,FN-i(x)表示除去N-i条相连边后,剩余节点中带宽小于指定阈值对应的节点落在系统指定区域的概率。
如上的,其中,初始化边权重包括,预先获取每个节点的带宽,根据节点的带宽预先初始化边权重。
如上的,其中,根据节点的带宽预先初始化边权重之前,还包括,选取初始化每个边权重的节点。
一种数据传输的处理系统,包括接收单元、构建单元、检测单元、调整单元以及存储单元;接收单元,用于接收数据;构建单元,用于进行数据存储传输路径的构建;检测单元,用于对数据存储传输路径进行检测;调整单元,用于对对数据存储传输路径进行调整;存储单元,用于将接收的数据依次存储在调整后的数据存储传输路径中。
本申请具有以下有益效果:
本申请提供的数据传输的处理方法及处理系统能够在接收数据后,对数据的传输存储路径进行有效和高效的规划,并不断对该路径进行优化,保证了数据传输过程的可靠与安全性。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京隆普智能科技有限公司,未经北京隆普智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110910517.4/2.html,转载请声明来源钻瓜专利网。





