[发明专利]一种基于图神经网络的深度强化学习SDN智能路由优化方法在审

专利信息
申请号: 202311019388.5 申请日: 2023-08-14
公开(公告)号: CN116938810A 公开(公告)日: 2023-10-24
发明(设计)人: 张维琦;李双庆;周欣;李志豪 申请(专利权)人: 重庆大学
主分类号: H04L45/76 分类号: H04L45/76;H04L45/74;H04L45/02;H04L45/12;G06N3/0464;G06N3/08
代理公司: 重庆博凯知识产权代理有限公司 50212 代理人: 黄河
地址: 400044 *** 国省代码: 重庆;50
权利要求书: 暂无信息 说明书: 暂无信息
摘要: 发明公开了一种基于图神经网络的深度强化学习SDN智能路由优化方法,该方法通过将深度强化学习的智能路由优化模型作为一个北向应用部署到SDN控制器中,以避免网络拥塞和满足网络流请求流服务的延迟约束;智能路由优化模型基于图神经网络建立,对基于网络拓扑结构的SDN网络数据进行处理,通过调整网络链路代价权重来完成路由的调整,得到优化预测的路由转发规则,转化为对应的流表项;在智能路由优化模型的深度强化学习中,通过图神经网络感知、处理并有效利用非欧几里德类型的网络拓扑数据;通过强化学习的决策能力,以最大化累计奖励为目标实现SDN网络的智能路由优化,从而有效提高SDN网络的传输性能。
搜索关键词: 一种 基于 神经网络 深度 强化 学习 sdn 智能 路由 优化 方法
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆大学,未经重庆大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/patent/202311019388.5/,转载请声明来源钻瓜专利网。

同类专利
  • 一种基于图神经网络的深度强化学习SDN智能路由优化方法-202311019388.5
  • 张维琦;李双庆;周欣;李志豪 - 重庆大学
  • 2023-08-14 - 2023-10-24 - H04L45/76
  • 本发明公开了一种基于图神经网络的深度强化学习SDN智能路由优化方法,该方法通过将深度强化学习的智能路由优化模型作为一个北向应用部署到SDN控制器中,以避免网络拥塞和满足网络流请求流服务的延迟约束;智能路由优化模型基于图神经网络建立,对基于网络拓扑结构的SDN网络数据进行处理,通过调整网络链路代价权重来完成路由的调整,得到优化预测的路由转发规则,转化为对应的流表项;在智能路由优化模型的深度强化学习中,通过图神经网络感知、处理并有效利用非欧几里德类型的网络拓扑数据;通过强化学习的决策能力,以最大化累计奖励为目标实现SDN网络的智能路由优化,从而有效提高SDN网络的传输性能。
  • 基于虚拟网络映射的SDN路由方法及路由系统-202311195755.7
  • 张明;刘斌;高杰 - 北京慧嘉科技有限公司
  • 2023-09-18 - 2023-10-24 - H04L45/76
  • 本发明属于SDN应用技术领域,具体涉及一种基于虚拟网络映射的SDN路由方法及路由系统,通过在转发层建立虚拟网络,由虚拟网络与控制层的SDN控制器连接,将底层物理网络在虚拟网络上进行抽象,使得SDN控制器不再将流表直接下发到物理设备上,而是下发到具有抽象化结构的虚拟节点上,由虚拟节点为转发层提供路由服务,在虚拟节点上,通过统计被分配的流表项在执行路由时所需的资源量,根据资源量产生虚拟网络映射请求,然后将虚拟节点映射到满足其资源需求的底层网络设备上,考虑到虚拟网络拥有较强的资源组织能力,能够根据上层网络对象的实际应用需求合理分配资源,从而满足上层网络及应用对路由资源的个性化需求和控制。
  • 浮动IP访问外部网络的方法及实现系统-202310916154.4
  • 曹攀飞;丁世赛 - 浪潮通信技术有限公司
  • 2023-07-25 - 2023-10-20 - H04L45/76
  • 本发明公开了浮动IP访问外部网络的方法及实现系统,属于网络虚机化技术领域,要解决的技术问题为如何减少交换机上外部网络IP的占用、并提高网络安全性。包括如下步骤:在Openstack中添加出口网关的扩展,创建出出口网关的软路由虚拟机,在软路由虚拟机和交换机之间建立BGP连接;用户创建虚拟路由器、虚拟网络和虚拟机,并将虚拟机端口绑定到浮动IP;底层在虚拟路由器的命名空间中为对应的浮动IP添加指向软路由虚拟机的策略路由,并向软路由虚拟机中发布浮动IP的路由;当虚拟机通过浮动IP通信时,流量通过策略路由表转发到软路由虚拟机中,在软路由虚拟机中转发到交换机。
  • 一种链路管理方法及装置-202310755525.5
  • 宋焕启 - 新华三技术有限公司
  • 2023-06-26 - 2023-10-13 - H04L45/76
  • 本申请涉及网络通信技术领域,特别涉及一种链路管理方法及装置。该方法包括:若接收到网络设备发送的添加目标链路的BGP‑LS消息,则判断接口数据库中是否维护有所述目标链路对应的目标接口的信息;若判定接口数据库中未维护有所述目标链路对应的目标接口的信息,则将所述目标链路缓存至链路发现列表;若接收到网络设备发送的添加目标接口的NETCONF消息,则将所述目标链路添加至链路列表。
  • 基于APN6网络实现智能应用感知及报文转发的方法-202310990852.9
  • 戴曦;尹立超;李小坤;杨振宇;彭锟;蔡昭兵;徐旭朝;罗战 - 三峡科技有限责任公司;三峡智控科技有限公司
  • 2023-08-08 - 2023-09-05 - H04L45/76
  • 本发明公开了基于APN6网络实现智能应用感知及报文转发的方法,属于网络通信技术领域,主要解决目前网络通信技术中应用感知及报文转发的效率问题,该方法包括,资源调度层进行软件定义网络架构,使得云、边及端的算力资源通过网络连接;服务编排层进行底层资源的服务化编排,并统一调度算力网络资源给应用层;在资源调度层、服务编排层和应用层三层之间结合人工智能分析业务特征和用户特征,基于APN6网络进行智能应用感知及报文转发。本发明在资源调度层、服务编排层和应用层三层之间结合人工智能分析业务特征和用户特征实现基于APN6网络架构的智能应用感知及报文转发,提高云、边、端三级计算的协同工作效率。
  • 数据中心交换机流量路径探测方法与装置-202310735369.6
  • 罗婷 - 武汉烽火技术服务有限公司;烽火通信科技股份有限公司
  • 2023-06-20 - 2023-08-18 - H04L45/76
  • 本发明公开了一种数据中心交换机流量路径探测方法,包括:SDN控制器收集网络拓扑信息,生成网络拓扑数据库;根据用户关心的流量起点和终点,深度遍历网络拓扑数据库,生成有向无环图;基于有向无环图,通过路径序号编码算法生成路径编码表;通过路径染色流表管理算法,控制交换机根据路径编码表将路径ID携带入报文中;根据获取的报文中的路径ID的终点交换机信息,得到解码信息,即流量的全路径序列表。本发明提出一种数据中心网络中业务流量路径可视化的控制策略,交换机不用发送路径探测报文,不用为用户的数据流进行特定的染色,就可以得到完整的数据中心网络中用户的流量路径。本发明还提供了相应的数据中心交换机流量路径探测装置。
  • 云环境访问方法及装置-202310561516.2
  • 丁杰 - 阿里巴巴(中国)有限公司
  • 2023-05-15 - 2023-08-15 - H04L45/76
  • 本申请实施例提供一种云环境访问方法及装置,该方法包括:在第二云环境中配置第一路由信息,第一路由信息用于指示将访问第一云环境的请求发送至网关虚拟机。建立路由虚拟机和网关虚拟机之间的虚拟链路,虚拟链路用于在路由虚拟机和网关虚拟机之间进行数据传输。配置第二路由信息,第二路由信息用于指示网关虚拟机将访问请求发送至路由虚拟机,以及指示路由虚拟机将访问请求发送至目标服务,访问请求用于请求访问第一云环境中的目标服务。根据第一路由信息、第二路由信息以及虚拟链路,将访问请求经过网关虚拟机转发至路由虚拟机,并由路由虚拟机将访问请求发送至目标服务。本申请的技术方案可以有效的实现第二云环境和第一云环境中的互相访问。
  • 业务调度方法、装置、计算机设备及存储介质-202310696018.9
  • 廖文奇;李栋梁 - 苏州浪潮智能科技有限公司
  • 2023-06-13 - 2023-08-15 - H04L45/76
  • 本申请涉及一种业务调度方法、装置、计算机设备及存储介质,涉及通信技术领域。业务调度方法包括:感知虚拟机的状态信息,获取租户业务的业务信息;基于业务信息自第一路由和第二路由二者中选择其中一者作为租户业务的转发方式;其中,第一路由的优先级高于第二路由的优先级;结合业务信息以及状态信息,编排租户业务的路由路径以及目的虚拟机;控制租户业务通过所选中的转发方式按照路由路径访问目的虚拟机。采用本方法能够多维度地进行业务调度,有利于精细化控制网络流量。
  • 一种基于SDWAN的数据传输方法及装置-202210546924.6
  • 吴桐华;王丽梅;崔一佳;温彦龙;王振民;朱学欢 - 天翼云科技有限公司
  • 2022-05-18 - 2023-08-08 - H04L45/76
  • 本申请实施例提供了一种基于SDWAN的数据传输方法及装置,用于减少SDWAN网络中路由的传递数量,降低反射器设备路由表项规格,以及提升SDWAN网络的可靠性和稳定性。所述方法包括:第一接入点POP接收多个租户的客户前置设备CPE发送的路由信息;建立路由信息与目标路由之间的映射关系,并基于映射关系生成路由映射表项:将目标路由发送给路由反射器,以及将路由映射表项发送给软件定义网络SDN控制器,以使路由反射器将所述目标路由发送给第二POP,以及通过SDN控制器将路由映射表项发送给第二POP,第二POP基于目标路由和路由映射表项获取路由信息,基于路由信息指导数据传输。
  • 一种软件定义云网融合架构及路由实现方法-202310302954.7
  • 任双印;龚晓敏;王敬超 - 中国人民解放军军事科学院系统工程研究院
  • 2023-03-23 - 2023-07-18 - H04L45/76
  • 本发明公开了一种软件定义云网融合架构,其技术方案是:云资源实时感知单元对算力卸载端的计算/存储资源进行感知;网络质量实时感知单元感知网络拓扑及链路流量;云网资源统一纳管单元实时获取各个云平台的计算资源和存储资源,形成包括云平台计算和存储信息以及网络链路信息的计算/存储/网络全局视图;软件定义算力路由计算单元根据算力请求端的算力请求,结合计算/存储/网络全局视图,计算从算力请求端到算力卸载端的路由,并以流表的形式将路由配置到软件定义交换机中。本发明在进行计算任务卸载的同时实时感知网络负载状态,根据负载状态设计满足服务质量保障的路由,从云网融合的视角为用户的业务提供全局调度统筹兼顾网络与算力。
  • 一种SDN网络中多播传输的新增功能节点部署优化方法-202111334075.X
  • 陈权;郑膨欣;王涛;李龙渠 - 广东工业大学
  • 2021-11-11 - 2023-07-04 - H04L45/76
  • 本发明针对现有技术的局限性,提出了一种SDN网络中多播传输的新增功能节点部署优化方法,对于待处理SDN网络,根据其网络拓扑关系图,运用最小割处理方法获得功能节点候选集,然后,以一种启发式算法:基于遗传搜索的新增功能节点部署算法,在功能节点候选集的基础上,进行遗传编码,寻找出最佳的节点转变组合方案和服务器部署方案。通过节点转变组合方案和服务器部署方案,进行优化新增功能节点的部署,从而达到优化SDN网络中多播传输的目的。
  • 一种云内网与物理网通信的方法、装置、设备以及介质-202310251355.7
  • 请求不公布姓名 - 安超云软件有限公司
  • 2023-03-15 - 2023-06-09 - H04L45/76
  • 本申请是关于一种云内网与物理网通信的方法、装置、设备及介质,所述方法包括,所述目标转发面接收所述目标虚拟机发送的第一ARP请求,并将与所述第一ARP请求对应的第一ARP应答信息发送给所述目标虚拟机;所述目标转发面接收所述目标虚拟机主机发送的第一数据报文,并在目标转发表中查找所述第一数据报文对应的下一跳信息;当所述下一跳信息为所述第一虚拟接口时,把所述第一数据报文发送至所述第一虚拟接口,以通过所述目标物理接口将所述第一数据报文发送至目标物理网。以避免使用特定类型的硬件路由器从而避免用户被厂商绑定。
  • 在计算机网络中建立虚拟网络路由-202111340337.3
  • 詹姆斯·吉查德;李勇 - 华为技术有限公司
  • 2018-12-05 - 2023-06-06 - H04L45/76
  • 一种数据包路由方法,包括:第二节点获取第一数据包;获取第一VN标签,该第一VN标签指示了该第一数据包对应的服务或应用;获取第二数据包,所述第二数据包包括所述第一VN标签和所述第一数据包的负载,并将所述第二数据包转发至第一节点;第一节点接收到该第一数据包后,根据该第一数据包中的第一VN标签,从第一VN标签和第一路由信息的对应关系中,获取所述第一路由信息,并根据所述第一路由进行转发。通过此方法,提升了数据包转发过程中的应用感知。
  • 一种基于SDN的路由路径选择方法、装置及存储介质-202310016324.3
  • 郭建章;周伟;彭志婷;徐峰;卞国震;王俊;马冬松 - 中电信数智科技有限公司
  • 2023-01-06 - 2023-05-30 - H04L45/76
  • 本发明公开了一种基于SDN的路由路径选择方法、装置及存储介质,涉及计算机技术和路由选择技术领域。该基于SDN的路由路径选择方法,包括以下步骤:S1,通过转送自治系统网络模型,获取统计数据;S2,根据最优路由路径选择算法,计算每个流到达时最佳QoS的路由路径。本发明通过采用基于线性松弛方案Gomory切割平面法和分支定界法的最优路由路径选择算法,计算出每个流到达时最佳QoS的路由路径,达到了最大限度地提高SD‑WAN环境下剩余带宽的最小值,同时兼顾穿越中转AS的业务流的吞吐量和丢包率要求,解决了现有提高广域网中路由QoS的方案对SD‑WAN环境下剩余带宽的利用率低的问题。
  • 使转发设备转发数据的方法、控制设备、存储介质和系统-201911111867.3
  • 文旭 - 优刻得科技股份有限公司
  • 2019-11-14 - 2023-05-30 - H04L45/76
  • 本发明提供种使转发设备转发数据的方法、控制设备、存储介质和系统,转发设备包括智能网卡,方法包括:在转发设备中设置虚拟机,虚拟机具备与智能网卡的物理功能相对应的第一虚拟功能网口和第二虚拟功能网口;当智能网卡接收到数据时,使智能网卡对数据进行解封装,得到解封装数据,并将解封装数据发送给第一虚拟功能网口;利用数据转发程序,使解封装数据在虚拟机之内从第一虚拟功能网口传送到第二虚拟功能网口;使第二虚拟功能网口对解封装数据进行重新封装,得到新封装数据,将新封装数据转发到智能网卡,并使智能网卡将新封装数据转发给目的地云主机。通过本发明,智能网卡的转发性能不会受到CPU处理能力的限制,因此能够提高数据转发性能。
  • 虚拟化网络链路可视化方法、系统、计算机及存储介质-202111129845.7
  • 邬孟琛;范渊;苗春雨 - 杭州安恒信息技术股份有限公司
  • 2021-09-26 - 2023-04-18 - H04L45/76
  • 本申请涉及一种虚拟化网络链路可视化方法、系统、计算机及存储介质,该方法包括:通过OVS获取各个节点的虚拟化信息,并对虚拟化信息进行序列化处理;调用各个节点的链路信息查询接口,以收集链路数据并对链路数据进行汇聚;整合虚拟化信息和链路数据,以构建出虚拟化网络链路并通过预设可视化算法将虚拟化网络链路显示在预设的画布上。通过本申请提供的虚拟化网络链路可视化方法能够使用户可以直观的查看到业务拓扑相关的虚拟化网络链路,并且用户在检验该虚拟化网络链路时,可以快速、准确的查找到发生错误的节点,大幅提升了工作效率,从而降低了运维的成本。
  • 一种面向时间敏感网络的可靠路由及调度方法-202211551686.4
  • 杨帅锋;曲海阔 - 国家工业信息安全发展研究中心
  • 2022-12-05 - 2023-04-11 - H04L45/76
  • 本发明涉及时间敏感网络技术领域,且公开了一种面向时间敏感网络的可靠路由及调度方法,包括现场层、数据链路层、网络层、应用层和网络管理器。该面向时间敏感网络的可靠路由,通过基于SDN和TSN的工业互联网网络架构,阐述了整个网络架构的作用机理与涉及的关键技术,分析了该网络架构中时间触发流路由和调度问题的具体场景,与目标在工业互联网的实际部署中,TSN的网络部署和配置需要融合软件定义网络来构建,SDN将控制平面和数据平面分离开,并且将逻辑集中在基于软件的控制器中,可以随时监视网络状态,根据网络的变化进行动态决策,通过SDN的控制方法,可以方便地实现TSN标准中的网络配置模型,使得衡量调度瓶颈的指标更加准确。
  • 虚拟机通信方法、装置、系统及电子设备-202010840308.2
  • 藏洪永 - 海光信息技术股份有限公司
  • 2020-08-19 - 2023-04-07 - H04L45/76
  • 本申请提供了一种虚拟机通信方法、装置、系统及电子设备,其中,该方法包括:源虚拟机在发送目标数据包时,判断目标数据包对应的目标虚拟机的目标局域网地址是否为源虚拟机所在的物理机的其它虚拟机的局域网地址;若目标局域网地址是物理机的其它虚拟机的局域网地址,则在源虚拟机和目标虚拟机中热插入共享内存之后,源虚拟机通过共享内存,将目标数据包从源虚拟机传输至目标虚拟机。能够提高虚拟机之间的通信效率。
  • 一种基于业务功能链的报文转发方法和装置-202010394963.X
  • 游君平;赵海峰 - 新华三信息安全技术有限公司
  • 2020-05-12 - 2023-04-07 - H04L45/76
  • 本申请提供了一种基于业务功能链的报文转发方法和装置,其中该方法包括:识别收到的第一以太网报文所属租户的本地VPN虚拟局域网;在租户的VPN映射关系中查找映射于本地VPN的全局VPN ID;基于业务功能链转发表查找第一业务功能链节点;根据查找到的第一业务功能链节点将第一以太网报文封装为具有第一NSH网络服务头部的第一NSH报文;其中,第一NSH头部携带全局VPN ID;在业务功能链域的转发实例查找到达第一业务功能链节点的第一虚拟可扩展局域网VXLAN隧道;根据第一VXLAN隧道将第一NSH报文封装为第一VXLAN报文,通过第一VXLAN隧道的出端口发送。
  • EVPN主机路由桥接HRB和EVPN云原生数据中心-202211199137.5
  • 林雯;M·古普塔;S·查纳利;V·K·纳拉穆图 - 瞻博网络公司
  • 2022-09-29 - 2023-04-04 - H04L45/76
  • 本公开的部分实施例涉及EVPN主机路由桥接HRB和EVPN云原生数据中心。描述了用于EVPN主机路由桥接(HRB)和具有主机路由桥接(HRB)的EVPN云原生数据中心的技术。数据中心的主机计算设备包括一个或多个容器化用户级应用。云原生虚拟路由器被配置成由数据中心应用编排引擎动态部署,并且在主机计算设备的用户空间中可操作。处理电路装置被配置用于执行容器化用户级应用和云原生虚拟路由器。云原生虚拟路由器包括被配置为操作为控制平面的容器化路由协议过程,以及针对容器化路由器的数据平面。数据平面被配置为操作覆盖网络的以太网虚拟专用网络(EVPN)封装/解封装数据路径,用于通过数据中心的交换结构传送容器化用户应用的第二层(L2)网络业务。
  • 在软件定义网络中基于性能分数针对应用的路径选择-201880049335.9
  • 桑德普·巴贾杰 - 思科技术公司
  • 2018-07-27 - 2023-03-31 - H04L45/76
  • 一种方法可以包括接收被导向软件定义网络(SDN)中的目的地的应用的数据流。所述方法还可以包括识别应用的分类。所述方法可以附加地包括识别与应用的分类相关联的性能阈值集。所述方法还可以包括确定应用的数据流在SDN中的当前性能。所述方法还可以包括中基于性能阈值集和应用的数据流在SDN的当前性能来生成针对应用的性能分数。所述方法可以进一步包括使得针对应用的性能分数经由界面被呈现。
  • 基于带宽匹配的SDDCN节能路由方法、系统、设备及存储介质-202211303181.6
  • 张朝辉;闵晓飞;李靖;刘三阳 - 西安电子科技大学
  • 2022-10-24 - 2023-01-24 - H04L45/76
  • 本发明公开了基于带宽匹配的SDDCN节能路由方法、系统、设备及存储介质,首先对需要传输的数据流按照其截止时间进行排序,然后对拓扑中的链路权值按照每个排序后的数据流需要传输的数据量进行更新,删除可用带宽不满足传输数据量的链路,得到新的拓扑图。在重新定义的拓扑图中,计算源节点和目标节点之间所有可用链路,从这些可用链路中选取与流传输数据量所需带宽最匹配的链路进行路由。本发明对DCNs中节能和流量负载均衡方案进行研究,在减少网络能耗的同时提升网络吞吐量,具有重要意义。
  • 基于SDN控制EVPN与DRNI环境资源的优化方法-202211292619.5
  • 张振;陈清华 - 杭州云合智网技术有限公司
  • 2022-10-21 - 2023-01-20 - H04L45/76
  • 本发明公开了一种基于SDN控制EVPN与DRNI环境资源的优化方法,包含如下步骤:搭建EVPN与DRNI结合的组网;当组网中的第一服务器的虚机需要和网络交换时,第一服务器的虚机发送ARP请求报文;组网中的第一交换机的交换芯片通过入端口接收报文,并将报文的VLAN信息送给第一交换机的CPU;第一交换机的CPU根据报文的VLAN信息及入端口信息,查找与之对应的第一交换机的AC11,再根据第一交换机的AC11查找到对应的第一交换机的VSI1,报文在第一交换机的VSI1内软转;同时将第一交换机的AC11的配置信息发送给第一交换机的交换芯片,后续入端口上来的报文就在第一交换机的AC11对应的第一交换机的VSI正常转发。本发明通过按需下发的方式,控制AC的实际下发情况,提高资源的利用率。
  • 基于eBPF的虚拟机数据传输方法、装置、设备及存储介质-202211194907.7
  • 王文强 - 建信金融科技有限责任公司
  • 2022-09-28 - 2023-01-10 - H04L45/76
  • 本公开提供了一种基于eBPF的虚拟机数据传输方法、装置、设备及存储介质,可以应用于云计算技术领域。该方法应用于发送端宿主机,所述发送端宿主机设置有eBPF程序,所述eBPF程序预先配置有虚拟网络与物理网络的路由信息,包括:响应于钩子函数触发事件,执行eBPF字节码拦截虚拟机数据包,其中,所述钩子函数触发事件为所述虚拟机数据包进入宿主机网络协议栈;解析所述虚拟机数据包,以获取目的虚拟机地址信息;根据所述目的虚拟机地址信息和所述路由信息确定目的虚拟机对应的目的宿主机IP地址信息以及虚拟网络ID信息;对所述虚拟机数据包进行封装,以生成宿主机数据包;将所述宿主机数据包路由至目的宿主机中。
  • SDN转发装置及SDN转发系统-202222237974.4
  • 刘思聪;向军;蔡超 - 中国联合网络通信集团有限公司
  • 2022-08-24 - 2022-11-22 - H04L45/76
  • 本实用新型实施例提供一种SDN转发装置及SDN转发系统,该SDN转发装置包括:与第一交换模块、第二交换模块、业务输入端口、试验网输入端口、业务输出端口和试验网输出端口;其中第一交换模块分别与业务输入端口和业务输出端口连接,第一交换模块用于将上一SDN转发装置的业务数据转发至下一SDN转发装置;第二交换模块分别与试验网输入端口和试验网输出端口连接,第二交换模块用于将上一SDN转发装置的试验数据转发至下一SDN转发装置。本实施例解决了现有技术不具备验证SDN控制器制定的转发策略是否合理有效的机制和设备的问题。
  • 一种基于多智能体强化学习的软件定义网络路由方法-202110663351.0
  • 李骏;林艳;张一晋;傅凝宁 - 南京理工大学
  • 2021-06-15 - 2022-10-14 - H04L45/76
  • 本发明公开了一种基于多智能体强化学习的软件定义网络路由方法,该方法为:获取当前软件定义网络的参数,初始化各个节点的路由表和先验概率分布;当数据流到达各个节点时,各个节点根据∈贪心算法选择下一跳节点并转发数据流;各个节点完成数据流的转发后计算即时奖励,并且收到下一跳节点反馈的先验概率分布和路由表中的值;各个节点根据Soft Q‑learning算法更新自己的路由表和先验概率分布,并多次训练直到收敛,获得最优策略。本发明适用于软件定义网络中的路由问题,能有效加快路由表的收敛速度,减少网络延时,提高网络的抗干扰和抗攻击的能力。
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

400-8765-105周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top