[发明专利]一种用于电力信息网络路由流量的控制方法

说明书

本发明公开了一种用于电力信息网络路由流量的控制方法，包括抓取流量数据并创建数据集；预处理数据集X，预处理包括对无序数据进行调整；建立网络环境并创建智能体，且令智能体与网络环境进行交互，包括利用智能体分配优先级即执行动作，在智能体执行动作ysubgt;k/subgt;后，对智能体赋予奖励bsubgt;k/subgt;与网络环境的下一个状态zsubgt;k/subgt;′，并将四元组(zsubgt;k/subgt;,ysubgt;k/subgt;,bsubgt;k/subgt;,zsubgt;k/subgt;′)放入至经验池U中；对经验池U中的四元组(zsubgt;k/subgt;,ysubgt;k/subgt;,bsubgt;k/subgt;,zsubgt;k/subgt;′)进行采样，再更新智能体；通过更新后的智能体对待检测的流量数据进行处理，得到对应的优先级，进而基于优先级控制电力信息网络的路由流量。本发明提供的能够为流量数据分配合理的优先级，从而保证电力网络系统的传输效率及质量。

技术领域

本发明涉及电力信息网络领域，特别涉及一种用于电力信息网络路由流量的控制方法。

背景技术

路由流量控制是指定规则以确保为每种应用提供不同的宽带和优先权，使得有限的宽带发挥最大的作用。各种设备都有了连接到互联网的需求，这些设备通常连接到网络中。路由管理设备常常需要负责网络连接和流量控制。传统的流量控制方法基于IP和端口，能实现对简单流量分配的控制，但缺乏可升级性和拓展性，无法适应新型的流量做出分配方案，同时很难寻找到一个合适的规则为不同的应用分配宽带，且费时费力，越来越难以满足日益复杂的需求。

随着电网智能化的推进，电力信息网络得到不断发展，其通信数据量也越来越庞大，由于信息网络中应用系统的信息流需要较大宽带(如视频会商系统等)，导致网络节点拥堵，造成电力信息网络服务质量出现下降的情况也屡见不鲜。虽然目前有一些方法解决这个问题，但是，电力信息网络存在着流量实时变化快、数据量大、不同业务要求差别大、复杂性高等特点，因此很难使用单一的方法来解决这一问题。

鉴于此，需要针对电力信息网络，综合各种方法的优点，实现自主学习流量控制，设计一种更合理路由流量动态控制方法。

发明内容

鉴于以上内容，有必要提供一种用于电力信息网络路由流量的控制方法，能够有效控制电力信息网络路由流量，本发明提供的技术方案如下：

本发明提供了一种用于电力信息网络路由流量的控制方法，包括以下步骤：

S1、抓取流量数据并创建数据集；

S2、预处理所述数据集X，所述预处理包括对无序数据进行调整；

S3、建立网络环境并创建智能体，且令所述智能体与网络环境进行交互，包括以下步骤：

S31、利用所述智能体根据下式分配优先级即执行动作：

式中，y_k为所述智能体当前执行的动作，且y_k∈Y，所述Y包括低优先级、中优先级及高优先级，argmax为预定义的参数，z_k为所述网络环境的当前状态，且z_k从所述数据集X中获得，ζ为独立高斯噪声；

S32、在所述智能体执行动作y_k后，对所述智能体赋予奖励b_k与所述网络环境的下一个状态z_k′，并将四元组(z_k,y_k,b_k,z_k′)放入至经验池U中，重复执行S31至S32直至得到所述数据集X中所有的z_k对应的y_k，即得到所有的四元组(z_k,y_k,b_k,z_k′)；