[发明专利]一种工作在eLAA中的基于强化学习的帧配置方法

权利要求书

1.一种工作在eLAA中的基于强化学习的帧配置方法，其特征在于：具体步骤如下：

S1：基站作为智能体学习环境中的可能出现的各种情况并记录学习结果：基站作为智能体，记为eBS₁，处于能量检测阈值(Energy Detection Threshold)区域内，该区域内还有一个AP节点和若干个不属于智能体基站的eUE_S，记为eUE_i，记其中一个eUE为eUE₂；这些eUE_i属于同一个基站eBS₂，eBS₂不处于EDT区域内；智能体eBS₁有若干个eUE_S用户，都不处于EDT区域内，记其中一个eUE为eUE₁；EDT区域内同一时间只能有一个用户发送数据，否则会产生冲突；假设AP要传输数据，处于EDT检测区域内的eUE和eBS也有传输需求，但若eBS₂与eUE₂选择下行(DL)传输，eBS₁与eUE₁选择上行(UL)传输，则三者可同时接入信道；eBS₁在进行学习之前要获取周边环境信息，eBS₁通过X2-interface确认它们当前邻近的eUE_S和eBS，eUE_S之间通过被动感知探测到其它eUE_S，同样，eBS和eUE使用被动感知探测当前的WiFi节点；然后对可能出现的情况简化概括分类，设置Q学习算法进行强化学习，并将学习的结果保存记录下来；

S2：智能体获取自身eUE_S的上下行数据需求及在能量检测区域内的eUE_S及其eBS上下行数据需求，同时探测AP节点平均传输时间信息：当EDT区域内的用户获得传输机会时，eBS1通过X2-interface探测其当前临近的eBS并相互传递消息，以此确定临近eUES的上下行传输需求；eUE_S之间通过被动感知探测与其相近的eUE_S有哪些及是否在EDT检测区域内，同时将消息传递给eBS；eBS_S和eUE_S通过被动感知探测WiFi节点信息，eBS₁同时探测信道内WiFi平均传输时间；

S3：根据当前信息在学习结果中找到最优方案的帧配置：当有传输任务时，eBS₁通过收集到的EDT区域内的用户及关联用户的需求，再对比训练得到的结果，找到当前状态下的最优帧配置方式；

S4：智能体根据选择的结果完成帧配置过程。