[发明专利]基于Q学习和数据重要度的水声网络介质访问控制方法

摘要

基于Q学习和数据重要度的水声网络介质访问控制方法。父节点搜集子节点数据的传输过程分为若干个时隙，每个子节点的数据重要度等级分为三个等级，通过合理设置奖励机制，对Q值表的子矩阵依次更新；在子矩阵的更新中，先更新Q值子矩阵，节点拟选择子矩阵中Q值最大的位置作为传输时隙，再更新下一个子矩阵；对后续的子矩阵更新，若选择前述已选择时隙所对应的Q值那一列，则奖励值为0，而从拟选择子矩阵中Q值最大所在列作为传输时隙；当所有节点都选择好时隙后，在下一轮的Q值表更新中，子矩阵的更新顺序与上一次更新顺序相反。当各节点拟选择的时隙三次都与上次拟选择的时隙相同时，则表示Q值已训练到稳定，最后拟选择的时隙为最终时隙。