[发明专利]一种水声传感器网络合作探索强化学习路由方法

摘要

本发明涉及水声传感器网络、水声路由协议技术领域，特别涉及一种水声传感器网络合作探索强化学习路由方法。本发明包括以下步骤：(1)初始化各节点Q值及V值；(2)判断是否成立；(3)中继节点收到数据包/控制包，更新邻居列表，并判断是否继续转发；(4)sink收到数据包，结束本次传输。基于强化学习的路由协议在选择路径时能够近似达到全局最优，并且可以合并多项影响性能的因素。本发明中，在算法未收敛时，源节点在发送数据包的同时发送数个控制包，以加速算法的收敛，否则，只发送数据包。在算法收敛后，通过选择V值最高的下一跳节点实现近似全局最优路径，从而均衡了网络能耗，延长了网络寿命，解决了强化学习收敛速度慢的问题。

主权项

1.一种水声传感器网络合作探索强化学习路由方法，其特征在于，该方法包括以下步骤：(1)初始化各节点Q值及V值；(2)根据各节点的Q值及V值，判断是否成立：(2.1)如果判断成立，源节点只发送数据包；(2.2)如果判断不成立，源节点在发送数据包的同时发送控制包；(3)根据源节点发送的数据包或控制包，中继节点接收数据并读取包头；(4)根据中继节点接收的数据更新路由表，并判断其是否继续发往本节点，若判断数据是发往本节点，则计算Q值，更新V值至包头，并继续传输数据包；(5)判断汇聚节点sink是否收到数据包：(5.1)若sink收到数据包，则结束本次传输；(5.2)若sink没有收到数据包，则重复步骤(3)到步骤(5)，直至sink收到数据包。