[发明专利]一种车载自组网络数据包传送方法及装置

说明书

本发明提供一种车载自组网络数据包传送方法及装置，包括：根据车载自组网络的当前状态信息，结合马尔科夫决策过程模型，构建当前网格的状态空间和当前网格的动作空间；其中，所述当前网格中包括数据包发送节点；根据所述状态空间和所述动作空间，结合联合估计Q学习算法模型，获取所述当前网格中数据包发送节点的最大动作价值收益值，以根据所述最大动作价值收益值确定目标安全网格；基于最小角度选择策略，在所述目标安全网格中选取中继节点，通过所述中继节点进行数据包传送。本发明通过联合估计Q学习算法模型，得到一种安全有效的车载自组网络数据包传送策略，可以抵御多种形式的丢包攻击，提升网络的安全性。

技术领域

本发明涉及网络数据传输技术领域，尤其涉及一种车载自组网络数据包传送方法及装置。

背景技术

车载自组网络(Vehicular Ad-hoc Networks；VANET)是由车辆、路边单元(RoadSide Unit；RSU)和基站(Base Station；BS)等异构节点所组成的分布式系统，这些异构节点之间可以交换数据，且支持关键信息、多媒体数据等内容的分发。面对日益增长的网络威胁，VANET中的安全和隐私等问题显得至关重要。然而，受制于固有的分布式机制以及节点的高度移动性和异构性，VANET容易遭受网络中恶意节点的丢包攻击，其安全问题一直得不到有效解决。现有的安全机制主要采用多路径路由和基于信任的路由，前者具有较高的能耗，后者需要对网络节点进行信任评估，这在实践中较难实现。

因此，如何解决现有技术中由于VANET容易遭受恶意路由的攻击，导致网络安全性不高的缺陷已成为业界日益关注的研究重点。

发明内容

本发明提供一种车载自组网络数据包传送方法及装置，用以解决现有技术中由于VANET容易遭受恶意路由的攻击，导致网络安全性不高的缺陷。

本发明提供一种车载自组网络数据包传送方法，包括：

根据车载自组网络的当前状态信息，结合马尔科夫决策过程模型，构建当前网格的状态空间和当前网格的动作空间；其中，所述当前网格中包括数据包发送节点；

根据所述状态空间和所述动作空间，结合联合估计Q学习算法模型，获取所述当前网格中数据包发送节点的最大动作价值收益值，以根据所述最大动作价值收益值确定目标安全网格；

基于最小角度选择策略，在所述目标安全网格中选取中继节点，通过所述中继节点进行数据包传送。

根据本发明提供的一种车载自组网络数据包传送方法，所述根据所述状态空间和所述动作空间，结合联合估计Q学习算法模型，获取所述当前网格中数据包发送节点的最大动作价值收益值的步骤，具体包括：

在所述数据包发送节点为车辆节点的情况下，根据所述状态空间和所述动作空间，通过车辆节点联合估计Q学习算法模型，确定所述车辆节点的最优动作价值收益值；

在所述数据包发送节点为路边单元节点的情况下，根据所述状态空间和所述动作空间，通过路边单元节点联合估计Q学习算法模型，确定所述路边单元节点的最优动作价值收益值；

将所述车辆节点的最优动作价值收益值和所述路边单元节点的最优动作价值收益值中的最大值，作为所述数据包发送节点的最大动作价值收益值。

根据本发明提供的一种车载自组网络数据包传送方法，所述确定所述车辆节点的最优动作价值收益值的步骤，具体包括：

所述车辆节点基于所述状态空间和所述动作空间，选择执行的动作，观察所述动作执行后的结果奖励值；

其中，所述动作指的是所述车辆随机选择的动作或所述车辆节点从相邻车辆节点学习的最优动作；

观察统计所述车辆节点的相邻车辆节点的所述动作选择概率，并得到所述动作选择概率的第一归一化结果；