[发明专利]主动诱骗式智能抗干扰方法

权利要求书

1.一种主动诱骗式智能抗干扰方法，包括以下步骤：首先根据黑箱环境模块接收的通信波形和当前全频带感知信号强度以及下一次感知一起构造环境状态，分析智能干扰源，基于观察智能干扰源的干扰行为构造“样本标签模块”，生成对抗样本信号的训练数据集和诱骗决策“深度神经网络”，基于深度神经网络，以最小化干扰源的干扰期望回报值和干扰效果为目标，以最小化攻击次数和攻击信号强度为约束，将诱惑样本攻击过程建模为一个关于干扰时机b_t和干扰样本值δ_t两个变量；根据深度强化学习原理对智能干扰源的各个算法模块定义干扰行为、环境状态、回报函数、干扰决策策略，将智能干扰源的回报函数R设计为最小化合法通信链路的效用函数，干扰行为设为频率选择与功率调整；构造包含输入层、多层隐藏层和输出层的智能干扰源决策神经网络；智能干扰源决策神经网络通过全频谱感知获取环境知识，全频带上感知的信号强度，对环境的感知获取环境状态和干扰行为，估计深度训练神经网络主动诱骗迷惑样本，对更新干扰行为的观察进行迭代训练参数，计算攻击时机变量b_t和攻击样本变量δ_t；通过智能干扰源模块设计干扰行为A＝{f_jam,P_jam}，进行干扰行为决策和攻击网络训练，并根据深度神经网络计算的攻击时机和攻击样本值两个变量，通过变量求解，在频率上释放相应干扰功率的电磁信号，对合法链路进行干扰；深度神经网络基于策略值学习的机制和对应行为的概率分布，引入迷惑样本，诱骗智能干扰源做出错误的干扰决策，输出对应行为的Q值和对抗样本信号，实现通信系统的智能抗干扰，其中，Q值表示行为评估值，f_jam表示所选干扰频率，P_jam表示对所选频率上施加的干扰功率。

2.如权利要求1所述的主动诱骗式智能抗干扰方法，其特征在于：深度神经网络建立M个隐藏层，按顺序建立输入层与隐藏层的联结，建立隐藏层与输出层的联结，为每个隐藏层的每个节点选择激活函数，求解每个联结的权重和每个节点自带的bias值，输入层、隐藏层和输出层用于实现对智能干扰源干扰策略的逼近，对于基于策略学习的智能干扰源的深度神经网络，对所构造输出的深度神经网络参数θ和当前状态S_t输出所有行为A_t的分布概率表示为：π(S_t,A_t|θ)，将基于值学习的深度神经网络，以Q(·)值定义当前行为与状态的匹配度表示为Q(S_t,A_t)。

3.如权利要求1所述的主动诱骗式智能抗干扰方法，其特征在于：智能干扰源决策神经网络包括：基于高智能压制的深度强化学习神经网络DQN、DQN的智能抗干扰源神经网络和基于迷惑样本的主动干扰对抗神经网络；DQN通过神经网络近似求得值函数，输入一个状态state,s，输出值函数Q(s,a)，通过神经网络得到值函数，环境先给出一个观测值obs，智能体根据神经网络求得关于这个obs的所有值函数Q(s,a)，再根据策略选择行为action并做出决策，环境接收到此action后给出一个奖励R及下一个obs，根据R去更新值函数网络的参数，接着进入下一个学习步骤step,如此循环下去，直到训练出一个好的值函数网络。

4.如权利要求3所述的主动诱骗式智能抗干扰方法，其特征在于：环境首先向智能体发送一个状态S，然后智能体基于其知识采取动作A来响应该状态，根据当前状态决定下一步动作的策略，当前状态S的期望长期返回值，之后，环境发送下一个状态，并把奖励R返回给智能体，智能体用环境所返回的奖励来更新其知识，对上一个动作进行评估，这个循环一直持续，直到环境发送终止状态来结束这个事件。