[发明专利]基于量子注意力循环编码解码神经网络的退化预测方法有效
申请号: | 201910318404.8 | 申请日: | 2019-04-19 |
公开(公告)号: | CN110458278B | 公开(公告)日: | 2021-09-14 |
发明(设计)人: | 李锋;陈勇;田大庆 | 申请(专利权)人: | 四川大学 |
主分类号: | G06N3/04 | 分类号: | G06N3/04;G06N3/08;G06N10/00;G06Q10/04 |
代理公司: | 成都正华专利代理事务所(普通合伙) 51229 | 代理人: | 陈选中 |
地址: | 610064 四*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 量子 注意力 循环 编码 解码 神经网络 退化 预测 方法 | ||
1.基于量子注意力循环编码解码神经网络的退化预测方法,其特征在于,包括以下步骤:
S1、采集旋转机械运行的原始振动数据;
S2、根据原始振动数据构造模糊熵;
S3、对模糊熵进行滑动平均降噪处理,并将处理后的降噪模糊熵作为旋转机械退化状态特征;
S4、将旋转机械退化状态特征输入到量子注意力循环编码解码神经网络中,并对其进行训练;
S5、通过训练好的量子注意力循环编码解码神经网络对测试样本进行退化预测;
所述步骤S4中的量子注意力循环编码解码神经网络包括相互连接编码器和解码器;
所述编码器包括依次连接的编码器注意力机制和编码器量子门限循环单元,所述编码器量子门限循环单元作为编码器的循环单元;
所述解码器包括依次连接的解码器注意力机制和解码器量子门限循环单元,所述解码器量子门限循环单元作为解码器的循环单元;
所述编码器量子门限循环单元的输出端与解码器注意力机制的输入端连接。
2.根据权利要求1所述的基于量子注意力循环编码解码神经网络的退化预测方法,其特征在于,所述步骤S2中的构造模糊熵的方法具体为:
设时间序列重构向量和
式中,和为由时间序列重构的两个向量,下标i和j为不同的向量序号;
M为时间序列的维数;
n为向量和向量的维数,且i,j∈1,…,M-n;
计算和的距离lij为:
计算和的相似度Lij为:
式中,exp(·)表示指数函数;
Δ指数函数边界的梯度;
r是指数函数边界的宽度;
定义一个函数O(Δ,r)为:
同理,构造n+1维的向量和得到函数O′(Δ,r);
计算原始振动数据的模糊熵FE为:
3.根据权利要求1所述的基于量子注意力循环编码解码神经网络的退化预测方法,其特征在于,构造编码器量子门限循环单元和解码器量子循环单元的过程具体为:
设t时刻编码器量子循环单元的输入序列其量子态为t时刻隐层状态其量子态为
式中,为在Bloch球面坐标中在xy平面的投影与x轴的夹角;
为在Bloch球面坐标中与z轴的夹角;
为在Bloch球面坐标中在xy平面的投影与x轴的夹角;
为在Bloch球面坐标中与z轴的夹角;
t时刻,编码器量子门限循环单元的更新门zt为:
式中,
σ(·)为激活函数;
F(·)为变量坐标求和函数;
Wjz为更新门权值矩阵;
为更新门活性值矩阵;
为更新门zt中元素的权重量子旋转矩阵;
为更新门zt中元素的活性值量子旋转矩阵;
δj为的旋转角;
μj为的旋转角;
t时刻,编码器量子门限循环单元的重置门rt为:
式中,rtj∈rt=[rt1,rt2,…,rtm];
Wjr为重置门权值矩阵;
为重置门活性值矩阵;
为重置门rt中元素rtj的权重量子旋转矩阵;
为重置门rt中元素的活性值权重矩阵;
γj为的旋转角;
ψj为的旋转角;
根据重置门rt和隐层状态ht-1,t时刻,编码器量子门限循环单元的候选集为:
式中,
tanh(·)为激活函数;
为候选集权值矩阵;
为候选集活性值矩阵;
为候选集中元素的权重量子旋转矩阵;
为候选集中元素的活性值量子旋转矩阵;
ξj为的旋转角;
εj为的旋转角;
为在Bloch球面坐标中在xy平面的投影与x轴的夹角;
为在Bloch球面坐标中与z轴的夹角;
⊙为元向乘法运算符;
根据更新门zt和候选集t时刻的隐层状态ht为:
式中,Λ为常数矩阵,且其所有元素的值为1,其维数与更新门zt相同;
因此,t时刻,输入序列xt与编码器量子门限循环单元隐层状态ht之间的函数关系为:
ht=f(ht-1,xt)
将编码器注意力机制引入到编码器中,的相关系数为:
式中,Γe为编码器调节系数向量,且Γe的所有元素的值为1;
We和Ue均为编码器中的注意力参数矩阵,且We∈R2m×2m,Ue∈R2m×1;
为t-1时刻编码器中的编码器量子门限循环单元的隐层状态和候选集的连接;
将相关系数归一化得到输入序列xt的权重系数为:
式中,exp(·)表示指数函数;
因此,将输入序列xt更新为
更新后的输入序列与编码器中编码器量子门限循环单元的隐层状态的功能关系表示为:
同理,将解码器注意力机制引入到解码器中,根据t时刻编码器的隐层状态和t-1时间的解码器的隐层状态的相关系数为:
式中,Φd为解码器调节系数向量,且Φd中所有元素的值为1;
Wd和Ud均为解码器中的注意力参数矩阵,且Wd∈R2m×2m,Ud∈R2m×1;
将相关系数归一化得到的权重系数为:
因此,解码器中的上下文向量ct为
更新的上下文向量ct-1与解码器量子门限循环单元中的隐层状态之间的功能关系为:
另外,在解码器量子门限循环单元中增加一个输出层,计算量子注意力循环编码解码神经网络的输出向量yt为:
式中,
Wjo为输出向量yt中元素的权重矩阵;
υj为Wjo的旋转角。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川大学,未经四川大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910318404.8/1.html,转载请声明来源钻瓜专利网。