[发明专利]基于可迁移注意力神经网络的脑电情感识别方法及装置在审
申请号: | 202010030240.1 | 申请日: | 2020-01-13 |
公开(公告)号: | CN111259761A | 公开(公告)日: | 2020-06-09 |
发明(设计)人: | 郑文明;李阳;江星洵;宗源;李溯南 | 申请(专利权)人: | 东南大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08;A61B5/00;A61B5/16 |
代理公司: | 南京苏高专利商标事务所(普通合伙) 32204 | 代理人: | 冯艳芬 |
地址: | 211102 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 迁移 注意力 神经网络 情感 识别 方法 装置 | ||
1.一种基于可迁移注意力神经网络的脑电情感识别方法,其特征在于该方法包括:
(1)获取一个脑电情感数据库,分为训练集和测试集,其中,脑电情感数据库中包含有若干脑电情感数据和对应的情感类别标签;
(2)建立基于可迁移注意力神经网络的脑电情感识别网络,所述脑电情感识别网络包括特征提取器和情感分类器,所述特征提取器包括依次连接的深度特征提取模块、局部注意力子网和全局注意力子网,用于提取输入样本数据中易于迁移与情感相关的全局特征,所述情感分类器用于预测输入的样本数据的情感类别;
(3)对所述脑电情感识别网络进行训练,训练时,将训练集和测试集中每一脑电情感数据作为一个样本,输入特征提取器,提取大脑全局特征,并将从训练集中每一脑电情感数据提取的全局特征作为一个样本,输入情感分类器,网络总损失为情感分类器损失加上注意力熵损失后再减去注意力子网和全局注意力子网损失,通过随机梯度下降法更新网络参数,完成网络训练;
(4)提取待识别的脑电情感数据,将其作为一个测试集样本输入训练好的脑电情感识别网络,并按照步骤(3)对脑电情感识别网络调整,得到识别的情感类别。
2.根据权利要求1所述的基于可迁移注意力神经网络的脑电情感识别方法,其特征在于:所述深度特征提取模块具体包括:
脑电情感数据获取单元,用于获取输入的脑电情感数据式中,形如x*表示X中第*个电极采集的脑电信号,d表示电极采集的数据的维度,n表示电极数目;
第一递归神经网络,用于从水平方向扫描脑电情感数据中所有电极采集的脑电信号,获得水平方向上包含自身和左右电极关系的电极数据表示Hh={hh,i};其中,所述第一递归神经网络包括n个隐藏单元,每个隐藏单元执行如下计算:
式中,hh,i、hh,j为第一递归神经网络的第i、j个隐藏单元的输出,i=1,…,n,df是输出数据维度;为可学习的参数矩阵;σ(.)表示非线性函数,N(xi)表示xi的前序节点集合;
第二递归神经网络,用于从垂直方向扫描脑电情感数据中所有电极采集的脑电信号,获得垂直方向上包含自身和上下电极关系的电极数据表示Hv={hv,i};其中,所述第二递归神经网络包括n个隐藏单元,每个隐藏单元执行如下计算:
式中,hv,i、hv,j为第二递归神经网络的第i、j个隐藏单元的输出,i=1,…,n,为可学习的参数矩阵;N(xi)表示xi的前序节点集合;
顺序调整单元,用于调整Hh和Hv中元素的顺序,使变换后的电极位置一致;
特征合并单元,用于根据下式计算得到的脑电情感数据X的深度特征H:
H={hk}
式中,P和Q为两个变换矩阵。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东南大学,未经东南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010030240.1/1.html,转载请声明来源钻瓜专利网。