[发明专利]一种基于深度学习和特征图像的肌电信号手势识别方法有效
申请号: | 201510971796.X | 申请日: | 2015-12-21 |
公开(公告)号: | CN105654037B | 公开(公告)日: | 2019-05-21 |
发明(设计)人: | 耿卫东;李嘉俊;杜宇;卫文韬;胡钰 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06F3/01;G06N3/08 |
代理公司: | 杭州求是专利事务所有限公司 33200 | 代理人: | 邱启旺 |
地址: | 310027 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 深度 学习 特征 图像 电信号 手势 识别 方法 | ||
1.一种基于深度学习和特征图像的肌电信号手势识别方法,其特征在于,包括以下步骤:
(1)从公开数据集NinaPro中获取手势动作肌电数据;对肌电信号进行预处理,包括去除噪声、信号整流及信号归一化,具体包含如下子步骤:
(1.1)带通滤波,原始表面肌电数据带宽为15-500Hz,滤波后为0-25Hz;
(1.2)信号放大;
(1.3)均方根校正;
(1.4)1Hz低通滤波;
(1.5)去除带二义性标签的样本;
(2)特征图像生成,具体包含如下子步骤:
(2.1)使用50ms,100ms,150ms,三种长度的采样窗口对数据进行采样,其中采样窗口的移动步长为窗口长度的25%;
(2.2)将步骤(2.1)采样后的数据中每个通道的数据提取特征矩阵,具体为:使用10种单值特征对数据进行特征提取,分别是:两帧信号幅值之差,信号幅值的绝对值之和,信号幅值的绝对平均值,改进信号幅值的绝对平均值1,改进信号幅值的绝对平均值2,信号均方根,估计肌肉收缩力非线性检测器,估测肌肉收缩力的对数检测器,小波包变换后信号的均值,小波包变换后信号标准差;
(2.3)将在同一个样本中提取出的所有的特征矩阵使用平行通道式的图像组成方式作为颜色通道存储到图像中得到特征图像;平行通道式的图像组成方式具体为:假设目前得到了c种特征n个通道的f×f大小的特征矩阵,如果把数据中的n个通道看成类似于图像中的颜色通道,则将其变成(n×c)×f×f的图像作为输入,才可以充分利用卷积神经网络;
(3)深度神经网络模型训练和手势识别,具体包含如下子步骤:
(3.1)修改VGGNet网络使其适用于特征图像的深度神经网络模型;
(3.2)由于每个被试的每个手势动作有10次重复数据,因此将10次重复数据按照5:3:2的比例分割为训练数据,测试数据,验证数据;
(3.3)使用训练数据样本和验证数据样本进行网络模型优化和参数调整;
(3.4)运用步骤(3.1)和步骤(3.3)中得到的网络结构模型和优化后的参数进行网络模型的训练,训练中至少迭代300次以上;
(3.5)将测试数据输入到步骤(3.3)中的训练好的网络模型中进行标签预测;
(3.6)将得到的标签按照所属的数据段按照多数同意规则进行投票,得到最后的分类结果。
2.根据权利要求1所述的一种基于深度学习和特征图像的肌电信号手势识别方法,其特征在于,步骤(2.2)中,特征矩阵生成方式具体为:假设Ninapro肌电数据片段Vi,Vi是一个f行c列的矩阵,f是数据片段中的帧数,c是数据片段的通道数,首先要把Vi矩阵以行导向的方式转化成c个向量vi,每个vi的长度为f,用于生成特征矩阵Pi;Pi是一个行数和列数都为f的方阵,设Pi中的元素pj,k,其中pj,k∈Pi,0≤j≤f,0≤k≤f,分别为矩阵中的行编号和列编号;则pj,k=C(vi,j,vi,k)其中函数C是特征函数,目的是求解vi中两个元素的差异来作为时序特征的表示。
3.根据权利要求1所述的一种基于深度学习和特征图像的肌电信号手势识别方法,其特征在于,步骤(3.1)中,使用了深度卷积神经网络进行分类识别,对深度卷积神经网络中优秀的VGGNet进行修改,使其适用于步骤(2)生成的特征图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510971796.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:人脸表情识别的方法及装置
- 下一篇:非线性特征量检测方法和系统