[发明专利]一种基于肌电信号手语识别翻译臂环及手语识别方法在审
申请号: | 201811233389.9 | 申请日: | 2018-10-23 |
公开(公告)号: | CN109508088A | 公开(公告)日: | 2019-03-22 |
发明(设计)人: | 王娜娜 | 申请(专利权)人: | 诺百爱(杭州)科技有限责任公司 |
主分类号: | G06F3/01 | 分类号: | G06F3/01;G06F3/0346;G06K9/00 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 311100 浙江省杭州市余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 肌电信号 手语识别 臂环 惯性测量传感器 闭环 肌电传感器 惯性信号 连接带 扬声器 外部服务器 移动端 采集肌电信号 单片机连接 可拆卸连接 翻译 蓝牙模块 单片机 解算 算法 外接 采集 播放 传输 反馈 学习 | ||
1.一种基于肌电信号手语识别翻译臂环,其特征在于:包括臂环主体、连接带、肌电传感器、九轴惯性测量传感器、单片机、蓝牙模块以及扬声器,所述臂环主体由若干闭环外壳组成,相邻闭环外壳之间通过连接带连接,所述连接带与闭环外壳可拆卸连接,所述闭环外壳内侧表面对应连接一个肌电传感器,所述肌电传感器和九轴惯性测量传感器分别与单片机连接。
2.根据权利要求1所述的一种基于肌电信号手语识别翻译臂环,其特征在于:所述闭环外壳设置有指示灯和功能按键,所述扬声器设置于闭环外壳外侧。
3.根据权利要求1或2所述的一种基于肌电信号手语识别翻译臂环,其特征在于:所述连接带与闭环外壳卡扣连接。
4.根据权利要求3所述的一种基于肌电信号手语识别翻译臂环,其特征在于:所述单片机采用STM32单片机。
5.一种手语识别肌电信号的方法,其特征在于:首先将臂环主体套入手臂上,通过肌电传感器采集肌电信号,通过九轴惯性测量传感器采集惯性信号,然后STM32单片机对肌电信号与惯性信号进行处理,并传输到外接的PC端或移动端上,通过PC端或移动端将对肌电信号与惯性信号发送给外部服务器,通过外部服务器进行深度学习的算法解算然后进行反馈,最后通过扬声器进行播放。
6.根据权利要求5所述的一种手语识别肌电信号的方法,其特征在于:所述深度学习的算法框架采用谷歌tenserflow、百度paddlepaddle或keras框架。
7.根据权利要求6所述的一种手语识别肌电信号的方法,其特征在于:采用百度paddlepaddle框架可以先将所有数据做归一化处理,将每一个动作下不同人之间的肌电信号(emg)与惯性信号(ori)做交叉,即将不同人的同动作的肌电信号(emg)以及惯性信号(ori)数据进行混排匹配,从而大幅度提高数据量;其次模型分两个部分,一个是对肌电信号(emg) 的卷积,一个是对惯性信号(ori)的卷积,然后做拼接后经一个全链接层,再进行预测,其中,肌电信号(emg)与惯性信号(ori)均为一个卷积层、一个池化层与一个全链接层构成,其中肌电信号(emg)的卷积结构为4*16=64,池化结构参数为8*8=64;惯性信号(ori)卷积结构为8*2=16,池化结构参数为4*4=16,之后都选用relu进行全链接,最后与数据库内整体700000条数据test集进行对比识别。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于诺百爱(杭州)科技有限责任公司,未经诺百爱(杭州)科技有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811233389.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:显示设备
- 下一篇:一种基于层级随机森林的视线控制系统与方法