[发明专利]一种基于RNN的手语识别与骨架生成方法有效
申请号: | 201910880965.7 | 申请日: | 2019-09-18 |
公开(公告)号: | CN110569823B | 公开(公告)日: | 2023-04-18 |
发明(设计)人: | 肖秦琨;尹玉婷 | 申请(专利权)人: | 西安工业大学 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V10/762;G06V10/82;G06N3/0442;G06N3/08 |
代理公司: | 西安弘理专利事务所 61214 | 代理人: | 涂秀清 |
地址: | 710021 陕*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于RNN的手语识别与骨架生成方法,具体包括以下步骤:步骤1、使用Kinect RGB‑D数据集采集中国手语的骨架帧序列,输入到RNN隐藏层进行两次编码重构,并计算输出中国手语语义标签;步骤2、根据中国手语语义,生成与步骤1中编码后概率密度分布相同的骨架序列,经过二级概率模型进行解码;步骤3、将步骤2中解码后的骨架序列输入到步骤1中进行识别,计算生成数据与真实数据的损失量,将误差回传,不断更新系统参数,极小化损失函数,从而最终得到骨架识别和生成框架,用于中国手语的识别与生成。当给定CSL语义时,利用本发明可以自动识别并绘制具有不同样式的各种中国手语骨架序列,方便聋人与普通人之间的沟通。 | ||
搜索关键词: | 一种 基于 rnn 手语 识别 骨架 生成 方法 | ||
【主权项】:
1.一种基于RNN的手语识别与骨架生成方法,其特征在于,具体包括以下步骤:/n步骤1、使用Kinect RGB-D数据集采集中国手语的骨架帧序列,输入到RNN隐藏层进行两次编码重构,并计算输出中国手语语义标签;/n步骤2、根据中国手语语义,生成与步骤1中编码后概率密度分布相同的骨架序列,经过二级概率模型进行解码;/n步骤3、将步骤2中解码后的骨架序列输入到步骤1中进行识别,计算生成数据与真实数据的损失量,将误差回传,不断更新系统参数,极小化损失函数,从而最终得到骨架识别和生成框架,用于中国手语的识别与生成。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安工业大学,未经西安工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910880965.7/,转载请声明来源钻瓜专利网。