[发明专利]手语识别方法及装置有效
申请号: | 201910456373.2 | 申请日: | 2019-05-29 |
公开(公告)号: | CN110163181B | 公开(公告)日: | 2021-07-06 |
发明(设计)人: | 李厚强;周文罡;蒲俊福 | 申请(专利权)人: | 中国科学技术大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 李伟;王宝筠 |
地址: | 230026 安*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种手语识别方法,包括:对各个子视频进行特征提取得到与每个子视频对应的特征数据;对各个特征数据进行编码得到与每个子视频对应的时序特征数据;应用预先设置的CTC解码器,按各个时序特征数据的时序,依次对各个时序特征数据进行解码,得到第一输出结果;在第一输出结果中,按各个第一概率值由大至小的顺序选取预设数目的自然语言数据以组成待识别结果集合;应用预先设置的LSTM解码器确定所述待识别结果集合中的各个所述自然语言数据对应的第二概率值;依据第一概率值及第二概率值,在待识别结果集合中选定目标自然语言数据。通过CTC解码器及LSTM解码器共同解码,能有效的提升手语识别的精度。 | ||
搜索关键词: | 手语 识别 方法 装置 | ||
【主权项】:
1.一种手语识别方法,其特征在于,包括:将已获取的待识别手语视频划分为多个子视频;对各个所述子视频进行特征提取,得到与每个所述子视频对应的特征数据;对各个所述特征数据进行编码,以生成与每个所述子视频对应的时序特征数据;应用预先设置的连接时序分类CTC解码器,按各个所述时序特征数据的时序,依次对各个所述时序特征数据进行解码,得到第一输出结果;所述第一输出结果包含与所述待识别视频对应的各个自然语言数据的第一概率值;在所述第一输出结果中,按各个所述第一概率值由大至小的顺序,选取预设数目的自然语言数据,以组成待识别结果集合;应用预先设置的长短时记忆LSTM解码器确定所述待识别结果集合中的各个所述自然语言数据分别对应的第二概率值;依据各个所述第一概率值及各个所述第二概率值,在所述待识别结果集合中选定目标自然语言数据,并将所述目标自然语言数据确定为与所述待识别手语视频对应的识别结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学技术大学,未经中国科学技术大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910456373.2/,转载请声明来源钻瓜专利网。