[发明专利]基于编解码器的手语翻译系统在审
| 申请号： | 202210226325.6 | 申请日： | 2022-03-09 |
| 公开（公告）号： | CN114758411A | 公开（公告）日： | 2022-07-15 |
| 发明（设计）人： | 李天军;刘明强;薛万利;陈胜勇 | 申请（专利权）人： | 天津理工大学 |
| 主分类号： | G06V40/20 | 分类号： | G06V40/20;G06V20/40;G06V10/82;G06F40/58;G06F40/51;G06F40/274;G06N3/04;G06N3/08;G09B21/00 |
| 代理公司： | 北京市中闻律师事务所 11388 | 代理人： | 雷电 |
| 地址： | 300384 *** | 国省代码： | 天津;12 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明要解决的技术问题是提升手语视频翻译的效果，发明的内容是提供一个基于编解码器的手语翻译系统。该系统包括：特征提取模块，以获得手语视频的特征表示；翻译模块，以建立手语和自然语言之间的翻译模型。本发明同时利用手语词序列和自然语言序列的标注，从两个方面来提升手语视频翻译的性能。一方面，为获取更好的特征，通过采用卷积神经网络和循环神经网络相结合的结构来充分利用帧自身和帧间的信息；在CTC损失的基础上添加全局特征和局部特征之间的KL散度损失，使得在视频和标注手语词序列的对齐时更充分地利用手语视频本身。另一方面，为改善翻译效果，将多种翻译技术运用到解码阶段。本发明在翻译指标上取得了一定的改进。 | ||
| 搜索关键词： | 基于 编解码器 手语 翻译 系统 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于天津理工大学，未经天津理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210226325.6/，转载请声明来源钻瓜专利网。
