[发明专利]一种自然语言转换为手语的方法及装置在审
申请号: | 201910554752.5 | 申请日: | 2019-06-25 |
公开(公告)号: | CN110457673A | 公开(公告)日: | 2019-11-15 |
发明(设计)人: | 姚晓宇;谭颖 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06F16/58;G06N20/00 |
代理公司: | 11319 北京润泽恒知识产权代理有限公司 | 代理人: | 莎日娜<国际申请>=<国际公布>=<进入 |
地址: | 100080北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 自然语言 手语 分词 自然语言语句 视频节目 听障人士 转换 分词处理 观看 展示 语言 帮助 | ||
1.一种自然语言转换为手语的方法,其特征在于,包括:
获取待识别的自然语言语句;
将所述待识别的自然语言语句进行分词处理,得到自然语言分词,所述自然语言分词包括一个或者多个分词;
将所述自然语言分词转换为对应的手语动作,其中,所述自然语言分词中的一个分词对应一个或者多个手语动作;
按照顺序依次展示所述手语动作。
2.根据权利要求1所述的方法,其特征在于,还包括:
将所述自然语言分词输入到训练后的第一预设深度学习模型中,输出语序调整后的自然语言分词,并执行所述将所述自然语言分词转换为对应的手语动作的步骤;
或者,将所述手语动作输入到训练后的第二预设深度学习模型中,输出语序调整后的手语动作,并执行所述按照顺序依次展示所述手语动作的步骤。
3.根据权利要求1或2所述的方法,其特征在于,所述获取待识别的自然语言语句,包括:
获取待处理的自然语言语句;
对所述待处理的自然语言语句中无效词汇进行过滤,所述无效词汇包括下述的一种或者几种组合:无实际意义的词汇、含义重复的词汇和对应手语中无实际意义的词汇;
将过滤后的待处理的所述自然语言语句作为所述待识别的自然语言语句。
4.根据权利要求3所述的方法,其特征在于,所述待处理的自然语言语句为视频中播放的语音语句,所述按照顺序依次展示所述手语动作,包括:
检测所述语音语句的开始时刻和结束时刻;
在所述开始时刻开始展示手语动作,并在所述结束时刻后预设时间段内展示完所述语音语句对应的手语动作。
5.根据权利要求1或2所述的方法,其特征在于,所述将所述自然语言分词转换为对应的手语动作,包括:
构建与所述自然语言分词对应的手语动作近义词库;
根据自然语言理解NLU和所述手语动作近义词库,将所述自然语言分词中的分词分别转换为对应的手语动作。
6.一种自然语言转换为手语的装置,其特征在于,包括:
获取单元,用于获取待识别的自然语言语句;
处理单元,用于将所述待识别的自然语言语句进行分词处理,得到自然语言分词,所述自然语言分词包括一个或者多个分词;
转换单元,用于将所述自然语言分词转换为对应的手语动作,其中,所述自然语言分词中的一个分词对应一个或者多个手语动作;
展示单元,用于按照顺序依次展示所述手语动作。
7.根据权利要求6所述的装置,其特征在于,还包括:
训练单元,用于将所述自然语言分词输入到训练后的第一预设深度学习模型中,输出语序调整后的自然语言分词;或者用于将所述手语动作输入到训练后的第二预设深度学习模型中,输出语序调整后的手语动作。
8.根据权利要求6或7所述的装置,其特征在于,所述获取单元,包括:
获取模块,用于获取待处理的自然语言语句;
过滤模块,用于对所述待处理的自然语言语句中无效词汇进行过滤,所述无效词汇包括下述的一种或者几种组合:无实际意义的词汇、含义重复的词汇和对应手语中无实际意义的词汇;
确定模块,用于将过滤后的待处理的所述自然语言语句作为所述待识别的自然语句。
9.根据权利要求8所述的装置,其特征在于,所述待处理的自然语言语句为视频中播放的语音语句,所述展示单元,包括:
检测模块,用于检测所述语音语句的开始时刻和结束时刻;
展示模块,用于在所述开始时刻开始展示手语动作,并在所述结束时刻后预设时间段内展示完所述语音语句对应的手语动作。
10.根据权利要求6或7所述的装置,其特征在于,所述转换单元,包括:
构建模块,用于构建与所述自然语言分词对应的手语动作近义词库;
转换模块,用于根据自然语言理解NLU和所述手语动作近义词库,将所述自然语言分词中的分词分别转换为对应的手语动作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910554752.5/1.html,转载请声明来源钻瓜专利网。