[发明专利]基于文本的语种识别方法、相关装置,设备以及存储介质在审
申请号: | 202210151651.5 | 申请日: | 2022-02-18 |
公开(公告)号: | CN116663538A | 公开(公告)日: | 2023-08-29 |
发明(设计)人: | 陈小帅 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F40/263 | 分类号: | G06F40/263;G06F40/44;G06F40/284;G06F40/242;G06F18/22;G06F18/2415;G06F18/2413;G06N3/047;G06N3/08 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 闵晶晶 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 文本 语种 识别 方法 相关 装置 设备 以及 存储 介质 | ||
本申请公开了一种基于文本的语种识别方法,涉及网络媒体以及视频搜索领域,应用场景至少包括各类终端。本申请包括获取目标搜索文本;根据目标搜索文本获取K个关联资源;根据每个关联资源所对应的至少一个语种标签,生成资源语种特征分布;根据目标搜索文本生成字符特征分布;根据资源语种特征分布以及字符特征分布,确定语种识别结果。本申请还提供了一种相关装置,设备以及存储介质。本申请利用关联资源的语种标签,并结合目标搜索文本,能够为资源搜索提供更加可靠的语种线索,从而有利于提升语种识别的准确性。
技术领域
本申请涉及人工智能技术领域,尤其涉及基于文本的语种识别方法、相关装置,设备以及存储介质。
背景技术
随着现代社会信息的全球化,文本的语种识别成为识别技术研究热点之一。在全球化背景下,世界范围内产生的交互越来越多。因此,在对文本进行识别的过程中,不仅需要对中文进行识别,还需要对其他语种的文本进行识别,以适应全球化浪潮。
在资源搜索场景下,搜索文本的语种与得到的搜索结果的语种是一致的。目前,对于用户输入的搜索文本,可对每个字符进行编码,再根据编码结果获取各个字符的语言标签特征,由此,基于语言标签特征预测搜索文本的语种识别结果。
虽然根据用户输入的搜索文本能够预测其对应的语种识别结果。但在实际用于中,发明人发现现有方案中至少存在如下问题,仅利用搜索文本进行语种识别,得到的语种识别结果准确率并不理想,因此,对语种识别方法进行优化显得尤为必要。
发明内容
本申请实施例提供了一种基于文本的语种识别方法、相关装置,设备以及存储介质。本申请利用关联资源的语种标签,并结合目标搜索文本,能够为资源搜索提供更加可靠的语种线索,从而有利于提升语种识别的准确性。
有鉴于此,本申请一方面提供一种基于文本的语种识别方法,包括:
获取目标搜索文本;
根据目标搜索文本获取K个关联资源,其中,每个关联资源具有已标注的至少一个语种标签,K为大于或等于1的整数;
根据每个关联资源所对应的至少一个语种标签,生成资源语种特征分布,其中,资源语种特征分布表示K个关联资源属于M个语种标签的分布情况,M为大于1的整数;
根据目标搜索文本生成字符特征分布,其中,字符特征分布表示目标搜索文本针对各个预设字符的分布情况;
根据资源语种特征分布以及字符特征分布,确定语种识别结果。
本申请另一方面提供一种基于文本的语种识别方法,包括:
获取目标搜索文本;
根据目标搜索文本,获取针对目标对象的Q个历史资源,其中,目标对象为输入目标搜索文本的对象,Q个历史资源为目标对象在历史时段内触达过的资源,每个历史资源具有已标注的至少一个语种标签,Q为大于或等于1的整数;
根据每个历史资源所对应的至少一个语种标签,生成对象语种特征分布,其中,对象语种特征分布表示Q个历史资源属于M个语种标签的分布情况,M为大于1的整数;
根据目标搜索文本生成字符特征分布,其中,字符特征分布表示目标搜索文本针对各个预设字符的分布情况;
根据对象语种特征分布以及字符特征分布,确定语种识别结果。
本申请另一方面提供一种语种识别装置,包括:
获取模块,用于获取目标搜索文本;
获取模块,还用于根据目标搜索文本获取K个关联资源,其中,每个关联资源具有已标注的至少一个语种标签,K为大于或等于1的整数;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210151651.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:半导体封装结构及其制造方法
- 下一篇:报文转发方法、设备及系统