[发明专利]意图确定模型的训练方法和装置有效
申请号: | 202110605114.9 | 申请日: | 2021-05-31 |
公开(公告)号: | CN113343028B | 公开(公告)日: | 2022-09-02 |
发明(设计)人: | 张水发 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06F16/75 | 分类号: | G06F16/75;G06V10/774;G06K9/62 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 杨凯程 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 意图 确定 模型 训练 方法 装置 | ||
本公开关于意图确定模型的训练方法和装置,所述方法包括:确定搜索词的搜索结果、搜索次数;确定对搜索结果进行用户意图操作第一比例,进行视频意图操作第二比例;根据搜索次数、第一比例以及第二比例,确定搜索词对应的目标样本标签;以搜索词作为样本生成训练样本集;将样本的特征输入意图确定模型得到样本对应的目标样本标签的预测结果,对意图确定模型进行训练得到训练后的意图确定模型。根据本公开,由于确定的搜索词对应的目标样本标签相对准确,以搜索词作为样本生成的训练样本集中样本对应的目标样本标签也就相对准确,基于训练样本集得到训练后的意图确定模型后,根据训练后的意图确定模型预测搜索词对应的意图标签也就相对准确。
技术领域
本公开涉及意图确定模型的确定领域,尤其涉及意图确定模型的训练方法、意图确定模型的训练装置、电子设备、计算机可读存储介质、计算机程序产品。
背景技术
用户在网站中输入搜索词(query)搜索时,一般会对应三种意图,一种是用户意图,另一种是视频意图,第三种是混合意图,也即对应用户意图和视频意图。
其中,搜索词对应用户意图是指针对搜索词对应的用户进行搜索;搜索词对应视频意图是指针对包含搜索词对应内容的视频进行搜索;混合意图是指既针对搜索词对应的用户进行搜索,又针对包含搜索词对应的视频进行搜索。
目前的一种是方式是基于用户针对搜索结果的点击确定意图,但是对于长尾词的效果较差,因为长尾词作为查询词的情况较少,所以针对长尾词的搜索结果的点击也就较少,根据较少的点击确定意图准确性较低。另一种方式是根据搜索词的语义确定意图,但是某些词汇在网站中是用户名,针对这种词汇,基于语义往往会确定为非用户,从而确定的意图往往为视频意图,导致不能准确地确定出搜索词的意图。进而在基于这些未能准确确定对应意图的搜索词作为样本构建训练样本集时,基于训练样本集训练得到的模型也就不能准确地预测搜索词对应的意图。
发明内容
本公开提供了意图确定模型的训练方法、意图确定模型的训练装置、电子设备、计算机可读存储介质、计算机程序产品,以至少解决相关技术中的技术问题。本公开的技术方案如下:
根据本公开实施例的第一方面,提出一种意图确定模型的训练方法,包括:
确定基于搜索词进行搜索的搜索结果,以及基于所述搜索词进行搜索的搜索次数;
确定在基于所述搜索词进行的多次搜索中,用户对搜索结果进行操作的总次数、用户对所述搜索结果进行用户意图操作的第一次数以及用户对所述搜索结果进行视频意图操作的第二次数,根据所述第一次数和所述总次数确定第一比例,根据所述第二次数和所述总次数确定第二比例;
根据所述搜索次数、所述第一比例以及所述第二比例,确定所述搜索词对应的目标样本标签,所述目标样本标签包括用户意图和/或视频意图标签;
以所述搜索词和所述目标样本标签作为样本生成训练样本集;
将所述样本的特征输入意图确定模型,得到所述样本对应的目标样本标签的预测结果,根据所述意图标签预测结果和目标样本标签,确定损失数据,基于所述损失数据对意图确定模型进行训练,得到训练后的意图确定模型。
在一个实施例中,基于所述损失数据对意图确定模型进行训练的收敛条件至少包括:
所述预测结果的准确率达到准确率阈值,其中,所述预测结果的准确率根据所述预测结果和所述样本对应的目标样本标签确定。
在一个实施例中,所述方法还包括:
获取至少一个专有名词,确定所述专有名词对应的目标样本标签包括视频意图标签;
在所述专有名词中确定被用作用户名的用户专有名词,确定所述用户专有名词对应的目标样本标签还包括用户意图标签;
其中,所述以所述搜索词和所述目标样本标签作为样本生成训练样本集包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110605114.9/2.html,转载请声明来源钻瓜专利网。