[发明专利]数据处理方法及装置、存储介质、电子设备在审
申请号: | 202110906879.6 | 申请日: | 2021-08-09 |
公开(公告)号: | CN113627161A | 公开(公告)日: | 2021-11-09 |
发明(设计)人: | 王炜;姚澜;孙翠荣;解忠乾;罗川江 | 申请(专利权)人: | 杭州网易云音乐科技有限公司 |
主分类号: | G06F40/253 | 分类号: | G06F40/253;G06F40/284;G06F40/289;G06K9/62;G06N3/04;G06F16/953 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 王辉;阚梓瑄 |
地址: | 310052 浙江省杭州市萧山区钱江世*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 存储 介质 电子设备 | ||
1.一种数据处理方法,其特征在于,包括:
获取搜索文本;
基于所述搜索文本确定对应的第一意图评分结果;其中,所述第一意图评分结果以离线方式获取;以及
根据所述搜索文本对应的语法向量的编码特征和词向量的编码特征进行聚合处理,以根据聚合处理结果确定第二意图评分结果;
结合所述第一意图评分结果和所述第二意图评分结果确定所述搜索文本的泛搜意图识别结果。
2.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
基于预先构建的实体词典确定所述搜索文本对应的热度信息及意图信息,并根据所述热度信息和意图信息确定第三意图识别结果;以用于结合所述第一意图评分结果、所述第二意图评分结果和所述第三意图识别结果确定所述搜索文本的泛搜意图识别结果。
3.根据权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
对搜索文本历史数据进行第一预处理,以获取目标格式的待处理文本;
利用BERT模型抽取所述待处理文本对应的文本表征向量;
基于所述文本表征向量进行全连接处理,以获取输出的二维向量;
根据所述二维向量确定所述搜索文本历史数据对应的第一意图评分结果。
4.根据权利要求3所述的数据处理方法,其特征在于,基于所述搜索文本确定对应的第一意图评分结果,包括:
基于所述搜索文本查询所述搜索文本历史数据以获取相匹配的历史搜索文本,并将所述历史搜索文本对应的第一意图评分结果配置为当前的所述搜索文本对应的第一意图评分结果。
5.根据权利要求1所述的数据处理方法,其特征在于,所述基于所述搜索文本对应的语法向量和词向量对应的编码特征进行聚合处理,以根据聚合处理结果确定第二意图评分结果,包括:
对所述搜索文本进行第二预处理;
对第二预处理结果进行切词处理,利用预设的单字词典为各切词结果配置对应的标识,并利用各切词结果对应的映射值构建所述词向量;以及
按预设粒度对所述第二预处理结果进行拆分,利用预设的语法词典配置各拆分结果对应的标识,并利用拆分结果对对应的映射值构建所述语法向量;
基于所述语法向量对应的编码特征和所述词向量对应的编码特征依次进行卷积处理、池化处理、归一化处理、聚合处理和全连接处理,以获取所述第二意图评分结果。
6.根据权利要求2所述的数据处理方法,其特征在于,所述基于预先构建的实体词典确定所述搜索文本对应的热度信息及意图信息,并根据所述热度信息和意图信息确定第三意图识别结果,包括:
根据所述搜索文本查询所述实体词典以获取对应的匹配结果;
根据所述匹配结果对应的预设热度值和预设意图值计算所述搜索文本对应的第三意图识别结果。
7.根据权利要求2或6所述的数据处理方法,其特征在于,所述确定所述搜索文本的泛搜意图识别结果,包括:
在识别所述第三意图识别结果中的所述意图信息符合预设规则时,且判断所述第三意图识别结果中的所述热度信息大于或等于预设热度阈值,则确定所述搜索文本为非泛搜意图;或者
在识别所述第三意图识别结果中的所述意图信息符合预设规则时,且判断所述第三意图识别结果中的所述热度信息小于预设热度阈值,则根据所述第一意图识别结果和所述第二意图识别结果计算所述泛搜意图识别结果的概率值;并在概率值达到预设阈值时,确定所述搜索文本为泛搜意图;或者
在识别所述第三意图识别结果中的所述意图信息不符合预设规则时,则根据所述第一意图识别结果和所述第二意图识别结果计算所述泛搜意图识别结果的概率值;并在概率值达到预设阈值时,确定所述搜索文本为泛搜意图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州网易云音乐科技有限公司,未经杭州网易云音乐科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110906879.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:触控模组以及触控显示装置
- 下一篇:一种基于形象识别启发原理的无线互动教具