[发明专利]一种数据处理方法、装置、存储介质和电子设备在审
申请号: | 201811568386.0 | 申请日: | 2018-12-21 |
公开(公告)号: | CN109800287A | 公开(公告)日: | 2019-05-24 |
发明(设计)人: | 齐乔松 | 申请(专利权)人: | 出门问问信息科技有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/9535 |
代理公司: | 北京睿派知识产权代理事务所(普通合伙) 11597 | 代理人: | 刘锋 |
地址: | 100190 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 网站 存储介质 电子设备 网页数据 数据处理 作品 词语 语音请求 词库 分类 中文 更新 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
连接作品源网站,获取所述作品源网站的网页数据;
根据所述作品源网站的网页数据获取作品名称列表;
根据作品名称列表和预定的黑名单确定名称词语列表;
根据所述名称词语列表更新词库中文本的特征,所述词库用于辅助自然语言学习模型解析语音请求。
2.根据权利要求1所述的方法,其特征在于,所述根据所述作品源网站的网页数据获取作品名称列表包括:
获取作品名称字符串;
确定字符串中的异常值;
清洗包含异常值的字符串以获取所述作品名称列表。
3.根据权利要求1所述的方法,其特征在于,所述根据作品名称列表和黑名单确定名称词语列表包括:
将黑名单中的词语从所述作品名称列表中删除,以确定所述名称词语列表。
4.根据权利要求1所述的方法,其特征在于,在获取作品名称列表后,所述方法还包括:
将预定白名单中的词语添加到所述作品名称列表。
5.根据权利要求1所述的方法,其特征在于,所述根据词语列表更新词库中文本的特征包括:
响应于所述词语列表中的词语在词库中存在重复词语,增加所述词语的特征。
6.根据权利要求1所述的方法,其特征在于,所述根据词语列表更新词库中文本的特征包括:
响应于所述词语列表中的词语在词库中不存在重复词语,将所述词语添加到词库中。
7.根据权利要求1所述的方法,其特征在于,所述作品源网站包括视频网站,音频网站以及图书网站。
8.一种信息处理装置,其特征在于,所述装置包括:
连接单元,用于连接作品源网站,获取所述作品源网站的网页数据;
作品名称列表获取单元,用于根据所述作品源网站的网页数据获取作品名称列表;
名称词语列表确定单元,用于根据作品名称列表和预定的黑名单确定名称词语列表;
文本特征更新单元,用于根据所述名称词语列表更新词库中文本的特征,所述词库用于辅助自然语言学习模型解析语音请求。
9.一种计算机可读存储介质,其上存储计算机程序指令,其特征在于,所述计算机程序指令在被处理器执行时实现如权利要求1-7中任一项所述的方法。
10.一种电子设备,包括存储器和处理器,其特征在于,所述存储器用于存储一条或多条计算机程序指令,其中,所述一条或多条计算机程序指令被所述处理器执行如权利要求1-7中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于出门问问信息科技有限公司,未经出门问问信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811568386.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:对话生成方法和装置
- 下一篇:一种基于知识图谱的科学研究热点分析与预测方法