[发明专利]关联词语集合的处理方法及装置有效
申请号: | 201510726038.1 | 申请日: | 2015-10-29 |
公开(公告)号: | CN106649334B | 公开(公告)日: | 2020-09-15 |
发明(设计)人: | 梁梦溪;何鑫 | 申请(专利权)人: | 北京国双科技有限公司 |
主分类号: | G06F16/335 | 分类号: | G06F16/335;G06F16/35 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 韩建伟;张永明 |
地址: | 100083 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 关联 词语 集合 处理 方法 装置 | ||
1.一种关联词语集合的处理方法,其特征在于,包括:
基于待分析对象的关联词语集合中的关联词语从目标数据源上爬取网络文本;
对所述网络文本进行分词得到多个文本词汇,并获取各个所述文本词汇的词汇信息,其中,所述词汇信息包括各个所述文本词汇的关联指标数据和/或各个所述文本词汇的词性信息,所述关联指标数据用于指示各个所述文本词汇与所述关联词语的关联度,其中,各个所述文本词汇的关联指标数据由预设关联条件确定,所述预设关联条件包括:各个所述文本词汇与所述关联词语在所述网络文本的同一语句中同时出现;和/或各个所述文本词汇与所述关联词语在所述网络文本内以相同词性出现在所述网络文本的语句中的相同位置;
按照预设筛选条件对所述多个文本词汇的关联指标数据和/或所述多个文本词汇的所述词性信息进行筛选,得到筛选出的关联词汇;
使用筛选出的所述关联词汇更新所述关联词语集合;
其中,对所述网络文本进行分词得到多个文本词汇,并获取各个所述文本词汇的词汇信息包括:
在对所述网络文本进行分词得到多个文本词汇之后,创建所述多个文本词汇的文本词典;
按照预设关联条件确定所述文本词典中各个所述文本词汇的关联指标数据,和/或提取所述文本词典中各个所述文本词汇的词性信息。
2.根据权利要求1所述的处理方法,其特征在于,按照预设关联条件确定所述文本词典中各个所述文本词汇的关联指标数据包括:
若所述预设关联条件为一个,则获取各个所述文本词汇对应所述预设关联条件的关联性数值,得到各个所述文本词汇的关联指标数据;
若所述预设关联条件为多个,则获取每个文本词汇对应各个所述预设关联条件的关联性数值,对所述每个文本词汇的所有所述关联性数值作融合操作,将融和结果作为所述每个文本词汇的关联指标数据,其中,所述融合操作包括加权计算、加和计算以及乘除计算中的至少之一。
3.根据权利要求1所述的处理方法,其特征在于,按照预设关联条件确定所述文本词典中各个所述文本词汇的关联指标数据包括:
将各个所述文本词汇符合所述预设关联条件的次数作为各个所述文本词汇的关联指标数据。
4.根据权利要求1所述的处理方法,其特征在于,按照预设筛选条件对所述多个文本词汇的关联指标数据和/或所述多个文本词汇的所述词性信息进行筛选,得到筛选出的关联词汇包括:
将关联指标数据在预设范围内的文本词汇作为所述筛选出的关联词汇;或
在所述多个文本词汇的关联指标数据中所述关联指标数据排名在前N名的文本词汇作为所述筛选出的关联词汇;或
将所述词汇信息为预设词性的文本词汇作为所述筛选出的关联词汇。
5.根据权利要求1至4中任意一项所述的处理方法,其特征在于,使用筛选出的所述关联词汇更新所述关联词语集合包括:
使用所述筛选出的关联词汇替换所述关联词语,以更新所述关联词语集合;
或
将所述筛选出的关联词汇添加入所述关联词语集合,以更新所述关联词语集合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510726038.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:字段顺序一致性检测方法和装置
- 下一篇:办公椅(2016‑8)