[发明专利]文本处理方法、装置、计算机可读存储介质和计算机设备有效
申请号: | 201811257894.7 | 申请日: | 2018-10-26 |
公开(公告)号: | CN109446525B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 张长旺;李逸轩;张纪红;黄新营 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/289;G06F16/35 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 李文渊;何平 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 处理 方法 装置 计算机 可读 存储 介质 设备 | ||
1.一种文本处理方法,包括:
获取对目标文本进行分词处理得到的特征词;
从各预设类目相对应的语义表达式所包括的关键词中,筛选出与所述特征词匹配的目标关键词,所述语义表达式包括正向语义表达式和负向语义表达式;
根据各所述目标关键词所属的语义表达式所表达的语义关系,确定各所述目标关键词相对应的语义关系;所述语义关系包括正向语义关系和负向语义关系;
在预设类目中定位各所述目标关键词所属语义表达式相对应的目标类目;
确定各所述目标关键词与所述目标文本的相关度;
将每个所述目标类目相对应、且对应正向语义关系的目标关键词与所述目标文本的相关度求和,得到每个所述目标类目与所述目标文本的第一相关度;
将每个所述目标类目相对应、且对应负向语义关系的目标关键词与所述目标文本的相关度求和,得到每个所述目标类目与所述目标文本的第二相关度;
根据第一相关度与第二相关度的差异,得到每个所述目标类目与所述目标文本的相关度。
2.根据权利要求1所述的方法,其特征在于,所述确定各所述目标关键词与所述目标文本的相关度,包括:
根据各所述目标关键词的词长、在所述目标文本中的出现次数、及逆文本频率指数,计算各所述目标关键词与所述目标文本的相关度。
3.根据权利要求1所述的方法,其特征在于,所述语义表达式还包括限定语义表达式,所述限定语义表达式是描述类目语义中限定关系的表达式,所述方法还包括:
当所述目标类目中存在包括限定语义表达式的第一目标类目时,则
对于所述第一目标类目的限定语义表达式的各限定层,分别计算所包括的目标关键词与所述目标文本的相关度;
当计算得到的各所述相关度均达到预设相关度阈值时,则
根据所述第一目标类目下的目标关键词相对应的语义关系、及所述第一目标类目下的目标关键词与所述目标文本的相关度,计算所述第一目标类目与所述目标文本的相关度。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
当计算得到的各所述相关度中存在未达到预设相关度阈值的相关度时,则
直接将所述第一目标类目的限定语义表达式所包括的各关键词与所述目标文本的相关度设置为零。
5.根据权利要求1所述的方法,其特征在于,所述语义表达式还包括层次递进语义表达式,所述层次递进语义表达式,是对类目语义层次的逻辑关系进行递进式表述的表达式,所述方法还包括:
当所述目标类目中存在包括层次递进语义表达式的第二目标类目时,则
按照所述第二目标类目的层次递进语义表达式的层次递进顺序,依次将层次递进语义表达式中各层作为当前层;
在当前层包括的关键词中存在筛选出的目标关键词时,则
计算属于当前层的目标关键词与所述目标文本的相关度,并将下一层作为当前层,直至计算出属于末层的目标关键词与所述目标文本的相关度时止;
将计算出的相关度求和得到所述第二目标类目与所述目标文本的相关度。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
在当前层包括的关键词中不存在筛选出的目标关键词时,则直接将所述第二目标类目与所述目标文本的相关度设置为零。
7.根据权利要求5所述的方法,其特征在于,所述方法还包括:
当第二目标类目的层次递进语义表达式中,存在属于非末层的目标关键词与目标文本的相关度高于属于末层的目标关键词与目标文本的相关度时,则
在第二目标类目的层次递进语义表达式中定位相关度高于末层的语义层;
当预设类目中存在包括目标层次递进语义表达式的第三目标类目时,则回退至所述第三目标类目;所述目标层次递进语义表达式,为自第二目标类目的层次递进语义表达式首层起截止至定位至的语义层的层次递进语义表达式。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811257894.7/1.html,转载请声明来源钻瓜专利网。