[发明专利]敏感词检测方法、装置、计算机设备和存储介质有效
申请号: | 202111580590.6 | 申请日: | 2021-12-22 |
公开(公告)号: | CN113961768B | 公开(公告)日: | 2022-05-13 |
发明(设计)人: | 姚望;宁义双;宁可 | 申请(专利权)人: | 金蝶软件(中国)有限公司 |
主分类号: | G06F16/903 | 分类号: | G06F16/903;G06F16/901;G06F16/33;G06F16/31 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 赖远龙 |
地址: | 518000 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 敏感 检测 方法 装置 计算机 设备 存储 介质 | ||
1.一种敏感词检测方法,其特征在于,所述方法包括:
获取待检测文本和敏感词字典树;所述敏感词字典树包括有敏感无声调字符;所述敏感无声调字符为与预设敏感词相对应的敏感无声调字符串中的字符;
确定与所述待检测文本相对应的无声调文本,并将所述无声调文本中的首个字符与所述敏感词字典树中的首层节点进行匹配,得到与首个字符相对应的匹配子结果;
当所述首个字符与所述敏感词字典树中的首层节点匹配成功时,确定所述敏感词字典树中与所述首个字符相匹配的匹配首层节点,并确定与所述匹配首层节点关联的目标节点;与所述匹配首层节点关联的目标节点包括所述匹配首层节点的子节点、和所述匹配首层节点指向的指向节点的子节点中的至少一种;
获取所述无声调文本中的与所述首个字符相邻、且位于所述首个字符之后的目标字符,并将所述目标字符与所述目标节点的进行匹配,得到与所述目标字符相对应的匹配子结果;
当所述目标字符与所述目标节点匹配成功时,确定与所述目标字符相邻且位于所述目标字符之后的后续字符、和与所述目标节点关联的关联节点;所述关联节点包括所述目标节点的子节点、和所述目标节点指向的指向节点的子节点中的至少一种;
将所述后续字符作为新的目标字符,并将所述关联节点作为新的目标节点,返回将所述目标字符与所述目标节点进行匹配的步骤继续执行;
当所述目标字符与所述目标节点匹配失败时,将所述目标字符作为首个字符,返回将所述首个字符与所述敏感词字典树中的首层级节点进行匹配的步骤继续执行,直至所述无声调文本中的文本字符与所述敏感词字典树匹配完毕;
综合所述首个字符的匹配子结果和各所述目标字符各自对应的匹配子结果,得到第一匹配结果;
根据第一匹配结果提取所述无声调文本中的候选字符串、和所述敏感词字典树中的匹配敏感字符串;
确定所述候选字符串所对应的候选有声调字符串,并确定所述匹配敏感字符串所对应的匹配有声调字符串;
将所述候选有声调字符串与所述匹配有声调字符串进行第二匹配处理,得到第二匹配结果,并根据所述第二匹配结果确定所述待检测文本中的敏感词。
2.根据权利要求1所述的方法,其特征在于,所述确定与所述待检测文本相对应的无声调文本,包括:
对所述待检测文本进行分词检测,得到所述待检测文本中的至少一个待检测分词,并确定各所述待检测分词在所述待检测文本中的位置信息;
对于多个待检测分词中的每个待检测分词,均根据当前待检测分词的分词类型,对所述待检测分词进行转换,得到与所述当前待检测分词对应的字符串;
根据各所述待检测分词在所述待检测文本中的位置信息,综合各所述待检测分词各自对应的字符串,得到无声调文本。
3.根据权利要求1所述的方法,其特征在于,所述待检测文本为预先存储在数据库内的文本信息。
4.根据权利要求1所述的方法,其特征在于,所述敏感词字典树包括节点的参数,所述节点的参数包括敏感无声调字符、字符串结尾标识、以及字符数量中的至少一种;所述将所述无声调文本中的首个字符与所述敏感词字典树中的首层节点进行匹配,得到与首个字符相对应的匹配子结果,包括:
确定所述无声调文本中的首个字符,并将所述首个字符与所述敏感词字典树中的首层节点进行匹配,得到与所述首个字符相对应的匹配子结果。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当所述首个字符与所述敏感词字典树中的首层级节点匹配失败时,获取所述无声调文本中与所述首个字符紧邻的下一个字符;
将与所述首个字符紧邻的下一个字符作为首个字符,返回将所述首个字符与所述敏感词字典树中的首层节点进行匹配的步骤继续执行,直至所述无声调文本中的文本字符与所述敏感词字典树匹配完毕。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于金蝶软件(中国)有限公司,未经金蝶软件(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111580590.6/1.html,转载请声明来源钻瓜专利网。