[发明专利]一种用于确定文本相似度的系统及方法在审
申请号: | 202111572563.4 | 申请日: | 2021-12-21 |
公开(公告)号: | CN114416975A | 公开(公告)日: | 2022-04-29 |
发明(设计)人: | 马谊骏;刘振宇;杨硕;王志刚 | 申请(专利权)人: | 航天信息股份有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/33;G06F40/289 |
代理公司: | 北京工信联合知识产权代理有限公司 11266 | 代理人: | 刘海蓉 |
地址: | 100195 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种用于确定文本相似度的系统及方法,属于数据处理技术领域。本发明系统,包括:聚类模块,获取用户的问答数据,并对所述问答数据进行预处理,针对预处理后的问答数据,选取所述预处理后的问答数据的初始化质心,根据所述初始化质心获取聚类的问答数据;文本相似度确定模块,对所述聚类结果中的问题数据进行分词,并计算每个分词的TF‑IDF值,根据所述TF‑IDF值计算所述聚类的问答数据间的Simhash值,根据所述Simhash值确定所述聚类的问答数据间的相似度。与现有技术相比,本发明通过计算关键词在问答语料中权重和simhash值比较两条问答数据相似性,成功的将聊天平台中非结构化数据转化成智能客服可识别的结构化数据。 | ||
搜索关键词: | 一种 用于 确定 文本 相似 系统 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于航天信息股份有限公司,未经航天信息股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111572563.4/,转载请声明来源钻瓜专利网。