[发明专利]一种中文专利文本相似度计算方法在审
申请号: | 201810310198.1 | 申请日: | 2018-04-09 |
公开(公告)号: | CN108549634A | 公开(公告)日: | 2018-09-18 |
发明(设计)人: | 吕学强;董志安 | 申请(专利权)人: | 北京信息科技大学;吕学强 |
主分类号: | G06F17/27 | 分类号: | G06F17/27;G06K9/62 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 100192 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文本 专利文本 相似度计算 相似度 向量空间模型 句子相似度 分词结果 领域本体 相似程度 语义关系 专利领域 专利审查 正确率 中文 分词 权重 句子 抽取 集合 应用 分析 | ||
1.一种中文专利文本相似度计算方法,其特征在于,包括计算句子相似度的步骤。
2.根据权利要求1所述的中文专利文本相似度计算方法,其特征在于,所述计算方法包括:
对文本进行分词;对分词结果计算TF-IDF值,抽取TF-IDF值较高的作为关键词,定位关键词所在的句子作为关键句,并将关键句中关键词最大的权值作为关键句的权值,得到每个文本的关键句集合;计算每个关键句的对文本的权重,依次选取待对比文本和对比文本的关键句。
3.根据权利要求1-2所述的中文专利文本相似度计算方法,其特征在于,将词语相似度转化为概念在本体中的相似度来计算;概念在本体中的相似度计算公式为:
其中w1和w2表示两个词语,dis(w1,w2)表示w1和w2在领域本体中的语义距离。
4.根据权利要求1-3所述的中文专利文本相似度计算方法,其特征在于,加入最小公共父节点位置和节点局部密度,概念在本体中的相似度计算公式为:
其中r表示树的根节点,com表示w1和w2的最小公共父节点,dis(r,com)表示最小公共父节点的深度,num(w1)表示w1节点的兄弟节点个数。
5.根据权利要求1-4所述的中文专利文本相似度计算方法,其特征在于,基于word2vec计算词语相似度,CBOW模型的输入层为当前词的前后n个词向量,通过中间的隐层对这2n个词向量进行累加得到Wx;输出层为一个Huffman树,是由语料库中的词作为叶子节点,各词的频次作为权值来构建的;通过随机梯度算法对Wx进行预测,使得p(w|context(w))值最大化,context(w)指w的前后的n个词;通过word2vec对语料进行训练,得到所有词的词向量;计算词语之间的相似度就转化为计算词语对应词向量的相似度,计算公式为:
其中w1和w2分别为两个词语经过训练后得到的词向量;x1i和x2i分别表示两个词语的词向量对应的在向量空间中第i维的值。
6.根据权利要求1-5所述的中文专利文本相似度计算方法,其特征在于,利用本体和word2vec分别计算出两种词语相似度simow(w1,w2)和simrw(w1,w2),结合得到词语相似度,公式为:
其中S表示本体中的概念集合,如果两个词语中有一个不属于本体概念集合,则将利用word2vec得到的相似度作为词语相似度,若两者均属于本体概念集合,则取本体词语相似度和word2vec词语相似度平均值作为最终的词语相似度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京信息科技大学;吕学强,未经北京信息科技大学;吕学强许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810310198.1/1.html,转载请声明来源钻瓜专利网。