[发明专利]文章画像提取方法、装置、电子设备及存储介质在审
申请号: | 202111574833.5 | 申请日: | 2021-12-21 |
公开(公告)号: | CN114444499A | 公开(公告)日: | 2022-05-06 |
发明(设计)人: | 刘轶功 | 申请(专利权)人: | 奇安信科技集团股份有限公司;网神信息技术(北京)股份有限公司 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/216;G06F40/30 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王宇杨 |
地址: | 100088 北京市西城区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文章 画像 提取 方法 装置 电子设备 存储 介质 | ||
1.一种文章画像提取方法,其特征在于,所述方法包括:
基于语料库对应的词频矩阵对所述语料库中的每个文章的主题概率分布进行提取,基于每个文章的主题概率分布确定每个文章的主题关键词集合;
基于所述语料库对应的文本向量矩阵对所述语料库中所有文章进行聚类,得到多个簇;对所述多个簇中各个簇分别进行关键词提取得到各个簇的簇关键词集合,及确定各个簇的簇中心文章标题;
针对每个文章,基于所述文章的主题关键词集合及所述文章所属簇的簇关键词集合,确定所述文章的文章关键词;
基于所述文章的文章关键词及所述文章所属簇的簇中心文章标题,确定所述文章的文章画像。
2.根据权利要求1所述的文章画像提取方法,其特征在于,所述基于每个文章的主题概率分布确定每个文章的主题关键词集合,包括:
基于每个文章的主题概率分布,选取每个文章的主题概率分布中N个最大主题概率;N为整数;
基于所选取的N个最大主题概率分别对应的主题关键词,确定每个文章的主题关键词集合。
3.根据权利要求1所述的文章画像提取方法,其特征在于,所述对所述多个簇中各个簇分别进行关键词提取得到各个簇的簇关键词集合,包括:
基于所述多个簇,统计各个簇中各个文章的关键词在所述文章中出现的次数;将各个文章中出现次数最大的关键词进行组合,得到各个簇的簇关键词集合。
4.根据权利要求1所述的文章画像提取方法,其特征在于,所述确定各个簇的簇中心文章标题,包括:
基于所述多个簇,分别计算各个簇中各个文章对应的向量与各个簇中所有文章对应的向量的距离,确定各个簇的簇中心向量;
基于所述簇中心向量,确定各个簇的簇中心文章标题。
5.根据权利要求4所述的文章画像提取方法,其特征在于,所述基于所述簇中心向量,确定各个簇的簇中心文章标题,包括:
基于所述簇中心向量,确定各个簇中与所述簇中心向量的距离最近的向量对应的文章为簇中心文章;
基于所述簇中心文章的标题,确定各个簇的簇中心文章标题。
6.根据权利要求1所述的文章画像提取方法,其特征在于,所述针对每个文章,基于所述文章的主题关键词集合及所述文章所属簇的簇关键词集合,确定所述文章的文章关键词,包括:
基于所述文章的主题关键词集合和所述文章所属簇的簇关键词集合,确定所述文章的主题关键词集合和所述文章所属簇的簇关键词集合的交集;
基于所述文章的主题关键词集合和所述文章所属簇的簇关键词集合的交集、以及所述簇关键词集合中除所述交集之外的预设数目的簇关键词,确定所述文章的文章关键词。
7.一种文章画像提取装置,其特征在于,所述装置包括:
提取模块,用于基于语料库对应的词频矩阵对所述语料库中的每个文章的主题概率分布进行提取,基于每个文章的主题概率分布确定每个文章的主题关键词集合;
聚类模块,用于基于所述语料库对应的文本向量矩阵对所述语料库中所有文章进行聚类,得到多个簇;对所述多个簇中各个簇分别进行关键词提取得到各个簇的簇关键词集合,及确定各个簇的簇中心文章标题;
第一确定模块,用于针对每个文章,基于所述文章的主题关键词集合及所述文章所属簇的簇关键词集合,确定所述文章的文章关键词;
第二确定模块,用于基于所述文章的文章关键词及所述文章所属簇的簇中心文章标题,确定所述文章的文章画像。
8.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至6任一项所述文章画像提取方法的步骤。
9.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至6任一项所述文章画像提取方法的步骤。
10.一种计算机程序产品,其上存储有可执行指令,其特征在于,该指令被处理器执行时使处理器实现如权利要求1至6中任一项所述文章画像提取方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于奇安信科技集团股份有限公司;网神信息技术(北京)股份有限公司,未经奇安信科技集团股份有限公司;网神信息技术(北京)股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111574833.5/1.html,转载请声明来源钻瓜专利网。