[发明专利]商品短文本核心词提取方法和装置有效
| 申请号： | 201610191177.3 | 申请日： | 2016-03-30 |
| 公开（公告）号： | CN105808526B | 公开（公告）日： | 2019-07-30 |
| 发明（设计）人： | 高维国;陈海勇 | 申请（专利权）人： | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
| 主分类号： | G06F17/27 | 分类号： | G06F17/27;G06F16/35 |
| 代理公司： | 中国国际贸易促进委员会专利商标事务所 11038 | 代理人： | 许蓓 |
| 地址： | 100080 北京市海淀区杏石口路6*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种商品短文本核心词提取方法和装置，涉及大数据处理领域。其中的商品短文本核心词提取方法包括：获取数据集内的商品短文本；对商品短文本进行分词处理；根据商品短文本的上下文信息获得商品短文本的文档向量；根据文档向量对数据集内的商品短文本进行聚类；确定商品短文本中的各个分词在商品短文本所属的类别的聚类层级权重；根据各个分词的聚类层级权重确定商品短文本的核心词。本发明参考了商品短文本中分词的上下文信息来获得该商品短文本的文档向量，可以弥补短文本信息量少的缺陷，使基于文档向量的聚类结果更准确，进而依据分词在其商品短文本所属聚类类别的权重可以更加准确地从商品短文本中提取出核心词。 | ||
| 搜索关键词： | 商品 文本 核心 提取 方法 装置 | ||
【主权项】：
1.一种商品短文本核心词提取方法，其特征在于，包括：获取数据集内的商品短文本；对所述商品短文本进行分词处理；根据所述商品短文本的上下文信息获得所述商品短文本的文档向量；根据所述文档向量对所述数据集内的商品短文本进行聚类；确定所述商品短文本中的各个分词在所述商品短文本所属的类别的聚类层级权重；确定所述商品短文本中的各个分词的商品词性信息，根据商品词性和词性权重的对应关系确定所述商品短文本中的分词对应的词性权重，并根据所述商品短文本中的各个分词对应的词性权重确定所述各个分词的局部权重；根据所述各个分词的局部权重以及聚类层级权重确定所述商品短文本的核心词。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司，未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201610191177.3/，转载请声明来源钻瓜专利网。
