[发明专利]知识图谱构建系统有效
申请号: | 201610512976.6 | 申请日: | 2016-07-01 |
公开(公告)号: | CN106168965B | 公开(公告)日: | 2020-06-30 |
发明(设计)人: | 刘涛;祖佺 | 申请(专利权)人: | 竹间智能科技(上海)有限公司 |
主分类号: | G06F16/36 | 分类号: | G06F16/36 |
代理公司: | 北京酷爱智慧知识产权代理有限公司 11514 | 代理人: | 赵永辉 |
地址: | 200233 上海市*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明属于大规模数据挖掘技术领域,具体涉及一种知识图谱构建系统。本发明知识图谱构建系统,包括爬虫集群、Hadoop分布式存储集群、自然语言处理集群、Mahout知识挖掘模块和知识数据库;该爬虫集群用于根据种子地址,抓取网页数据,并将网页数据存储在网页HBase表中;自然语言处理集群用于从该Hadoop分布式存储集群中获取该网页HBase表,生成原始知识信息,并将该原始知识信息存储在原始知识HBase表中;该Mahout知识挖掘模块用于对该原始知识信息进行知识挖掘,生成非结构化数据,并将该非结构化数据存储在非结构化数据HBase表中;知识数据库用于根据经过人工审核的该非结构化数据构建知识图谱。 | ||
搜索关键词: | 知识 图谱 构建 系统 | ||
【主权项】:
一种知识图谱构建系统,其特征在于,包括爬虫集群、Hadoop分布式存储集群、自然语言处理集群、Mahout知识挖掘模块和知识数据库;所述爬虫集群用于根据种子地址,抓取网页数据,并将所述网页数据存储在网页HBase表中,所述网页HBase表存储在所述Hadoop分布式存储集群中;所述自然语言处理集群用于从所述Hadoop分布式存储集群中获取所述网页HBase表,生成原始知识信息,并将所述原始知识信息存储在原始知识HBase表中,所述原始知识HBase表存储在所述Hadoop分布式存储集群中;所述Mahout知识挖掘模块用于对所述原始知识信息进行知识挖掘,生成非结构化数据,并将所述非结构化数据存储在非结构化数据HBase表中,所述非结构化数据HBase表存储在所述Hadoop分布式存储集群中;所述知识数据库用于根据经过人工审核的所述非结构化数据构建知识图谱。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于竹间智能科技(上海)有限公司,未经竹间智能科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610512976.6/,转载请声明来源钻瓜专利网。
- 上一篇:基于资产组的电网指标地图绘制方法及系统
- 下一篇:一种文件搜索方法及移动终端