[发明专利]一种基于语义分析的多属性自动映射系统

说明书

本发明公开了一种基于语义分析的多属性自动映射系统，包括数据中心模块、种子URL模块、收集模块、处理模块、映射模块、检索模块，所述种子URL模块连接收集模块，所述收集模块连接处理模块，所述处理模块连接映射模块，所述映射模块连接数据中心模块，所述映射模块连接检索模块；本发明可自动将不同API平台的描述属性进行映射，对全平台API供应商的自定义属性进行规范化；并且提供全平台的API数据统一检索服务，使用户不需要一家一家平台的去寻找，避免了用户极大的时间和精力成本。

技术领域

本发明涉及映射系统，具体是一种基于语义分析的多属性自动映射系统。

背景技术

目前市面上的广大API服务平台(如juhe.cn,jisuapi.com)提供的检索服务都只局限于自身平台的内容(包括自身的API服务或者第三方入驻的API服务)，并不能够提供统一的接口用于检索全网所有API平台的服务，开发者想要检索某个API服务时，不得不一家平台一家平台的去查看去检索，消耗了用户极大的时间和精力成本。此外，各家API平台对描述API的属性都是自己定义的，给各个平台的API属性的统一工作造就了困难。

发明内容

本发明的目的在于提供一种基于语义分析的多属性自动映射系统，以解决上述背景技术中提出的问题。

为实现上述目的，本发明提供如下技术方案：

一种基于语义分析的多属性自动映射系统，包括数据中心模块、种子URL模块、收集模块、处理模块、映射模块、检索模块，所述种子URL模块连接收集模块，种子URL模块通过互联网获取一些种子URL，所述收集模块通过爬虫技术收集市面上现存的所有API服务平台上的API数据，所述收集模块连接处理模块，通过处理模块提取各个平台的API服务描述信息并且进行处理，所述处理模块连接映射模块，将各个平台上的API属性映射到统一的属性，所述映射模块连接数据中心模块，通过映射模块的作用将统一后的API数据整理入库，所述映射模块连接检索模块，通过检索模块的作用待于用户检索。

作为本发明进一步的方案：所述处理模块包括抓取模块、分析模块、存储模块。

作为本发明再进一步的方案：抓取模块将种子URL放入待抓取URL队列中。

作为本发明再进一步的方案：分析模块从待抓取URL队列中取出待抓取URL，解析DNS，并且得到主机的ip，并将URL对应的网页下载下来，存储进存储模块中。

作为本发明再进一步的方案：抓取模块将URL放进已抓取URL队列的分析模块。

作为本发明再进一步的方案：分析模块分析已抓取URL队列中的URL。

作为本发明再进一步的方案：分析模块分析其中的其他URL，并且将URL放入待抓取URL队列，从而进行下一个循环。

与现有技术相比，本发明的有益效果是：本发明可自动将不同API平台的描述属性进行映射，对全平台API供应商的自定义属性进行规范化；并且提供全平台的API数据统一检索服务，使用户不需要一家一家平台的去寻找，避免了用户极大的时间和精力成本。

附图说明

图1为基于语义分析的多属性自动映射系统的结构框图。

图2为基于语义分析的多属性自动映射系统中网络爬虫的结构框图。

图中：1-数据中心模块、2-第三方种子URL模块、3-收集模块、4-处理模块、5-映射模块、6-检索模块、7-抓取模块、8-分析模块、9-存储模块。

具体实施方式

下面结合具体实施方式对本专利的技术方案作进一步详细地说明。