[发明专利]一种存储并检索数据的方法以及系统

说明书

本发明公开了一种存储并检索数据的方法以及系统，方法包括：数据存储步骤：将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中；数据同步步骤：定时调用非关系型数据库的数据进行聚合处理得到聚合结果，并将聚合结果同步到搜索引擎；检索步骤：搜索引擎根据用户输入的关键字，基于所述聚合结果进行检索，并将检索结果呈现给用户。本发明可以实现快速搜索大量存在的任何单词或单词组的非结构化文本，存储效率和检索效率高，优选的，还可以提供查看详情，通过查询关系型数据库，保证了结构化数据的优势，本发明随着数据量越来越大，优势会越来越明显。

技术领域

本发明涉及互联网领域，尤其涉及一种存储并检索数据的方法以及系统。

背景技术

目前的很多系统需要实现数据存储并检索的功能。如果采用关系型数据库 存储并检索数据，则难以实现的快速搜索大量存在的任何单词或单词组的非结 构化文本；如果使用非关系型数据库进行存储检索，在数据量较大时，检索效 率较低，并不能满足人们对检索的高效要求。

发明内容

本发明要解决的技术问题在于，针对现有技术的上述缺陷，提供一种存储 并检索数据的方法以及系统。

本发明解决其技术问题所采用的技术方案是：构造一种存储并检索数据的 方法，方法包括：

数据存储步骤：将需要存储的数据按照数据类型存储到关系型数据库或/ 及非关系型数据库中；

数据同步步骤：定时调用非关系型数据库的数据进行聚合处理得到聚合结 果，并将聚合结果同步到搜索引擎；

检索步骤：搜索引擎根据用户输入的关键字，基于所述聚合结果进行检索， 并将检索结果呈现给用户。

在本发明所述的存储并检索数据的方法中，所述的将需要存储的数据按照 数据类型存储到关系型数据库或/及非关系型数据库中，包括：

将需要存储的非关系型数据存储到非关系型数据库中；

将需要存储的关系型数据存储到关系型数据库中，并将关系型数据中的符 合预设的常见检索数据的字段数据存储到非关系型数据库中。

在本发明所述的存储并检索数据的方法中，需要存储的关系型数据来自 WEB录入页面获取到的用户录入的数据；需要存储的非关系型数据来自需要存 储的关系型数据中的符合预设的常见检索数据的字段数据，以及管理平台中的 某些模块产生的数据。

在本发明所述的存储并检索数据的方法中，所述非关系型数据库为Mongodb，所述数据同步步骤具体包括：

定时调用Mongodb的映射归约方法对Mongodb中存储的数据进行聚合处理 得到聚合结果；

将所述聚合结果由Mongodb的数据同步工具同步到搜索引擎。

在本发明所述的存储并检索数据的方法中，所述检索步骤具体包括：

搜索引擎获取WEB检索页面上传的用户输入的关键字；

搜索引擎根据所述关键字基于所述聚合结果进行检索；

将检索结果按照预设排序规则进行排序并呈现给用户，并提供与该检索结 果相关的关系型数据库的接口以供用户查看详情。

在本发明所述的存储并检索数据的方法中，所述搜索引擎为ElasticSearch，所述非关系型数据库为Mongodb，所述关系型数据库为MySql或者Oracle。

本发明还公开了一种存储并检索数据的系统，包括：

数据存储单元，用于将需要存储的数据按照数据类型存储到关系型数据库 或/及非关系型数据库中；