[发明专利]一种存储并检索数据的方法以及系统在审
申请号: | 201810585342.2 | 申请日: | 2018-06-08 |
公开(公告)号: | CN110580255A | 公开(公告)日: | 2019-12-17 |
发明(设计)人: | 苏县伟;宋延平 | 申请(专利权)人: | 深圳艾派网络科技股份有限公司 |
主分类号: | G06F16/245 | 分类号: | G06F16/245;G06F16/248;G06F16/28;G06F16/33 |
代理公司: | 44217 深圳市顺天达专利商标代理有限公司 | 代理人: | 郭伟刚;张蓉 |
地址: | 518057 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 聚合结果 非关系型数据库 关系型数据库 存储 搜索引擎 非结构化文本 数据存储步骤 结构化数据 存储效率 检索步骤 检索结果 检索数据 检索效率 聚合处理 快速搜索 数据类型 数据同步 单词组 数据量 调用 优选 单词 检索 查询 保证 | ||
1.一种存储并检索数据的方法,其特征在于,方法包括:
数据存储步骤:将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中;
数据同步步骤:定时调用非关系型数据库的数据进行聚合处理得到聚合结果,并将聚合结果同步到搜索引擎;
检索步骤:搜索引擎根据用户输入的关键字,基于所述聚合结果进行检索,并将检索结果呈现给用户。
2.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述的将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中,包括:
将需要存储的非关系型数据存储到非关系型数据库中;
将需要存储的关系型数据存储到关系型数据库中,并将关系型数据中的符合预设的常见检索数据的字段数据存储到非关系型数据库中。
3.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述方法应用于管理平台,其中:需要存储的关系型数据来自WEB录入页面获取到的用户录入的数据;需要存储的非关系型数据来自需要存储的关系型数据中的符合预设的常见检索数据的字段数据,以及管理平台中的某些模块产生的数据。
4.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述非关系型数据库为Mongodb,所述数据同步步骤具体包括:
定时调用Mongodb的映射归约方法对Mongodb中存储的数据进行聚合处理得到聚合结果;
将所述聚合结果由Mongodb的数据同步工具同步到搜索引擎。
5.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述检索步骤具体包括:
搜索引擎获取WEB检索页面上传的用户输入的关键字;
搜索引擎根据所述关键字基于所述聚合结果进行检索;
搜索引擎将检索结果按照预设排序规则进行排序并呈现给用户,并提供与该检索结果相关的关系型数据库的接口以供用户查看详情。
6.根据权利要求1所述的存储并检索数据的方法,其特征在于,所述搜索引擎为ElasticSearch,所述非关系型数据库为Mongodb,所述关系型数据库为MySql或者Oracle。
7.一种存储并检索数据的系统,其特征在于,包括:
数据存储单元,用于将需要存储的数据按照数据类型存储到关系型数据库或/及非关系型数据库中;
数据同步单元,用于定时调用非关系型数据库的数据进行聚合处理得到聚合结果,并将聚合结果同步到搜索引擎;
检索单元,用于通过搜索引擎根据用户输入的关键字,基于所述聚合结果进行检索,并将检索结果呈现给用户。
8.根据权利要求7所述的存储并检索数据的系统,其特征在于,所述系统应用于管理平台,所述数据存储单元包括:
数据获取单元,用于与WEB录入页面对接,以获取WEB录入页面获取到的用户录入的数据;以及用于与所述管理平台中的某些模块对接,以获取该某些模块产生的数据;
关系型数据库录入单元,用于将数据获取单元获取的关系型数据存储到关系型数据库中;
非关系型数据库录入单元,用于将数据获取单元获取的非关系型数据存储到非关系型数据库中,并将数据获取单元获取的关系型数据中的符合预设的常见检索数据的字段数据存储到非关系型数据库中。
9.根据权利要求7所述的存储并检索数据的系统,其特征在于,所述搜索引擎为ElasticSearch,所述非关系型数据库为Mongodb,所述关系型数据库为MySql或者Oracle;
所述数据同步单元具体用于定时调用Mongodb的映射归约方法对Mongodb中存储的数据进行聚合处理得到聚合结果,将所述聚合结果由Mongodb的数据同步工具同步到搜索引擎;
所述检索单元具体用于通过搜索引擎获取WEB检索页面上传的用户输入的关键字,根据所述关键字基于所述聚合结果进行检索,将检索结果按照预设排序规则进行排序并呈现给用户,并提供与该检索结果相关的关系型数据库的接口以供用户查看详情。
10.一种存储并检索数据的系统,其特征在于,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器可运行所述计算机程序以执行如权利要求1-5任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳艾派网络科技股份有限公司,未经深圳艾派网络科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810585342.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种工程项目资料管理系统
- 下一篇:一种识别应用标识的方法、设备及系统