[发明专利]云盘元数据快速检索方法及系统

说明书

本发明涉及一种云盘元数据快速检索方法及系统，其中该方法包括：步骤1，基于多线程方法获取分布于不同数据库和表中的数据；步骤2，将不同数据库和表中的独立数据整合成Map映射数据，并按照业务关系进行关联，生成整合数据；步骤3，在RediSearch中创建检索索引，对整合数据进行检索，得到检索结果。本发明能够解决数据跨库整合的问题，实现了不同数据库数据表之间的数据整合，并且检索支持中文分词检索，提高了检索的准确性。

技术领域

本发明属于数据检索技术领域，尤其涉及一种云盘元数据快速检索方法及系统。

背景技术

元数据(Metadata)，又称中介数据、中继数据，为描述数据的数据(data aboutdata)，主要是描述数据属性(property)的信息，用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。元数据算是一种电子式目录，为了达到编制目录的目的，必须在描述并收藏数据的内容或特色，进而达成协助数据检索的目的。

云盘是一种专业的互联网存储工具，是互联网云技术的产物，它通过互联网为企业和个人提供信息的储存，读取，下载等服务。具有安全稳定、海量存储的特点。

当前云盘中的文件元数据使用MySQL数据库保存，但是MySQL单表数据性能有上限。为了解决单表数据的性能瓶颈，使用了分表分库策略，但是也带来了元数据跨表跨库查询时的时效性问题，并且如果实现跨库查询会有一个数据库连接用户可以访问多个DB的访问安全问题。参图1所示，因为不能跨库合并数据，现有技术只能在不同库之间分开查询，不能整合，查询效率低。对中文没有分词支持，使用的SQL匹配，准确率匹配度都较低。

发明内容

本发明的目的是提供一种云盘元数据快速检索方法及系统，以解决解决元数据查询需要跨表跨库性能不高，安全性不高的问题，解决解决文件元数据在持久化分库分表之后难以高效，快速查询的难题，解决解决中文在数据库查询中命中率不高的问题。

本发明提供了一种云盘元数据快速检索方法，其特征在于，包括：

步骤1，基于多线程方法获取分布于不同数据库和表中的数据；

步骤2，将不同数据库和表中的独立数据整合成Map映射数据，并按照业务关系进行关联，生成整合数据；

步骤3，在RediSearch中创建检索索引，对整合数据进行检索，得到检索结果。

进一步地，所述步骤2包括：

对中文数据进行中文分词。

进一步地，所述步骤3包括：

对检索条件中的中文进行一次中文分词。

进一步地，步骤3中检索匹配使用字节级匹配。

本发明还提供了一种云盘元数据快速检索系统，包括：

数据获取模块，用于基于多线程方法获取分布于不同数据库和表中的数据；

数据整合模块，用于将不同数据库和表中的独立数据整合成Map映射数据，并按照业务关系进行关联，生成整合数据；

数据检索模块，用于在RediSearch中创建检索索引，对整合数据进行检索，得到检索结果。

进一步地，所述数据整合模块还用于对中文数据进行中文分词。

进一步地，所述数据检索模块还用于对检索条件中的中文进行一次中文分词。

进一步地，所述数据检索模块检索匹配使用字节级匹配。

借由上述方案，通过云盘元数据快速检索方法及系统，能够解决数据跨库整合的问题，实现了不同数据库数据表之间的数据整合，并且检索支持中文分词检索，提高了检索的准确性。