[发明专利]基于内存图像集群的图像检索方法及系统

权利要求书

1.一种基于内存图像集群的图像检索方法，其特征在于，包括：

采用ElasticSearch以及分布式文件系统HDFS上的HBase和Parquet文件，并基于内存集群对图像数据进行分布式存储，得到持久化图像数据；

按照预设条数对所述持久化图像数据进行管理，得到图像热数据；

按照均衡分配原则将所述图像热数据进行节点的分配，得到热数据节点；

通过第一热数据节点将检索请求并行分发给每个所述热数据节点，以使所述热数据节点对所述图像热数据进行检索，得到第一目标图像数据；

所述通过第一热数据节点将检索请求并行分发给每个所述热数据节点，以使所述热数据节点对所述图像热数据进行检索，得到第一目标图像数据，包括：

通过所述第一热数据节点接收所述检索请求，并将所述检索请求并行分发给每个所述热数据节点；

根据所述检索请求，每个所述热数据节点采用多线程方式对内部的所述图像热数据进行属性过滤、特征比对和相似度排序，得到原始记录标识；

通过所述第一热数据节点对各个所述热数据节点返回的所述原始记录标识进行管理，得到目标记录标识；

通过HBase获取与所述目标记录标识对应的所述第一目标图像数据。

2.根据权利要求1所述的方法，其特征在于，所述图像数据包括属性数据和特征数据，所述采用ElasticSearch以及HDFS上的HBase和Parquet文件，并基于内存集群对图像数据进行分布式存储，得到持久化图像数据，包括：

将所述属性数据通过所述HBase和ElasticSearch进行存储，将所述特征数据通过所述Parquet文件进行存储，以及将提供检索的属性字段数据通过所述Parquet文件进行存储，得到所述持久化图像数据；

构建所述内存集群，并通过所述内存集群对所述持久化图像数据进行分布式存储。

3.根据权利要求1所述的方法，其特征在于，所述按照预设条数对所述持久化图像数据进行管理，得到图像热数据，包括：

按照预设间隔，对所述内存集群的每个节点内存中的所述持久化图像数据进行检测，得到数据规模信息；

判断所述数据规模信息是否达到所述预设条数；

如果是，则按照预设留存期对所述持久化图像数据进行清理，得到所述图像热数据。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取属性检索请求，根据所述属性检索请求并通过ElasticSearch对所述持久化图像数据进行检索，并结合HBase得到第二目标图像数据。

5.一种基于内存图像集群的图像检索系统，其特征在于，包括：

数据存储单元，用采用ElasticSearch以及HDFS上的HBase和Parquet文件，并基于内存集群对图像数据进行分布式存储，得到持久化图像数据；

数据管理单元，用于按照预设条数对所述持久化图像数据进行管理，得到图像热数据；

节点分配单元，用于按照均衡分配原则将所述图像热数据进行节点的分配，得到热数据节点；

第一图像检索单元，用于通过第一热数据节点将检索请求并行分发给每个所述热数据节点，以使所述热数据节点对所述图像热数据进行检索，得到第一目标图像数据；

所述第一图像检索单元包括：

通过所述第一热数据节点接收所述检索请求，并将所述检索请求并行分发给每个所述热数据节点；

根据所述检索请求，每个所述热数据节点采用多线程方式对内部的所述图像热数据进行属性过滤、特征比对和相似度排序，得到原始记录标识；

通过所述第一热数据节点对各个所述热数据节点返回的所述原始记录标识进行管理，得到目标记录标识；

通过HBase获取与所述目标记录标识对应的所述第一目标图像数据。