[发明专利]图片搜索方法、系统、移动终端及存储介质

权利要求书

1.一种图片搜索方法，其特征在于，所述方法包括：

分别确定待搜索图片中的目标人脸、目标物体和目标场景，并对所述待搜索图片中的所述目标人脸进行特征提取，得到人脸图像和所述人脸图像中的人脸特征点；

根据所述人脸特征点对所述人脸图像进行图像校准，并对图像校准后的所述人脸图像进行特征编码，得到人脸特征向量；

分别对所述目标物体和所述目标场景进行类别识别，得到目标物体类别和目标场景类别，并根据所述人脸特征向量、所述目标物体类别和所述目标场景类别分别进行图片搜索，得到人脸搜索图片、物体搜索图片和场景搜索图片；

所述对所述待搜索图片中的所述目标人脸进行特征提取，得到人脸图像和所述人脸图像中的人脸特征点，包括：

将所述待搜索图片输入预训练后的人脸检测模型进行人脸分析，得到所述人脸图像和所述人脸特征点；

所述将所述待搜索图片输入预训练后的人脸检测模型进行人脸分析之前，还包括：

将样本图片输入所述人脸检测模型中的卷积神经网络进行卷积处理，得到特征图片；

针对所述人脸检测模型中的卷积神经网络，采用上采样的方式进行图片采样，并采用横向连接的方式连接相同尺度的特征图片；

针对所述人脸检测模型中的卷积神经网络，分别将上一层的卷积神经网络和横向连接得到的特征图片进行图片组合，得到组合图片，并将所述组合图片设置为对应所述卷积神经网络输出的特征图片；

根据所述卷积神经网络输出的特征图片对所述人脸检测模型进行模型训练，得到预训练后的所述人脸检测模型。

2.如权利要求1所述的图片搜索方法，其特征在于，所述将所述待搜索图片输入预训练后的人脸检测模型进行人脸分析，包括：

根据预训练后的所述人脸检测模型对所述待搜索图片进行人脸分析，得到人脸锚框坐标和所述人脸特征点；

对所述人脸锚框坐标和所述人脸特征点进行校准，并输出校准后的所述人脸锚框坐标和所述人脸特征点。

3.如权利要求1所述的图片搜索方法，其特征在于，所述根据所述人脸特征向量、所述目标物体类别和所述目标场景类别分别进行图片搜索，包括：

将所述目标物体类别和所述目标场景类别分别与图片数据库进行匹配，得到所述物体搜索图片和所述场景搜索图片，所述图片数据库中存储有不同目标物体类别和不同目标场景类与对应搜索图片之间的对应关系；

将所述人脸特征向量与特征向量数据库进行匹配，得到所述人脸搜索图片，所述特征向量数据库中存储有不同特征向量与对应搜索图片之间的对应关系。

4.如权利要求3所述的图片搜索方法，其特征在于，所述将所述人脸特征向量与所述特征向量数据库进行匹配，包括：

对所述特征向量数据库中的特征向量进行聚类处理，得到聚类类别和异常类别，所述异常类别包括无法聚类的特征向量；

确定所述聚类类别中的目标类别，并计算所述目标类别和所述异常类别中的特征向量与所述人脸特征向量之间的特征相似度；

若所述特征相似度大于相似度阈值，则将所述特征相似度对应的特征向量设置为目标向量，并将所述目标向量对应的搜索图片输出为所述人脸搜索图片。

5.如权利要求4所述的图片搜索方法，其特征在于，所述确定所述聚类类别中的目标类别，包括：

分别在不同所述聚类类别中进行向量抽样，得到抽样向量，并分别计算所述人脸特征向量与所述抽样向量之间的向量相似度；

将最大所述向量相似度对应的所述聚类类别确定为目标类别。

6.如权利要求1所述的图片搜索方法，其特征在于，所述根据所述人脸特征点对所述人脸图像进行图像校准，包括：

确定所述人脸特征点中的眼睛特征点，并计算所述眼睛特征点之间的眼睛夹角；

根据所述眼睛夹角对所述人脸图像进行旋转校准。