[发明专利]一种多模态联合的图像重排序方法

摘要

本发明公开了一种针对图像检索的结果重排序方法，该方法在对图像进行排序过程中可以充分利用多模态信息，使用该方法可以在现有检索的结果基础上，进一步改善图像的排序结果，提高其准确率，非常适合在网络环境下或者基于本地系统的图像检索系统使用。其方法步骤为：(1)提出图像的可视特征和文本特征。(2)检索图像之间的模态内(单模态之间)和模态间(多模态之间)的相似度。并根据这些相似度来构建多重图。(3)将多重图进行处理，使其退化为一个完全图。(4)在完全图上进行随机游走，并计算图像排序得分。(5)根据随机游走的得分情况，对图像进行重新排序，得到最终结果。

主权项

一种多模态联合的图像重排序方法，其特征是，该方法的实现步骤如下：Step1：对需要重新排序的图像，提取其可视特征及相关文本特征；Step2：计算图像之间的模态内和模态间的相似度，并构建多重图；Step3：将多重图退化为完全图；Step4：在完全图上随机游走，计算图像排序得分；Step5：根据随机游走得分，对图像重新排序。