[发明专利]行人再识别方法和装置、电子设备、存储介质、程序产品

权利要求书

1.一种行人再识别方法，其特征在于，包括：

获取待识别图像和候选图像集；

利用特征提取网络对所述待识别图像和所述候选图像集中各候选图像进行特征提取，获得所述待识别图像对应的待识别中间特征和所述候选图像对应的候选中间特征，所述特征提取网络经图像特征和语言描述跨模态训练获得；

基于所述待识别中间特征和所述候选中间特征从所述候选图像集中获得所述待识别图像对应的识别结果，所述识别结果包括至少一个所述候选图像；

所述经图像特征和语言描述跨模态训练获得特征提取网络，包括：

将样本图像输入所述特征提取网络，得到样本图像特征，所述样本图像包括文字描述标注；

基于语言识别网络对所述文字描述标注进行特征提取，得到样本语言特征；

基于所述样本语言特征和所述样本图像特征，训练所述特征提取网络。

2.根据权利要求1所述的方法，其特征在于，所述基于所述待识别中间特征和所述候选中间特征从所述候选图像集中获得所述待识别图像对应的识别结果，包括：

所述待识别中间特征和所述候选中间特征分别经过平均池化层和全连接层获得待识别特征和候选特征；

基于所述待识别特征和所述候选特征从所述候选图像集中获得所述待识别图像对应的识别结果。

3.根据权利要求2所述的方法，其特征在于，还包括：基于语言识别网络对与所述待识别图像相关的描述文字进行特征提取，获得语言特征；

基于所述语言特征对所述识别结果进行筛选，获得所述待识别图像对应的更新识别结果，所述更新识别结果包括至少一个候选图像。

4.根据权利要求3所述的方法，其特征在于，所述基于所述语言特征对所述识别结果进行筛选，获得所述待识别图像对应的更新识别结果，包括：

基于所述语言特征与所述识别结果对应的至少一个所述候选中间特征之间的距离进行筛选；

获得距离小于或等于预设值的至少一个所述候选中间特征，将获得的所述候选中间特征对应的所述候选图像作为所述更新识别结果。

5.根据权利要求4所述的方法，其特征在于，还包括：

基于所述语言识别网络对所述待识别图像相关的至少一个描述词语进行特征提取，获得词语特征，每个所述描述词语对应所述待识别图像中的至少一个部分；

基于所述词语特征对所述识别结果或所述更新识别结果进行筛选，获得所述待识别图像对应的目标识别结果，所述目标识别结果包括至少一个所述候选图像。

6.根据权利要求5所述的方法，其特征在于，所述基于所述词语特征对所述识别结果或所述更新识别结果进行筛选，获得所述待识别图像对应的目标识别结果，包括：

基于所述词语特征与所述识别结果或所述更新识别结果对应的至少一个所述候选中间特征之间的距离进行筛选；

获得距离小于或等于预设值的至少一个所述候选特征，将获得的候选中间特征对应的候选图像作为所述目标识别结果。

7.根据权利要求1所述的方法，其特征在于，所述基于所述样本语言特征和所述样本图像特征，训练所述特征提取网络，包括：

基于所述样本语言特征和所述样本图像特征，获得全局相关概率；

基于所述全局相关概率和所述样本图像与所述文字描述标注的相关性，利用二元互熵损失获得全局损失；

基于所述全局损失训练所述特征提取网络。

8.根据权利要求7所述的方法，其特征在于，所述基于所述样本语言特征和所述样本图像特征，获得全局相关概率，包括：

将所述样本图像特征池化后与所述样本语言特征相减，得到差值特征；

对所述差值特征进行逐元素计算平方值获得联合特征；

对所述联合特征执行归一化处理，得到用于表示全局相关性的全局相关概率。