[发明专利]人脸识别方法及装置

说明书

本申请公开了一种人脸识别方法及装置。该方法包括：获得取待识别图像；基于跨模态人脸识别网络对所述待识别图像进行识别，得到所述待识别图像的识别结果，其中，所述跨模态人脸识别网络基于不同模态的人脸图像数据训练得到。还公开了相应的装置。本实施例通过由按类别划分的图像集训练神经网络得到跨模态人脸识别网络，通过跨模态人脸识别网络对各个类别的对象是否是同一个人进行识别，可提高识别准确率。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种人脸识别方法及装置。

背景技术

安防、社保、通信等领域需要识别不同图像中包括的人物对象是否是同一个人，以实现面部跟踪、实名认证、手机解锁等操作。目前，通过人脸识别算法对不同图像中的人物对象分别进行人脸识别，可识别不同图像中包括的人物对象是否是同一个人，但识别准确率较低。

发明内容

本申请提供一种人脸识别方法，以识别不同图像中的人物对象是否是同一个人。

第一方面，提供了一种人脸识别方法，包括：获得取待识别图像；基于跨模态人脸识别网络对所述待识别图像进行识别，得到所述待识别图像的识别结果，其中，所述跨模态人脸识别网络基于不同模态的人脸图像数据训练得到。

在一种可能实现的方式中，所述基于不同模态的人脸图像数据训练得到所述跨模态人脸识别网络的过程，包括：基于第一模态网络和第二模态网络进行训练得到所述跨模态人脸识别网络。

在另一种可能实现的方式中，在所述基于第一模态网络和第二模态网络进行训练得到所述跨模态人脸识别网络之前，还包括：基于第一图像集和第二图像集对所述第一模态网络训练，其中，所述第一图像集中的对象属于第一类别，所述第二图像集中的对象属于第二类别。

在又一种可能实现的方式中，所述基于第一图像集和第二图像集对所述第一模态网络训练，包括：基于所述第一图像集和所述第二图像集对所述第一模态网络进行训练，得到所述第二模态网络；按预设条件从所述第一图像集中选取第一数目的图像，并从所述第二图像集中选取第二数目的图像，并根据所述第一数目的图像和所述第二数目的图像得到第三图像集；基于所述第三图像集对所述第二模态网络进行训练，得到所述跨模态人脸识别网络。

在又一种可能实现的方式中，所述预设条件包括：所述第一数目与所述第二数目相同，所述第一数目与所述第二数目的比值等于所述第一图像集包含的图像数目与所述第二图像集包含的图像数目的比值，所述第一数目与所述第二数目的比值等于所述第一图像集包含的人数与所述第二图像集包含的人数的比值中的任意一种。

在又一种可能实现的方式中，所述第一模态网络包括第一特征提取分支、第二特征提取分支以及第三特征提取分支；所述基于所述第一图像集和所述第二图像集对所述第一模态网络进行训练，得到所述第二模态网络，包括：将所述第一图像集输入至所述第一特征提取分支，并将所述第二图像集输入至所述第二特征提取分支，并将第四图像集输入至所述第三特征提取分支，对所述第一模态网络进行训练，其中，所述第四图像集包括的图像为同一场景下采集的图像或同一采集方式采集的图像；将训练后的第一特征提取分支或训练后的第二特征提取分支或训练后的第三特征提取分支作为所述第二模态网络。