[发明专利]意愿识别方法、意愿识别模型训练方法、相关装置及介质

权利要求书

1.一种意愿识别方法，所述方法包括：

获取目标刷脸图像；所述目标刷脸图像包括目标刷脸用户；

基于所述目标刷脸用户在所述目标刷脸图像中的目标位置确定所述目标刷脸用户对应的目标脸部图像；

将所述目标刷脸图像和所述目标脸部图像输入意愿识别模型中，得到目标行为特征和目标情感特征，并基于所述目标行为特征和所述目标情感特征输出所述目标刷脸用户对应的识别结果；所述意愿识别模型基于多张已知意愿标签集的刷脸图像以及基于所述刷脸图像确定的已知表情标签的所述刷脸图像中各用户的脸部图像进行训练得到；所述刷脸图像包括至少一个用户；所述刷脸图像的意愿标签集包括所述至少一个用户各自对应的意愿标签。

2.如权利要求1所述的方法，所述获取目标刷脸图像之后，所述基于所述目标刷脸用户在所述目标刷脸图像中的目标位置确定所述目标刷脸用户对应的目标脸部图像之前，所述方法还包括：

基于所述目标刷脸用户在所述目标刷脸图像中的目标位置生成对应的目标掩码图；所述目标掩码图用于区分所述目标刷脸用户的脸部区域和除了所述脸部区域之外的其它区域；

所述将所述目标刷脸图像和所述目标脸部图像输入意愿识别模型中，得到目标行为特征和目标情感特征，并基于所述目标行为特征和所述目标情感特征输出所述目标刷脸用户对应的识别结果，包括：

将所述目标刷脸图像、所述目标掩码图以及所述目标脸部图像输入意愿识别模型中，得到目标行为特征和目标情感特征，并基于所述目标行为特征和所述目标情感特征输出所述目标刷脸用户对应的识别结果。

3.如权利要求2所述的方法，所述意愿识别模型包括行为特征提取网络和情感特征提取网络；

所述将所述目标刷脸图像、所述目标掩码图以及所述目标脸部图像输入意愿识别模型中，得到目标行为特征和目标情感特征，并基于所述目标行为特征和所述目标情感特征输出所述目标刷脸用户对应的识别结果，包括：

将所述目标刷脸图像和所述目标掩码图输入所述行为特征提取网络，输出所述目标刷脸用户对应的目标行为特征；

将所述目标脸部图像输入所述情感特征提取网络，输出所述目标刷脸用户对应的目标情感特征；

将所述目标行为特征和所述目标情感特征进行融合，得到目标融合特征；

基于所述目标融合特征输出所述目标刷脸用户对应的识别结果。

4.如权利要求3所述的方法，所述行为特征提取网络包括行为特征提取主干子网络和融合卷积子网络；

所述将所述目标刷脸图像和所述目标掩码图输入所述行为特征提取网络，输出所述目标刷脸用户对应的目标行为特征，包括：

将所述目标刷脸图像输入所述行为特征提取主干子网络，输出所述目标刷脸图像对应的目标特征；

将所述目标特征和所述目标掩码图输入所述融合卷积子网络，输出所述目标刷脸用户对应的目标行为特征。

5.如权利要求3所述的方法，所述将所述目标行为特征和所述目标情感特征进行融合，得到目标融合特征，包括：

按照所述目标行为特征对应的第一目标权重和所述目标情感特征对应的第二目标权重将所述目标行为特征和所述目标情感特征进行融合，得到目标融合特征；所述第二目标权重小于所述第一目标权重。

6.如权利要求3所述的方法，所述行为特征提取网络基于所述多张已知意愿标签集的刷脸图像进行训练得到；

所述情感特征提取网络基于多张基于所述多张刷脸图像确定的已知表情标签的所述刷脸图像中各用户的脸部图像进行训练得到。

7.如权利要求1所述的方法，所述识别结果包括意愿安全概率；

所述将所述目标刷脸图像和所述目标脸部图像输入意愿识别模型中，得到目标行为特征和目标情感特征，并基于所述目标行为特征和所述目标情感特征输出所述目标刷脸用户对应的识别结果之后，所述方法还包括：

判断所述意愿安全概率是否大于目标阈值；

若是，则确定所述目标刷脸用户刷脸成功；

若否，则确定所述目标刷脸用户刷脸失败。