[发明专利]人脸识别方法、设备及计算机可读存储介质

说明书

本发明实施例公开了一种人脸识别方法、设备及计算机可读存储介质，该方法包括：获取与用户的待处理执行业务对应的随机信息，在进行待处理业务时，获取待检测视频数据，待检测视频数据中包含合法用户的人脸，待检测视频数据是在提示随机信息后获取的，从待检测视频数据中，提取音频特征和目标部分的视频帧序列，根据音频特征、目标部分的视频帧序列和随机信息进行识别，得到语音识别结果、目标语言识别结果和音视频匹配结果，根据语音识别结果、目标语言识别结果和音视频匹配结果的至少一种进行分析，得到人脸识别结果，当人脸识别结果表征通过时，执行待处理业务。

技术领域

本发明涉及数据加密技术领域，尤其涉及一种人脸识别方法、设备及计算机可读存储介质。

背景技术

近年来，人脸识别技术被广泛的用于各个领域，特别是身份认证环节，如支付、门禁、打卡等，但当非法用户对人脸识别系统进行蓄意攻击，如使用合法用户的人脸照片或人脸视频，将使人脸识别系统将非法使用人识别为合法用户时，将造成巨大损失。目前，为了抵御攻击，常利用人机交互的方式，使合法用户配合完成如眨眼、张嘴、摇头等动作以检测用户生物活性，这种方法能够抵御非法用户使用合法用户的人脸照片的攻击方式，但当攻击者使用提前制作好的合法用户的眨眼、张嘴、摇头等动作的视频进行播放时，将导致人脸识别系统得到错误的识别结果。

发明内容

本发明实施例提供一种人脸识别方法、设备及计算机可读存储介质，旨在提高人脸识别的准确度。

本发明的技术方案是这样实现的：

本发明实施例提供了一种人脸识别方法，所述方法包括：获取与用户的待处理执行业务对应的随机信息；在进行所述待处理业务时，获取待检测视频数据，所述待检测视频数据中包含合法用户的人脸；所述待检测视频数据是在提示所述随机信息后获取的；从所述待检测视频数据中，提取音频特征和目标部分的视频帧序列；根据所述音频特征、所述目标部分的视频帧序列和所述随机信息进行识别，得到语音识别结果、目标语言识别结果和音视频匹配结果；根据所述语音识别结果、所述目标语言识别结果和所述音视频匹配结果的至少一种进行分析，得到人脸识别结果；当所述人脸识别结果表征通过时，执行所述待处理业务。

上述方法中，所述根据所述音频特征、所述目标部分的视频帧序列和所述随机信息进行识别，得到语音识别结果、目标语言识别结果和音视频匹配结果，包括：根据所述音频特征和所述随机信息进行语音识别，得到所述语音识别结果；根据所述目标部分的视频帧序列和所述随机信息进行图像识别，得到所述目标语言识别结果；对所述音频特征和所述目标部分的视频帧序列进行匹配识别，得到所述音视频匹配结果。

上述方法中，所述从所述待检测视频数据中，提取音频特征和目标部分的视频帧序列，包括：对所述待检测视频数据进行音视频分离，得到音频序列和视频帧序列；对所述音频序列进行音频特征提取，得到所述音频特征；对所述视频帧序列中的每个视频帧进行图像识别，提取所述目标部分的视频帧序列。

上述方法中，所述目标部分包括唇部；所述对所述视频帧序列中的每个视频帧进行图像识别，提取所述目标部分的视频帧序列，包括：从视频帧序列的第一个视频帧中进行人脸识别，得到第一个视频帧的人脸方向；根据预设的旋转角度和所述第一个视频帧的人脸方向，对所述每个视频帧进行旋转，得到旋转后的每个正向视频帧；对所述每个正向视频帧进行人脸关键点检测，得到每个视频帧对应的人脸关键点；基于所述每个视频帧对应的人脸关键点，识别出每个视频帧对应的唇部区域，从而得到所述唇部的视频帧序列。

上述方法中，所述基于所述每个视频帧对应的人脸关键点，识别出每个视频帧对应的唇部区域，从而得到所述唇部的视频帧序列，包括：对所述每个视频帧对应的人脸关键点进行校准，得到校准后的每个视频帧对应的人脸关键点，从而得到校准后的视频帧序列；所述校准后的视频帧序列中每个视频帧的人脸关键点的坐标是一致的；基于所述校准后的视频帧序列，识别出所述每个视频帧对应的唇部区域，从而得到所述唇部的视频帧序列。