[发明专利]基于声纹识别和人脸识别的双因素身份认证方法及系统

摘要

本发明涉及基于声纹识别和人脸识别的双因素身份认证方法及系统，认证方法包括：检测用户人脸图像；标关键点；人脸认证单元校验人脸相似度；生成口令；采集语音数据及用户ID；对语音数据处理；文本内容校验单元校验口令；声纹认证单元校验声纹相似度。认证系统包括设于客户端的人脸检测单元、面部关键点标定单元、人脸认证单元、第一口令生成单元、语音端点检测单元，及设于服务器端的语音识别单元、文本内容校验单元、声纹特征向量提取单元、声纹认证单元。本发明的优越效果在于：在声纹和人脸识别基础上加入语音识别，提高了认证的安全性和可靠性；口令在客户端和服务器端独立完成，且不以文本或加密文本在服务器端和客户端传输，安全性高。

主权项

1.基于声纹识别和人脸识别的双因素身份认证系统的认证方法，所述双因素身份认证系统包括设置于客户端且依次连接的人脸检测单元、面部关键点标定单元、人脸认证单元、第一口令生成单元、语音端点检测单元，所述面部关键点标定单元与第一口令生成单元之间设有人脸建模单元；还包括设置于服务器端且依次连接的语音识别单元、文本内容校验单元、声纹特征向量提取单元、声纹认证单元，所述文本内容校验单元与第二口令生成单元连接，以及与声纹特征向量提取单元连接的声纹建模单元；所述人脸检测单元设有视频采集装置；所述语音端点检测单元设有语音采集单元；所述声纹认证单元包括依次连接的声纹识别单元和声纹判断单元；所述认证系统包括人脸模型训练单元和声纹模型训练单元；其特征在于，至少包括如下步骤：S01：人脸检测单元检测请求认证用户的人脸区域图像；S02:通过面部关键点标定单元在检测到人脸区域内标定面部关键点；S03:人脸识别单元计算该用户的人脸与客户端存储的注册的人脸模型的相似度，人脸判断单元用于判断人脸相似度是否大于设定的阈值，若人脸相似度大于阈值则通过进入S04，若人脸相似度小于阈值则认证失败；S04:第一口令生成单元通过随机算法以当前时间和用户ID作为种子生成动态口令文本，同时触发第二口令生成单元生成相同的动态口令文本；S05:通过语音采集单元采集用户读取动态口令的语音数据；以及通过语音端点检测单元检测用户语音的起始端点和结束端点，并将检测的语音数据及用户ID发送至服务器端；S06:所述服务器端接收语音数据及用户ID,语音识别单元对接收到的语音数据进行语音识别处理，并将语音数据转换为口令文本；S07:文本内容校验单元对转换的口令文本与第二口令生成单元生成的动态口令文本进行比对，若口令文本相同则通过进入S08，若口令文本不同则认证失败；S08:声纹特征向量提取单元从用户的语音数据中提取声纹特征向量，声纹识别单元通过内积计算得到用户声纹特征向量与服务器端存储的注册的声纹模型之间的相似度，声纹判断单元用于判断声纹相似度是否大于设定的阈值，若声纹相似度大于阈值则身份认证成功，若声纹相似度小于阈值则认证失败。