[发明专利]双录质检方法、装置、计算机设备及存储介质

权利要求书

1.一种双录质检方法，其特征在于，所述双录质检方法包括：

若接收到客户端发送的金融产品购买请求，则向所述客户端发送启动双录指令，其中，所述启动双录指令使所述客户端开启摄像头装置和麦克风装置；

若接收到所述客户端返回的双录启动完成消息，则按照预设的选取方式，从预设的问题库中选取合规问题，并通过机器语音的方式将所述合规问题的问题语音发送到所述客户端；

接收所述客户端发送的答案语音和视频图像，其中，所述语音答案是所述客户端通过所述麦克风装置采集的用户回答所述合规问题的语音，所述视频图像是所述客户端通过所述摄像头装置拍摄的用户回答所述合规问题的视频；

将所述视频图像输入预设的人脸识别模型进行人脸识别，得到人脸识别结果；

若所述人脸识别结果为所述用户的身份合法，则使用预设的语音识别模型，对所述答案语音进行文本转换，得到所述答案语音对应的答案文本；

从所述预设的问题库中获取所述合规问题对应的合规答案，并将所述答案文本与所述合规答案进行匹配，得到匹配结果；

若所述匹配结果为匹配成功，则确认合规质检通过，并向所述客户端发送结束双录的指令。

2.如权利要求1所述的双录质检方法，其特征在于，所述从所述预设的问题库中获取所述合规问题对应的合规答案，并将所述答案文本与所述合规答案进行匹配，得到匹配结果包括：

对所述答案文本进行关键字提取，得到所述答案文本包含的答案关键字；

从所述预设的问题库中获取所述合规问题对应的合规答案，并将所述答案关键字与所述合规答案进行文本字符匹配，若在所述合规答案中匹配到每个所述答案关键字，则确认所述匹配结果为匹配成功；

若存在所述合规答案未匹配到的所述答案关键字，则将未匹配到的所述答案关键字作为待识别关键字，并从预设的近义词词库中获取每个所述待识别关键字的近义词；

将每个所述待识别关键字的所述近义词与所述合规答案进行文本字符匹配，若每个所述待识别关键字的至少一个所述近义词与所述合规答案匹配，则确认所述匹配结果为匹配成功；

若所述待识别关键字的每个所述近义词与所述合规答案不匹配，则确认所述匹配结果为匹配失败。

3.如权利要求1所述的双录质检方法，其特征在于，所述若所述匹配结果为匹配成功，则确认合规质检通过，并向所述客户端发送结束双录的指令包括：

若所述匹配结果为匹配成功，则使用预设的微表情识别模型对所述视频图像进行面部情绪识别，得到所述用户在回答所述合规问题时的情绪状态；

从所述预设的问题库中获取所述合规问题对应的预设的合理情绪状态；

若所述用户在回答所述合规问题时的情绪状态与所述合理情绪状态一致，则确认合规质检通过，并向所述客户端发送结束双录的指令。

4.如权利要求3所述的双录质检方法，其特征在于，所述使用预设的微表情识别模型对所述视频图像进行面部情绪识别，得到所述用户在回答所述合规问题时的情绪状态包括：

按照预设的提取方式对所述视频图像进行视频帧提取，得到目标帧图像；

将所述目标帧图像输入所述预设的微表情识别模型，得到所述用户在每个预设的微表情状态下的概率；

从每个所述概率中选取大于预设的概率阈值的概率，并将选出的所述概率对应的所述微表情状态作为目标微表情状态；

根据所述微表情状态与所述情绪状态之间预设的对应关系，采用投票的方式，统计每个所述目标微表情状态对应的所述情绪状态的票数，并将所述票数最多的所述情绪状态作为所述用户在回答所述合规问题时的情绪状态。

5.如权利要求3或4所述的双录质检方法，其特征在于，在所述从所述预设的问题库中获取所述合规问题对应的预设的合理情绪状态之后，所述双录质检方法还包括：

若所述用户在回答所述合规问题时的情绪状态与所述合理情绪状态不一致，则确认合规质检未通过，并向所述客户端返回异常提示信息。