[发明专利]一种基于视频对象识别的业务审核方法、装置及设备

权利要求书

1.一种基于视频对象识别的业务审核方法，其特征在于，包括：

获取业务流程视频；所述业务流程视频录制有待审核业务的执行过程；

确定所述业务流程视频中的人脸数量；

识别所述业务流程视频中的证件类型和证件数量；

在所述人脸数量、证件类型和证件数量均符合所述待审核业务的业务执行条件的情况下，判定所述待审核业务为正常业务。

2.如权利要求1所述的方法，其特征在于，所述获取业务流程视频之后，还包括：

基于预设截取间隔从所述业务流程视频中提取目标视频帧；

相应的，所述确定所述业务流程视频中的人脸数量，包括：

确定所述目标视频帧中的人脸数量；

所述识别所述业务流程视频中的证件类型和证件数量，包括：

识别所述目标视频帧中的证件类型和证件数量。

3.如权利要求2所述的方法，其特征在于，所述目标视频帧对应有时序标记；所述时序标记用于表示目标视频帧在业务流程视频中的出现顺序；

所述确定所述目标视频帧中的人脸数量之后，包括：

根据各个目标视频帧对应的时序标记和所识别出的人脸数量，确定人脸误检视频帧；

根据剔除所述人脸误检视频帧后的目标视频帧确定所述业务流程视频对应的人脸数量；

所述识别所述目标视频帧中的证件类型和证件数量，包括：

根据各个目标视频帧对应的时序标记和所识别出的证件数量、证件类型，确定证件误检视频帧；

根据剔除证件误检视频帧后的目标视频帧确定所述业务流程视频对应的证件数量和证件类型。

4.如权利要求3所述的方法，其特征在于，所述根据各个目标视频帧对应的时序标记和所识别出的人脸数量，确定人脸误检视频帧，包括：

在连续且对应有同样的人脸数量的目标视频帧的数量小于最小连续阈值的情况下，确定所述目标视频帧为人脸误检视频帧；

所述根据各个目标视频帧对应的时序标记和所识别出的证件数量、证件类型，确定证件误检视频帧，包括：

在连续且对应有同样的证件类型或证件数量的目标视频帧的数量小于最小连续阈值的情况下，确定所述目标视频帧为证件误检视频帧。

5.如权利要求2所述的方法，其特征在于，所述识别所述目标视频帧中的证件类型和证件数量，包括：

在对应于特定证件类型的目标视频帧占全部目标视频帧的比例大于最大持续比例的情况下，确定所述特定证件类型为误检证件类型；所述误检证件类型不作为对应于所述业务流程视频的证件类型。

6.如权利要求2所述的方法，其特征在于，所述识别所述业务流程视频中的证件类型和证件数量之前，还包括：

获取样本图像；所述样本图像对应有样本图像标注；所述样本图像标注用于指示证件类型和证件位置；

对所述样本图像进行滤波得到锐化后的样本图像；

利用证件检测模型中的ResNet网络从所述锐化后的样本图像中提取样本图像特征；所述证件检测模型包括预先构建的用于从图像中识别证件类型和证件位置的模型；

基于所述样本图像特征，利用证件检测模型中的特征空间金字塔获取多尺度特征；

通过所述证件检测模型对所述多尺度特征进行回归预测，得到预测证件类别和预测证件位置；

利用所述预测证件类别和预测证件位置计算损失函数；

根据所述损失函数对证件检测模型进行调整，并重复获取样本图像、样本图像滤波、提取样本图像特征、获取多尺度特征、计算损失函数、调整证件检测模型的步骤直至所述证件检测模型训练完毕；

相应的，所述识别所述目标视频帧中的证件类型和证件数量，包括：

利用所述证件检测模型识别所述目标视频帧中的证件类型和证件数量。