[发明专利]票据区域识别方法、装置、电子设备及可读存储介质

权利要求书

1.一种票据区域识别方法，其特征在于，所述方法包括：

解析用户基于客户端发出的票据区域识别请求，获取所述请求携带的待识别图像，所述待识别图像中含有多张票据；

将所述待识别图像输入训练好的票据区域识别模型，得到多个尺度模板中每个尺度模板对应的票据区域识别结果，所述票据区域识别结果包括所述待识别图像中每张票据对应的预测区域；

基于所述预测区域确定所述待识别图像对应的目标尺度模板，将所述目标尺度模板对应的票据区域识别结果作为目标识别结果，并将所述目标识别结果反馈给所述客户端。

2.如权利要求1所述的票据区域识别方法，其特征在于，所述票据区域识别模型的构建过程包括：

在特征金字塔模型的自顶向下网络分支的输出处增加特征融合分支，所述特征融合分支包括上采样模块和卷积模块；

在所述特征融合分支的输出处增加分类分支，所述分类分支包括区域特征聚集模块和全连接模块。

3.如权利要求2所述的票据区域识别方法，其特征在于，所述票据区域识别模型的训练过程包括：

采集预设数量的携带第一标注信息的票据图像，计算所述票据图像在多个尺度模板中的每个尺度模板下的第二标注信息，得到携带第一及第二标注信息的票据图像集；

将所述票据图像集输入所述票据区域识别模型，训练所述票据区域识别模型的分类分支，通过最小化第一损失函数确定所述票据区域识别模型的分类分支的参数，得到初级票据区域识别模型；

固定所述分类分支的参数，将所述票据图像集输入所述初级票据区域识别模型，通过最小化第二损失函数确定所述初级票据区域识别模型的自底向上网络分支、自顶向上网络分支及特征融合分支的参数，得到训练好的票据区域识别模型。

4.如权利要求3所述的票据区域识别方法，其特征在于，所述将所述票据图像集输入所述票据区域识别模型，训练所述票据区域识别模型的分类分支，包括：

获取所述票据区域识别模型的特征融合分支的各个通道输出的特征图，根据所述第一及第二标注信息裁剪出每张特征图中各张票据对应的区域，将所述区域作为正样本；

在所述特征图中随机裁剪不同大小的背景区域、和/或不完整票据的区域、和/或多张票据叠加的区域作为负样本；

利用所述正样本及负样本训练所述票据区域识别模型的分类分支。

5.如权利要求3所述的票据区域识别方法，其特征在于，所述第一损失函数的计算公式为：

其中，H为第一损失函数，p_ij为票据图像集中第i个样本中的第j个票据区域是票据的真实概率，q_ij为票据图像集中第i个样本中的第j个票据预测区域是票据的预测概率，e为票据图像集中样本的总数量，F_i为票据图像集中第i个样本中票据区域的总数量，i、j、e皆为正整数；

所述第二损失函数的计算公式为：

其中，I为第二损失函数，A_ij为票据样本集中第i个样本中的第j个票据的真实区域，B_ij为票据样本集中第i个样本中的第j个票据的预测区域，q_ij为票据样本集中第i个样本中的第j个票据预测区域是票据的预测概率，c为常数，I_ij为票据样本集中第i个样本中的第j个票据的损失值，e为票据图像集中样本的总数量，F_i为票据图像集中第i个样本中票据区域的总数量，i、j、e皆为正整数。

6.如权利要求1所述的票据区域识别方法，其特征在于，所述基于所述预测区域确定所述待识别图像对应的目标尺度模板，包括：

依照尺度模板从小到大的顺序依次判断每个尺度模板对应的票据区域识别结果中各张票据的预测区域是否有重叠；

当判断某一指定尺度模板中票据的预测区域有重叠时，将所述指定尺度模板的前一个尺度模板作为所述待识别图像对应的目标尺度模板。