[发明专利]票据区域识别方法、装置、电子设备及可读存储介质

说明书

本发明涉及智能决策，揭露一种票据区域识别方法，包括：将含有多张票据的待识别图像输入训练好的票据区域识别模型，得到多个尺度模板中每个尺度模板对应的票据区域识别结果，所述票据区域识别结果包括待识别图像中每张票据对应的预测区域；基于所述预测区域确定待识别图像对应的目标尺度模板，将目标尺度模板对应的票据区域识别结果作为目标识别结果。本发明还提供一种票据区域识别装置、电子设备及可读存储介质。本发明提高了票据区域识别准确度。

技术领域

本发明涉及智能决策领域，尤其涉及一种票据区域识别方法、装置、电子设备及可读存储介质。

背景技术

随着科技的进步，人工智能的应用越来越广泛，例如，在财务报销的场景中，可通过OCR识别技术对票据内容进行识别，使得票据录入效率更高、录入结果更准确，然而，对于多张票据混贴在一张报销单的情况，由于票据尺寸不一、粘贴方向不同且粘贴有重叠，从而使得OCR识别结果不准确，因此，需在OCR识别前对混贴票据进行票据区域识别，以对各张票据进行拆分。

传统的票据区域识别方法主要通过二值化，形态学处理，连通域检测，霍夫直线检测，或者是关键点检测来实现。这些方法通常只能检测图片中仅有单张票据的情况；且检测效果不稳定，针对图片有畸变，背景较复杂等情况可能检测不到或者检测出错。因此，亟需一种票据区域识别方法，以提高票据区域识别准确度。

发明内容

鉴于以上内容，有必要提供一种票据区域识别方法，旨在提高票据区域识别准确度。

本发明提供的票据区域识别方法，包括：

解析用户基于客户端发出的票据区域识别请求，获取所述请求携带的待识别图像，所述待识别图像中含有多张票据；

将所述待识别图像输入训练好的票据区域识别模型，得到多个尺度模板中每个尺度模板对应的票据区域识别结果，所述票据区域识别结果包括所述待识别图像中每张票据对应的预测区域；

基于所述预测区域确定所述待识别图像对应的目标尺度模板，将所述目标尺度模板对应的票据区域识别结果作为目标识别结果，并将所述目标识别结果反馈给所述客户端。

可选的，所述票据区域识别模型的构建过程包括：

在特征金字塔模型的自顶向下网络分支的输出处增加特征融合分支，所述特征融合分支包括上采样模块和卷积模块；

在所述特征融合分支的输出处增加分类分支，所述分类分支包括区域特征聚集模块和全连接模块。

可选的，所述票据区域识别模型的训练过程包括：

采集预设数量的携带第一标注信息的票据图像，计算所述票据图像在多个尺度模板中的每个尺度模板下的第二标注信息，得到携带第一及第二标注信息的票据图像集；

将所述票据图像集输入所述票据区域识别模型，训练所述票据区域识别模型的分类分支，通过最小化第一损失函数确定所述票据区域识别模型的分类分支的参数，得到初级票据区域识别模型；

固定所述分类分支的参数，将所述票据图像集输入所述初级票据区域识别模型，通过最小化第二损失函数确定所述初级票据区域识别模型的自底向上网络分支、自顶向上网络分支及特征融合分支的参数，得到训练好的票据区域识别模型。

可选的，所述将所述票据图像集输入所述票据区域识别模型，训练所述票据区域识别模型的分类分支，包括：

获取所述票据区域识别模型的特征融合分支的各个通道输出的特征图，根据所述第一及第二标注信息裁剪出每张特征图中各张票据对应的区域，将所述区域作为正样本；

在所述特征图中随机裁剪不同大小的背景区域、和/或不完整票据的区域、和/或多张票据叠加的区域作为负样本；

利用所述正样本及负样本训练所述票据区域识别模型的分类分支。