[发明专利]发票的识别方法、系统、电子设备和介质

权利要求书

1.一种发票的识别方法，其特征在于，包括以下步骤：

获取发票图片；

在所述发票图片的预选区域中获取目标区域的位置信息，所述目标区域包括待识别的目标文字；

根据所述位置信息在所述目标区域中识别出所述目标文字；

所述发票图片为彩色图片，则所述在所述发票图片的预选区域中获取目标区域的位置信息的步骤包括以下步骤：

S21、对所述预选区域进行颜色通道分离以提取出目标通道，并将所述目标通道设置为第一颜色、将所述预选区域中除所述目标通道外的区域设置为第二颜色，所述目标通道为包括目标颜色的通道，所述目标颜色为所述目标文字的颜色；

S22、对所述预选区域进行腐蚀和膨胀操作，然后进行水平投影和垂直投影操作，并根据所述预选区域中的原始信息的位置关系获取所述目标区域在所述发票图片中的位置坐标；

步骤S22还包括：

在对所述预选区域进行腐蚀和膨胀操作之前，对所述预选区域进行高斯滤波操作，以去除噪点；

所述根据所述预选区域中的原始信息的位置关系获取所述目标区域在所述发票图片中的位置坐标的步骤包括：

根据所述发票图片中的发票号、开票日期、第一序列号以及第二序列号之间的相对位置关系，识别出所述目标区域，并结合水平投影和垂直投影操作确定所述目标区域的边界；

根据所述目标区域的所述边界，以及所述预选区域在所述发票图片中的位置，获取所述目标区域在所述发票图片中的位置坐标。

2.如权利要求1所述的发票的识别方法，其特征在于，在所述获取发票图片的步骤之后，所述发票的识别方法还包括以下步骤：

采用高斯滤波对所述发票图片进行降噪处理以得到降噪图片；

则所述在所述发票图片的预选区域中获取目标区域的位置信息的步骤包括：

在所述降噪图片中获取所述目标区域的位置信息。

3.如权利要求1所述的发票的识别方法，其特征在于，所述根据所述位置信息在所述目标区域中识别出所述目标文字的步骤包括以下步骤：

S31、生成预训练集，所述预训练集包括训练用发票图片和与所述训练用发票图片对应的识别结果，所述训练用发票图片的数量为第一预设数量，将所述预训练集划分为训练集和验证集；

S32、采用所述训练集对原始文字识别模型进行训练以得到第一文字识别模型，所述原始文字识别模型为基于卷积神经网络和循环神经网络的文字识别模型；

S33、采用所述验证集对所述第一文字识别模型进行验证以得到所述第一文字识别模型的准确率，如果所述准确率小于预设阈值，则返回步骤S32，如果所述准确率大于等于所述预设阈值，则以所述第一文字识别模型作为目标文字识别模型；

S34、采用所述目标文字识别模型根据所述位置信息在所述目标区域中识别出所述目标文字。

4.如权利要求3所述的发票的识别方法，其特征在于，所述预训练集还包括与所述训练用发票图片对应的目标区域的位置信息。

5.如权利要求3所述的发票的识别方法，其特征在于，所述原始文字识别模型包括去除全连接层的ResNet-50分类器、两层双向LSTM和CTC解码器；

所述去除全连接层的ResNet-50分类器用于提取所述训练用发票图片的特征信息；

所述两层双向LSTM用于接收所述特征信息并进行文本识别以得到预测结果；

所述CTC解码器用于接收所述预测结果并进行CTC解码以输出所述目标文字。

6.如权利要求3所述的发票的识别方法，其特征在于，在生成预训练集之后，步骤S31还包括：对所述训练用发票图片进行预处理操作，所述预处理操作包括添加噪声、随机旋转、仿射变化、水平翻转、垂直翻转、调整亮度、调整对比度中的至少一种。