[发明专利]仪表数值识别方法、装置及相关产品

权利要求书

1.一种仪表数值识别方法，其特征在于，包括以下步骤：

获取在实际应用场景下采集的样本仪表图像作为样本数据集，并对所述样本仪表图像中的矩形数字区域和/或圆形指针刻度盘区域进行标注；其中，所述矩形数字区域的标注信息包括位置与数值，所述圆形指针刻度盘区域的标注信息包括刻度盘位置与指针轮廓；

建立用于检测样本仪表图像中的数字和/或指针的目标检测模型，并通过所述样本数据集对所述目标检测模型进行训练；

通过所述目标检测模型对仪表图像进行识别，得到各个矩形数字框的边框位置信息和/或圆形指针刻度盘的边框位置信息；

建立用于提取各个所述矩形数字框和/或所述圆形指针刻度盘的中心点信息的图像处理及数值识别模块，并利用所述中心点信息对相应的图像进行矫正；

对矫正后的所述仪表图像进行数值识别和/或指针识别。

2.如权利要求1所述的仪表数值识别方法，其特征在于，所述建立用于检测样本仪表图像中的数字和/或指针的目标检测模型，并通过所述样本数据集对所述目标检测模型进行训练步骤中包括以下步骤：

将所述样本数据集作为输入对所述目标检测模型进行训练，获取矩形数字框的检测框和/或圆形指针刻度盘的检测框、以及各个检测框的类别信息；其中，所述矩形数字框的类别信息为矩形数字框中的数值；

将所述样本数据集的仪表图像中标注的矩形数字框的位置及数值信息和/或圆形指针刻度盘的位置信息作为标签，训练得到所述目标检测模块的损失，并通过反向传播逐步迭代神经网络模型的权重，完成所述目标检测模型的训练。

3.如权利要求1所述的仪表数值识别方法，其特征在于，所述仪表数值识别方法还包括以下步骤：

建立用于对所述样本仪表图像中指针所在区域进行识别的语义分割模型，从而提取所述样本仪表图像中的指针区域。

4.如权利要求3所述的仪表数值识别方法，其特征在于，所述建立用于对所述样本仪表图像中指针所在区域进行识别的语义分割模型，从而提取所述样本仪表图像中的指针区域包括以下步骤：

将进行圆形指针刻度盘区域标注后的样本仪表图像作为语义分割模型的输入，通过所述语义分割模块获取圆形指针刻度盘中指针所在区域；

将所述样本仪表图像中标注的圆形指针刻度盘中的指针轮廓信息作为标签，训练得到所述语义分割模块的损失，通过反向传播逐步迭代神经网络模型的权重，完成所述语义分割模型的训练。

5.如权利要求3所述的仪表数值识别方法，其特征在于，所述仪表数值识别方法还包括步骤：

对矫正后的所述仪表图像，利用所述目标检测模型检测得到所述圆形指针刻度盘的位置信息并提取圆盘区域；

根据所述语义分割模型分割出矫正后的所述仪表图像的指针区域信息；

对所述圆盘区域进行极坐标展开，结合所述指针区域信息将所述指针指示的刻度转换为数值。

6.如权利要求1所述的仪表数值识别方法，其特征在于，在所述建立用于提取各个所述矩形数字框和/或所述圆形指针刻度盘的中心点信息的图像后处理及数值识别模块，并利用所述中心点信息对相应的图像进行矫正步骤中，针对各个所述矩形数字框平行排列的特点，利用中心点信息对矩形数字框所在的仪表图像进行矫正；针对所述圆形指针刻度盘左右对称的特点，利用中心点信息对圆形指针刻度盘所在的仪表图像进行矫正。