[发明专利]号码识别方法、系统、设备及计算机可读存储介质

说明书

本公开涉及号码识别方法、系统、设备及计算机可读存储介质，该方法包括：根据视频图像确定第一号码图和所述第一号码图的形变情况；根据所述形变情况对所述第一号码图进行调整以得到第二号码图；根据所述第二号码图确定号码。

技术领域

本公开涉及视频或图像处理技术领域，特别是涉及一种号码识别方法、系统、设备及计算机可读存储介质。

背景技术

在体育赛事视频中，衣服上的号码是认证运动员身份的关键线索。例如，在球赛直播中，通过自动识别球场上球员的球衣号码，能够快速有效的定位到球员信息，从而能够进行更好的解说与数据分析。此外，在诸如马拉松比赛等运动员数目众多的比赛中，如何快速有效地对每个运动员进行身份认证，同样也可以依赖号码识别技术。

现有的号码识别方法存在识别精度不高、识别数字范围有限等问题。特别是运动员常常处于严重的身体倾斜和姿势变形，号码也存在严重的畸变，对于此类号码，现有方法的识别精度较差。

发明内容

本公开的目的在于提供一种新的号码识别方法、系统、设备及计算机可读存储介质。

本公开的目的是采用以下的技术方案来实现的。依据本公开提出的号码识别方法，包括以下步骤：根据视频图像确定第一号码图和所述第一号码图的形变情况；根据所述形变情况对所述第一号码图进行调整以得到第二号码图；根据所述第二号码图确定号码；

其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据所述视频图像确定所述视频图像中的人员图像；利用预先对确定号码图像及号码图像的形变情况进行过训练的空间变换网络，对所述人员图像进行提取特征，以确定四个顶点坐标；将所述四个顶点坐标所围成的四边形作为所述第一号码图，根据所述四边形与预设的矩形之间的形变情况确定所述第一号码图的形变情况；

其中，在训练所述空间变换网络的过程中，加入坐标值的回归损失函数以进行基于坐标位置监督的号码识别；其中，所述回归损失函数由分类损失和定位损失L_loc确定，所述定位损失L_loc由以下算式得到：

其中，p为空间变换网络所预测的坐标，g为正确标注数据的坐标，为Faster R-CNN中的平滑L₁，v∈(x,y)表示同时需要对横纵坐标分别计算误差，p₁、p₂、p₃、p₄分别表示所述四边形的所述四个顶点。

本公开的目的还可以采用以下的技术措施来进一步实现。

前述的号码识别方法，其中，所述回归损失函数L为：

其中，N为训练中的批数，α为权重项，L_cls为所述分类损失。

前述的号码识别方法，其中，所述的根据所述视频图像确定所述视频图像中的人员图像包括：根据视频图像确定所述视频图像中的多个区域以及每个所述区域的置信度，所述置信度用于表示所述区域为人的程度；将所述置信度大于预设的设定值的区域作为人员图像。

前述的号码识别方法，其中，所述的根据视频图像确定第一号码图和所述第一号码图的形变情况包括：根据所述视频图像确定空间变换矩阵，所述空间变换矩阵用于表示所述第一号码图的旋转和/或缩放和/或平移的情况；所述的根据所述形变情况对所述第一号码图进行调整以得到第二号码图包括：根据所述空间变换矩阵对所述第一号码图中的点的坐标进行调整以矫正所述第一号码图。

前述的号码识别方法，其中，所述的根据所述形变情况对所述第一号码图进行调整以得到第二号码图还包括：对经过矫正的所述第一号码图进行插值处理，以得到第二号码图。