[发明专利]全景视频上的飞机智能监视方法、装置及系统

权利要求书

1.一种全景视频上的飞机智能监视方法，其特征在于，包括：

步骤S1，实时获取航班的标牌信息和GPS坐标；

步骤S2，通过预先确定的单应变换矩阵将所述GPS坐标转换为单路视频中的像素坐标，得到像素坐标集，其中，所述单应变换矩阵为所述GPS坐标和所述单路视频的像素坐标之间的变换关系；

步骤S3，对所述单路视频上的飞机作检测和跟踪，得到位置坐标集；

步骤S4，融合所述像素坐标集和所述位置坐标集，得到所述航班在所述单路视频中唯一的坐标位置；

步骤S5，利用全景拼接算法得到所述航班的坐标位置在全景视频中对应的像素位置，在所述像素位置处显示所述航班的所述标牌信息。

2.根据权利要求1所述的方法，其特征在于，所述步骤S1包括：利用网络模块实时接收A-SMGCS数据，从所述A-SMGCS数据中获取航班的标牌信息和GPS坐标。

3.根据权利要求2所述的方法，其特征在于，所述A-SMGCS数据融合了ADS-B、多点定位、场面监视雷达数据中的一种或多种数据。

4.根据权利要求1所述的方法，其特征在于，所述步骤S4包括：

通过计算所述像素坐标集中的像素坐标和所述位置坐标集中的位置坐标的欧式距离，根据欧式距离将与所述像素坐标最近的位置坐标作为所述航班在所述单路视频中唯一的坐标位置。

5.根据权利要求1所述的方法，其特征在于，所述步骤S4和步骤S5之间还包括：利用所述航班的标牌信息检测同一航班是否存在多个对应的坐标位置，若是，则删除重复出现的坐标位置。

6.根据权利要求1所述的方法，其特征在于，所述步骤S3包括：利用检测跟踪算法对所述单路视频上的飞机作检测和跟踪，得到位置坐标集，其中，所述检测跟踪算法为采用基于统计模型的检测跟踪算法或者基于深度学习的检测跟踪算法。

7.根据权利要求1所述的方法，其特征在于，所述单应变换矩阵的生成步骤包括：在机场场面内选取标定点，获取所述标定点的GPS坐标，并记下所述标定点的像素坐标，计算出所述标定点的像素坐标和GPS坐标之间的变化矩阵作为单应变换矩阵。

8.根据权利要求7所述的方法，其特征在于，所述在机场场面内选取标定点，包括：在机场场面内选取至少四个标定点，且任意三个所述标定点不共线。

9.一种全景视频上的飞机智能监视装置，其特征在于，包括：

航班信息获取模块，用于实时获取航班的标牌信息和GPS坐标；

坐标变换模块，用于通过预先确定的单应变换矩阵将所述GPS坐标转换为单路视频中的像素坐标，得到像素坐标集，其中，所述单应变换矩阵为所述GPS坐标和所述单路视频的像素坐标之间的变换关系；

跟踪模块，用于对所述单路视频上的飞机作检测和跟踪，得到位置坐标集；

融合模块，用于融合所述像素坐标集和所述位置坐标集，得到所述航班在所述单路视频中唯一的坐标位置；

全景坐标变换模块，用于利用全景拼接算法得到所述航班的坐标位置在全景视频中对应的像素位置，在所述像素位置处显示所述航班的所述标牌信息。

10.一种全景视频上的飞机智能监视系统，其特征在于，包括摄像机，跟踪服务器，全景拼接服务器和显示设备；

多台所述摄像机均与所述全景拼接服务器连接，每台所述摄像机连接一台所述跟踪服务器，每台所述跟踪服务器均与所述全景拼接服务器连接，所述全景拼接服务器与显示设备连接；

所述摄像机用于获取实时的视频；

所述跟踪服务器包括跟踪模块，用于对单路视频上的飞机作检测和跟踪，得到位置坐标集；

所述全景拼接服务器包括全景拼接模块，航班信息获取模块，坐标变换模块，融合模块和全景坐标变换模块；

所述全景拼接模块用于拼接多台所述摄像机获取的视频得到全景视频；

所述航班信息获取模块，用于实时获取航班的标牌信息和GPS坐标；

所述坐标变换模块，用于通过预先确定的单应变换矩阵将所述GPS坐标转换为单路视频中的像素坐标，得到像素坐标集，其中，所述单应变换矩阵为所述GPS坐标和所述单路视频的像素坐标之间的变换关系；

所述融合模块，用于融合所述像素坐标集和所述位置坐标集，得到所述航班在所述单路视频中唯一的坐标位置；

所述全景坐标变换模块，用于利用全景拼接算法得到所述航班的坐标位置在全景视频中对应的像素位置，在所述像素位置处显示所述航班的所述标牌信息；

所述显示设备用于显示带标牌信息的全景视频。