[发明专利]一种基于视频动作识别的民用机场地面保障状态识别方法

说明书

本发明涉及一种计算机视觉的应用方法，尤其是一种基于视频动作识别的民用机场地面保障状态识别方法，包括：步骤A.监测机场停机坪区域，获取停机坪区域的视频图像数据，从所述视频图像数据中检测特定目标；步骤B.以检测到特定目标之刻为起点，根据所述特定目标的相应先验时长经滑窗选取视频段；步骤C.将所述视频段作为动作识别网络的输入，获得所述特定目标的动作在所述视频段内的起始帧和结束帧，将起始帧和结束帧转换为起始时间和终止时间进行显示。本发明的民用机场地面保障状态识别方法用于准确的识别航班地面保障的多个状态。

技术领域

本发明涉及一种计算机视觉的应用方法，尤其是一种基于视频动作识别的民用机场地面保障状态识别方法。

背景技术

现有的航班地面保障状态的识别，大多是基于图像的目标检测方法，其航班地面保障系统每次仅根据监控设备获取的单张视频截图进行目标检测，很难获取相同目标的时序信息，对于航班地面保障状态的判断依据不够充分，导致对地面保障状态的识别存在精准性不足的缺陷，无法准确判断目标当前所处的状态。同时，以往的基于图像的目标检测方法未对上下客梯车人员的身份做出分类，以及乘客上下的方向做出详细的判断。

发明内容

本发明的目的在于准确的识别航班地面保障的多个状态。

为实现上述目的，本发明的技术方案为：

一种基于视频动作识别的民用机场地面保障状态识别方法，包括：

步骤A.监测机场停机坪区域，获取停机坪区域的视频图像数据，从所述视频图像数据中检测特定目标；

步骤B.以检测到特定目标之刻为起点，根据所述特定目标的相应先验时长经滑窗选取视频段；

步骤C.将所述视频段作为动作识别网络的输入，获得所述特定目标的动作在所述视频段内的起始帧和结束帧，将起始帧和结束帧转换为起始时间和终止时间进行显示。

作为一种实施方案，所述动作检测网络为动作识别卷积神经网络，其输入视频图像，输出为视频中包含的动作得分和动作的起始帧和结束帧，通过为录制视频中每个动作发生的时间段设置标签，以带标签视频为训练数据，训练后可获得能够识别输入视频段内发生的不同动作，并输出动作起始帧和结束帧的所述动作识别卷积神经网络；

所述步骤C中，当第一次出现所述特定目标的动作得分高于设定阈值的视频段时，采纳该视频段输出的动作起始帧作为所述起始帧，当得分由高于设定阈值转至低于设定阈值时，采纳上一视频段输入动作检测网络得到的结束帧作为所述结束帧。

作为另一种实施方案，所述动作检测网络为视频动作识别网络，其输入为固定长度的视频图像，输出为视频图像的动作得分；

所述步骤C中，将动作得分结合所述滑窗从而获得视频帧-动作得分曲线，以视频帧-动作得分曲线与设定阈值D的前后交点分别作为所述起始帧和所述结束帧。

进一步地，根据视频图像中动作与目标动作的相似度，计算出所述动作得分。

进一步地，所述特定目标包括飞机、飞机头、飞机车轮、客梯车、传送带车、货舱门、货车、升降车、餐车、拖头车、加油车、牵引车中的一者或多者；

所述民用机场地面保障状态识别方法包括航班入机位状态判断、航班上轮档状态判断、客梯车对接状态判断、客舱门/货舱门开启状态判断、加油车对接状态判断、加油车离开状态判断、餐车/货车/垃圾车配送状态判断、关客舱/货舱门状态识别、牵引车对接状态判断、航班撤轮档状态判断、航班推出状态判断，其中，航班上轮档状态判断、客梯车对接状态判断、加油车对接状态判断、餐车/货车/垃圾车配送状态判断、牵引车对接状态判断于航班入机位状态判断之后执行且以所述步骤A、步骤B、步骤C实施。