[发明专利]电梯摄像头安装角度的偏离预警方法及系统

权利要求书

1.一种电梯摄像头安装角度的偏离预警方法，其特征在于，包括以下步骤：

门状态检测，轿厢顶部摄像头采集图像序列，首次运行需要从整张图像中检测出告警提示标签位置，根据其位置划定后续检测的局部区域，之后对后续图像序列分析划定的局部区域，根据标签之间的距离判断门的开合状态，包括开门、开门中、关门与关门中四个状态，每200ms判断一次状态，门状态改变指由关门到开门，反之也是，当门状态由开门变为关门时输出关门信号，其他状态改变不再输出信号；

抓图，利用轿厢顶部摄像头抓取一张电梯图像；

有无人检测，利用yolov3检测模型对所抓取图片进行检测，如果能够检测到图像中的人头和遮挡人体的目标框，则说明有人，反之则无人，当输出无人信号时，进行图像分析流程，当输出有人信号时，则需等待下次电梯关门信号；

图像语义分割，对抓取的图片进行图像语义分割，获得电梯轿厢地面区域；语义分割网络输出这里定义为两类，分别是轿厢地面和背景，通过收集不同电梯轿厢有无杂物时的数据，通过人工标定出轿厢地面所占像素区域，利用标定后的数据对语义分割网络进行训练，完成训练后，获得语义分割网络模型；由于目标输出两类，这里使用sigmod交叉熵损失函数引导训练，安装部署语义分割模型即可实现输入原始图片，输出对应的mask掩模区域；

矩形顶点估计，针对分割得到的电梯轿厢地面区域拟合外接矩形，获得外接矩形的四个顶点位置；

倾斜与覆盖率度量，其中，倾斜度量为根据相机安装位置和外接矩形与图片的位置关系，判定使用哪几个顶点与对应的图像边界来测量，如果相机安装在角落，外接矩形与图像边界相交角度大；如果相机安装在中间，外接矩形与图像边界相交角度小，如果外接矩形顶点在图像边界外边，这定义其到对应图像边界的距离为负，反之为正；对于摄像头安装在轿厢顶部内部的一角，通过轿厢底部左右两个点到图像边界的距离以及轿厢底部下部顶点到图像下部边界的距离，来判断电梯摄像头安装是否合适；对于摄像头安装在轿厢顶部内部一边的中间，需要分别利用底部两个顶点到图像底边的距离，以及顶部两个顶点到图像两边的距离来判断摄像头安装是否合适；覆盖率度量定义分割后轿厢底部面积与外接矩形面积占比，获得摄像头对轿厢底部视角的覆盖情况。

2.如权利要求1所述的电梯摄像头安装角度的偏离预警方法，其特征在于，以上门状态检测、抓图、有无人检测、图像语义分割、矩形顶点估计和倾斜与覆盖率度量步骤每隔一段时间检测一次，根据每次计算结果判断电梯摄像头角度是否发生改变。

3.如权利要求1或2所述的电梯摄像头安装角度的偏离预警方法，其特征在于，对抓取的轿厢内的图片判断是否有人过程中，目标定义为人头和遮挡人体，通过目标检测识别出图片中是否有人头和人体；图像语义分割区域为轿厢底部地面，通过语义分割图片出轿厢地面区域，进而获得其外界矩形，得到四个顶点；门状态识别也利用目标检测的方式，电梯门较高位置会贴有相应告警提示标签，通过检测告警提示标签之间的位置来实现门状态检测。

4.如权利要求3所述的电梯摄像头安装角度的偏离预警方法，其特征在于，语义分割是在像素级别上的分类，属于同一类的像素都要被归为一类，采用U-net的encoder-decoder架构同时借用PSPnet中的spatial pyramid pooling模块组成语义分割网络，采用单模型单尺度的方法，编码部分Encoder输入图片通过4个卷积块，进行4次降采样，然后对16×16的特征图做spatial pyramid pooling操作，将新产生的特征图与之前16×16特征图进行拼接，解码部分Decoder利用1×1的通道卷积，进行通道压缩，利用双线性插值进行上采样，上采样得到特征图与之前32×32特征图进行加和操作，如果之前32×32特征图通道数不一致时，通过1×1的通道卷积调整到一致，后续反复两次这样操作，得到128×128的特征图，之后再做最后一次上采样得到256×256的特征图，通过若干卷积层最终得到2×256×256的预测模板，与标定模板值进行比较，2代表两个类别，分别是轿厢地面和背景。