[发明专利]一种基于手势自动检测的加油区服务质量检测系统

权利要求书

1.一种基于手势自动检测的加油区服务质量检测系统，在建立的获取系统维护的相应生命周期队列基础上，加油区图像采集摄像头CJ获取的监控视频流经加油区关键对象检测器GJ、加油区人员手势识别及合规性判断器PD，对特定加油区域内的关键对象的工作状态和工作人员手势的合规性做出判断，最后通过违规事件报警器BJ推出判断结果，包括如下单元操作：

1)加油区图像采集摄像头CJ：用于采集加油站特定加油区域的视频和图像信息，包括但不限于车辆、设备、工作人员以及加油流程的实时监控，

并向系统传递编码的实时视频流，

2)加油区关键对象检测器GJ：接受1)所获加油区图像采集摄像头CJ视频流后，分帧检测出现在特定加油区域内的加油区的车辆、工作人员、油枪以及胶管关键对象，获取关键对象在视频画面中的相对位置，依据得到的位置信息和特征信息实现加油区关键对象的实时跟踪；

3)加油区人员手势识别及合规性判断器PD：接受2)所获加油区关键对象检测器GJ信息后，基于已预设定的标准化加油流程，识别加油区人员的手势；基于加油区操作规范要求，进行人员服务合规性判断；

4)违规事件报警器BJ：接受3)所获加油区人员手势识别及合规性判断器PD信息后，基于加油区人员手势识别及合规性判断器PD输出的人员、加油步骤、违规事项、违规等级信息，生成违规事件，并推送违规事件至加油区管理中心。

2.根据权利要求1所述的一种基于手势自动检测的加油区服务质量检测系统，其特征在于，所述加油区关键对象检测器GJ的具体方法步骤为：

1)对于接入的实时监控视频流，每隔固定时间从视频流中抽取视频帧，送入目标检测网络；

2)使用深度卷积网络对实时视频帧进行车辆、工作人员、油枪以及胶管进行目标检测，获取每个目标的边界框。

3.根据权利要求1或2所述的基于手势自动检测的加油区服务质量检测系统，其特征在于，所述加油区关键对象检测器GJ置有系统维护的相应生命周期队列，即系统对于每类关键目标维护一个基于视频时序的生命周期队列；在得到当前视频帧中每个关键对象的类别和位置信息后，将每个关键对象与对应类别生命周期队列中的对象进行特征距离度量，当度量值小于固定阈值时，则认为当前对象与队列对象属同一对象，更新队列中该对象的位置信息；反之，认为当前对象与队列对象属不同对象，则在队列中新建实例存储对象的位置信息；其中，特征距离度量方式为两对象边界框中心点坐标的欧式距离与两对象直方图特征的和。

4.根据权利要求1所述的基于手势自动检测的加油区服务质量检测系统，其特征在于，所述加油区人员手势识别及合规性判断器PD具体判断内容包括：

1)按照车辆进入加油区域后，工作人员需要引导车辆停靠在规定的停车区域，标准引导手势为一手臂垂直向上伸直，另一手臂水平弯曲的手势规范，进行人员引导车辆手势识别及合规性判断；

2)按照在车辆开始加油前，工作人员需要向顾客示意加油机的油枪已回零，

标准回零手势为一手持油枪，另一手臂斜向上伸直指向加油机指示表的手势规范，进行加油前工作人员油枪回零手势识别及合规性判断；

3)按照在对车辆进行加油的过程中，工作人员需要双手持油枪进行加油操作的手势规范，进行加油时工作人员持油枪手势识别及合规性判断；

4)按照在车辆加油完成后，工作人员需要将油枪胶环形管盘放整齐挂在加油机指定位置的行为规范，进行加油后油胶管摆放识别合规性判断。