[发明专利]一种基于图像识别的道路事故实时预警系统、方法和设备

权利要求书

1.一种基于图像识别的道路事故实时预警方法，其特征在于，所述方法包括：

获取当前车辆所在预设路段内多个监控设备发送的监控视频，并分别获取所述监控设备与所述当前车辆之间的可用路段；

分别识别所述多个监控设备发送的监控视频内的车辆信息、行人信息以及路况信息；

根据所述车辆信息、所述路况信息以及所述可用路段，预测预设时间之内预设路段内车辆对应的移动轨迹；

根据所述行人信息、所述路况信息以及所述可用路段，预测所述预设时间之内所述预设路段内行人对应的移动轨迹；

根据所述车辆对应的移动轨迹，以及所述当前车辆的移动轨迹，预测所述预设时间内所述预设路段内是否发生事故；

根据所述行人对应的移动轨迹，以及所述当前车辆的移动轨迹，预测所述预设时间内所述预设路段内是否发生事故；

若所述预设时间内所述预设路段内发生事故，则执行规避驾驶策略；

其中，所述分别识别所述多个监控设备发送的监控视频内的车辆信息、行人信息以及路况信息包括：

识别所述监控视频包含的多个视频帧内所有车辆的车辆信息，所述车辆信息包括所述所有车辆的行驶方向、行驶速度以及突发驾驶动作；所述突发驾驶动作包括车辆异常停止和车辆异常转向；

识别所述多个视频帧内所有行人的行人信息，所述行人信息包括所述所有行人的行走方向、行走速度和突发动作；所述突发动作包括行人异常加速和异常停止；

识别所述多个视频帧内道路的路况信息，所述路况信息包括道路障碍物和道路边界；

其中，分别识别多个视频帧内用于描述车身图像的所有像素点；

对于识别出的多个车辆中的任意一个，执行以下操作：

识别该车辆的行驶方向，该过程为：

分别识别该车辆的车身图像在各个视频帧的位置，并根据该车身图像中多个像素点的分别在各个视频帧的坐标，得到该车辆的位移；

获取该车辆行进道路上的多个连贯并且沿道路纵向直线排列的像素点，并设置该多个像素点所组成的直线图像为基准线条；

根据该车辆的位移和所述基准线条判断该车辆的行驶方向，包括：

若所述车辆的位移与所述基准线条的夹角为0，则该车辆的行驶方向为直线行驶；

若所述车辆的位移与所述基准线条的夹角不为0，则该车辆的行驶方向为转向，并根据该夹角的变化方向确定该车辆的转向方向；

其中，该车身图像中的多个像素点是该车辆图像中的特定像素点，包括车辆顶部或者车辆车窗上的像素点；

所述根据所述车辆信息、所述路况信息以及所述可用路段，预测预设时间之内所述预设路段内车辆对应的移动轨迹包括：

根据行驶速度、行驶方向、突发驾驶动作、路况信息以及可用路段，预测车辆在预设时间之内的移动轨迹，包括：

对于所有监控视频中任意一个监控视频所包含的任意一个车辆，执行以下操作：

识别该车辆的车牌图像，当车辆未发生突发驾驶动作时，在该监控视频内所能监控的道路范围内，根据路况信息获取该车辆在道路边界指示的道路内按照规避道路障碍物行驶时的至少一个可行驶轨迹；

根据车辆的行驶速度和行驶方向，从该至少一个可行驶轨迹中预测车辆的行驶轨迹，该预测过程是通过判定车辆在行驶方向上以行驶速度行驶时所有可能的轨迹与该至少一个可行驶轨迹的重合度最高的可行驶轨迹；

从其余监控视频中获取包含该车牌图像的监控视频，并获取包含该车辆图像中该车辆的行驶轨迹；

将上述所有行驶轨迹，按照发送该监控视频的所有监控设备所在地理位置，在该所有监控设备所在地理位置的可用路段上按照行驶轨迹的方向进行组合，生成该车辆的移动轨迹；

所述根据所述行人信息、所述路况信息以及所述可用路段，预测预设时间之内所述预设路段内行人对应的移动轨迹包括：

根据行走方向、行走速度、突发动作、可用路段以及路况信息，预测行人在预设时间之内的移动轨迹，包括：

对所有监控视频中任意一个监控视频所包含的任意一个行人，执行以下操作：

识别该行人的图像，当行人未发生突发动作时，根据行人的行走速度和行走方向，从至少一个可行走轨迹中预测行人的行走轨迹，该预测过程是通过判定行人在行走方向上以行走速度行走时所有可能的轨迹与该至少一个可行走轨迹的重合度最高的可行走轨迹；

从其余监控视频中获取包含该行人的图像的监控视频，并获取包含该行人的图像中该行人的行走轨迹；

将上述所有行走轨迹，按照发送该监控视频的所有监控设备所在地理位置，在该所有监控设备所在地理位置的可用路段上按照行走轨迹的方向进行组合，生成该行人的移动轨迹；

当行人发生突发动作时，且突发动作为异常停止，则预测行人在预设时间之内无移动轨迹；

当行人发生突发动作时，且突发动作为异常转向，行人的行走速度不为0，则：

根据行人转向后的方向为行走方向，计算行人的移动轨迹；其中，该计算过程与当行人未发生突发动作时的过程相同。