[发明专利]一种基于视觉和CNN的小车自动驾驶方法

权利要求书

1.一种基于视觉和CNN的小车自动驾驶方法，其特征在于，包括以下步骤：

A、在Unity Hub中模拟构建虚拟跑道和小车模型，对虚拟跑道模拟构建白天和黑夜两个跑道场景，在Unity Hub中进行多次小车模型自动驾驶仿真，得到多个自动驾驶参数组，基于这些自动驾驶参数组构建自动驾驶数据集；

B、构建神经网格结构，神经网络结构包括依次连接的输入层、多个卷积层、展平层、全连接层、输出层；所述的输入层输入的为跑道场景的图片归一化浮点数和自动驾驶数据，输出的是修正后的自动驾驶数据；

C、向神经网络中输入白天和黑夜两个跑道场景的图片归一化浮点数、以及自动驾驶数据集的各个数据，对神经网络进行训练，得到训练好的神经网络；

D、获取需要自动行驶的黑白跑道图片，进行二值化处理，然后转换为归一化浮点数后，输入Pandas和python的os数据获取包中获得初始自动驾驶参数组，将跑道图片的归一化浮点数和初始自动驾驶参数组输入神经网络，获得自动驾驶参数组的最优解；将最优解输入小车实物的树莓派主控板模块，由树莓派主控板模块控制小车在跑道自动驾驶。

2.如权利要求1所述的基于视觉和CNN的小车自动驾驶方法，其特征在于：

所述的小车实物上设有包括树莓派主控板模块、电机驱动模块、摄像头模块、超声波传感器、电源模块、四组直流减速电机；所述的电源模块负责各个模块供电；所述的四组直流减速电机分别设有小车的前后轮处，驱动各个轮子转动；

所述的电机驱动模块、摄像头模块和超声波传感器均与树莓派主控板模块连接；所述的电机驱动模块与直流减速电机模块连接；

所述的摄像头模块用于将拍摄到视频画面和图片发送至树莓派主控板模块；

所述的超声波传感器用于将检测到小车与障碍物之间的距离信息发送至树莓派主控板模块，树莓派主控板模块根据检测结果，控制电机驱动模块使得小车对遇到障碍物进行避障；

所述的树莓派主控板模块根据接收的检测数据及视频画面和图片，计算出自动驾驶数据组，控制电机驱动模块工作，实现小车的自动驾驶。

3.如权利要求2所述的基于视觉和CNN的小车自动驾驶方法，其特征在于：所述的自动驾驶数据组包括小车行驶过程中的加速度、速度、转向速度、摄像头模块拍摄的每一帧图片小车的偏转角度，其中偏转角度的浮点数需要乘以设置好的偏置参数。

4.如权利要求1所述的基于视觉和CNN的小车自动驾驶方法，其特征在于：

所述的步骤B中构建的神经网络的卷积层设有5层，其中：

第一个卷积层对输入的图片进行步长为2*2和3*3的卷积和relu激活函数；

第二个卷积层对输入的图片进行步长为2*2和3*3的卷积和relu激活函数；

第三个卷积层对输入的图片进行步长为2*2和3*3的卷积和relu激活函数；

第四个卷积层对输入的图片进行5*5的卷积和relu激活函数；

第五个卷积层对输入的图片进行3*3的卷积和relu激活函数。

5.如权利要求1所述的基于视觉和CNN的小车自动驾驶方法，其特征在于：

还包括行驶过程中车道线检测修正过程，保证小车沿跑道中线行驶，包括以下步骤：

取步骤D中准备自动行驶的跑道图片，经过HSV色泽转换空间把跑道分为了黑白图片，其中跑道中心区域为白色，其它两边为黑色，通过5X5的高斯滤波消除跑道黑白图片的噪音点，通过OPENCV的函数进行黑色车道轮廓的提取，得到跑道中心点的位置；

在行驶过程中对小车偏离跑道中心点的实际误差通过PID控制算法计算进行控制，以防止小车在快速运动的过程中冲出跑道；为了预防PID没办法完全消除的稳态误差，预防PID不能完全消除小车冲出跑道而不能及时回正的可能性，将跑道图片分割成三份，分别是跑道中心设为白色区域和跑道内中心左右两侧设为黑色区域、跑道外两侧设为白色区域，设定小车摄像头模块拍摄视野ROI区域两侧边界为跑道内中心左右两侧黑色区域，若小车冲出跑道，ROI区域任一侧边界出现白色，则代表小车冲出跑道，树莓派主控板模块控制电机驱动模块调节小车方向回正。