[发明专利]一种基于YOLO V4和DeepSORT的分车道车辆自动计数方法在审

专利信息
申请号: 202010924261.8 申请日: 2020-09-04
公开(公告)号: CN112101433A 公开(公告)日: 2020-12-18
发明(设计)人: 王晨;周威;陆振波;夏井新 申请(专利权)人: 东南大学
主分类号: G06K9/62 分类号: G06K9/62;G06N3/04;G08G1/065
代理公司: 北京同辉知识产权代理事务所(普通合伙) 11357 代理人: 王依
地址: 210096 江苏省*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 yolo v4 deepsort 车道 车辆 自动 计数 方法
【权利要求书】:

1.一种基于YOLO V4和DeepSORT的分车道车辆自动计数方法,其特征在于,包括以下步骤:

S1.收集YOLO V4训练数据集和车辆重识别数据集与数据增强;

S2.使用Pytorch深度学习框架搭建YOLO V4模型并进行训练;

S3.搭建DeepSORT目标追踪模型,使车辆重识别数据训练其车辆特征提取网络,并以YOLO V4在每帧的检测框为输入,完成YOLO V4+DeepSORT车辆追踪模型的搭建;

S4.使用YOLO V4+DeepSORT模型进行车辆的追踪并提取每辆车运行轨迹,搭建轨迹记录文件并存储每辆车的运行轨迹信息;

S5.使用DBSCAN聚类算法对轨迹数据的终点坐标进行聚类,将聚类簇与车道信息进行关联;

S6.根据轨迹数据的变化规律以及轨迹和聚类簇对应关系,实现车辆的分车道计数功能。

2.根据权利要求1所述的一种基于YOLO V4和DeepSORT的分车道车辆自动计数方法,其特征在于,所述S1中数据集和数据增强方式包括:

S11.YOLO V4训练数据集的收集与数据增强:收集PASCAL VOC和COCO数据集中小轿车、卡车、公交车和非机动车标注图片和标注信息,并手动标注2000张不同视角监控视频帧中的车辆类别和位置信息,采用的数据增强方式是随机裁剪,随机翻转,随机调整饱和度、色调、亮度的图片参数,马赛克数据增强,混合裁剪数据增强,图片数据统一缩放到608x608分辨率;

S12.车辆重识别数据集收集与数据增强:收集VeRi数据集,训练DeepSORT中车辆特征提取模型,采用的数据增强方式是随机裁剪。

3.根据权利要求1所述的一种基于YOLO V4和DeepSORT的分车道车辆自动计数方法,其特征在于,所述S2中搭建和训练YOLO V4的过程如下:

S21.YOLO V4由以下部分组成:一、特征提取网络CSPDarknet53;二、多尺度特征融合网络PAN和空间金字塔池化SPP;三、类似YOLO V3模型用于分类和检测框回归的头网络;使用Pytorch深度学习框架依次搭建CSPDarknet53特征提取网络,将其输出的三个不同宽高特征图,通过SSP+PAN进行特征融合,最后将特征融合后获得的三个不同宽高特征图一次性通过1x1卷积神经网络,获得YOLO V4的输出结果;

S22.在S21搭建完毕的YOLO V4的基础上,根据网络的输出和数据集的真实标签设定损失函数进行训练,损失函数设定完毕后,使用反向传播算法更新YOLO V4网络参数;

S23.训练过程中YOLO V4超参数设定为:选择Adam优化器,初始学习率设定为1e-5,数据集训练轮次设定为50,批量大小设定为16。

4.根据权利要求1所述的一种基于YOLO V4和DeepSORT的分车道车辆自动计数方法,其特征在于,所述S3中DeepSORT目标追踪模型的搭建以及训练过程具体包括:

S31.以YOLO v4输出的候选框大小和位置信息为输入,搭建DeepSORT的三大组成部分:(1)卡尔曼滤波算法做位置预测器,包括两个阶段:

(1.1)预测阶段:当目标移动时,根据目标在上一帧的速度和位置信息,预测出目标在当前帧的速度和位置的信息;

(1.2)更新阶段,根据算法捕捉的预测值以及观测值,通过两个正态分布的线性加权,得到当前系统的状态;

(2)小型残差网络做特征提取器的训练和测试,使用ReID数据集训练该小型残差网络,使用交叉熵作为训练损失函数,训练轮次设定为50轮次,优化器选择Adam优化器,初始学习率设定为0.0001,训练完毕后,将YOLO V4检测框中的车辆图片缩放至112像素×112像素作为输入,获得128维的低维向量用于后面相似度计算;

(3)匈牙利算法做特征匹配器,使用余弦距离计算检测框向量化后的近似度后,利用匈牙利算法对前后两帧中检测框内车辆进行匹配,匹配度高的被认定为同一车辆,分配统一的ID编号。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东南大学,未经东南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010924261.8/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top