[发明专利]基于通道分离卷积的路侧图像多尺度行人快速检测方法有效
申请号: | 202010980622.0 | 申请日: | 2020-09-17 |
公开(公告)号: | CN112131996B | 公开(公告)日: | 2022-04-29 |
发明(设计)人: | 李旭;朱建潇;赵琬婷;徐启敏 | 申请(专利权)人: | 东南大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/46;G06N3/04;G06N3/08 |
代理公司: | 南京众联专利代理有限公司 32206 | 代理人: | 张天哲 |
地址: | 210096 *** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 通道 分离 卷积 图像 尺度 行人 快速 检测 方法 | ||
1.基于通道分离卷积的路侧图像多尺度行人快速检测方法,其特征在于,包含以下步骤:
(1)构建包含不同尺度行人的路侧图像数据集;首先,设定用于尺度分类的两种行人像素高度阈值H1、H2;其次,采集并标注天桥、龙门架的典型智能路侧场景下含多尺度行人的图片样本Q张,样本分辨率为1920×1080,由此构成路侧行人检测的原始数据集O1;再次,根据行人像素高度h及高度阈值H1、H2,计算出行人所属尺度类别Class;具体计算公式如下:
在上述公式中,S指代小尺度目标,M指代中尺度目标,L指代大尺度目标;
紧接着,利用轴向对称、随机切片、随机放缩、亮度调整的数据增强方式扩充O1,由此形成增强数据集O2;最后,划分O2为训练数据集W、验证数据集V、测试数据集Z用于后续的算法训练、模型选取和精度测试;
(2)进行多尺度行人训练数据的尺寸下调、锚点计算的预处理操作;
(3)搭建基于通道分离卷积的改进型Faster-RCNN多尺度行人快速检测网络架构;首先,利用通道分离卷积搭建多尺度行人目标特征提取模块;其次,引入Faster-RCNN模型中的候选区域生成模块,得到粗粒度的行人目标位置;再次,设计尺寸不敏感的感兴趣区域对齐模块,获取多尺度下行人目标的精准位置;最终,集成上述的特征提取、候选区域生成、感兴趣区域对齐三种模块,形成基于通道分离卷积的改进型Faster-RCNN多尺度行人快速检测网络架构;该部分包含如下子步骤:
子步骤1:设计一种基于通道分离卷积的多尺度行人特征提取模块,具体包含:
子步骤1.1:设定特征提取层深度为13,每一层f的卷积核总体数量Kf;
子步骤1.2:设定特征提取层的每层相应卷积操作方式;首先,设定下采样操作触发条件为Kf=2Kf-1,其中,13≥f≥2,非下采样操作触发条件为Kf=Kf-1,其中13≥f≥2,其次,设定下采样和非下采样操作的通道分离卷积卷积核个数;根据训练数据集W中的大中小三级尺度目标个数TL、TM、TS,划分卷积通道卷积核个数,即大尺度、中尺度和小尺度通道卷积核个数分别为不同尺度通道卷积核个数计算公式如下:
其中,floor(·)操作是向下取整;
子步骤1.3:设定通道分离卷积的下采样和非下采样操作流程;
子步骤1.4:设定通道聚合卷积操作,将子步骤1.3中生成的差异化特征图以通道维度进行特征图的叠加,经过3×3的特征变化之后,聚合形成不同尺度融合后的跨尺度特征图;
子步骤2:引入Faster-RCNN模型中的候选区域生成模块;
子步骤3:设计尺寸不敏感的感兴趣区域对齐模块;首先根据子步骤2中候选区域生成模块生成的粗粒度目标边界位置,根据生成目标的锚点尺寸类别G选取特定特征提取模块层级f,如11、12或13层,进行目标的感兴趣区域对齐ROIAlignf,计算公式如下:
子步骤4:集合子步骤1中设定的特征提取模块、子步骤2中设定的候选区域生成模块、子步骤3中设定的感兴趣区域对齐模块,形成多尺度行人快速检测网络;
(4)定义多尺度行人快速检测网络损失函数;损失函数losstotal由面向行人存在性的二分类交叉熵损失函数lossBCE和面向不同尺度行人的位置回归损失函数lossML构成;其中,lossBCE是目标存在性与真实目标存在性的二分类交叉熵损失,lossML是目标位置与真实位置的交并比和边界框中心位置之和,整个网络损失函数的计算公式如下:
losstotal=α×lossBCE+(1-α)×lossML#(6)
其中,α为两个部分之间的平衡因子,通过在验证数据集V中选取最高识别准确率下的参数值作为该平衡因子最终值;
(5)训练获得最佳多尺度行人快速检测网络模型;
(6)用步骤5中输出的最佳网络模型进行路侧图像的多尺度行人检测。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东南大学,未经东南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010980622.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种机床
- 下一篇:一种植物纤维类布制品的脱酸方法