[发明专利]车载图像目标检测方法、系统及计算机可读存储介质在审
申请号: | 202210210487.0 | 申请日: | 2022-03-04 |
公开(公告)号: | CN114663831A | 公开(公告)日: | 2022-06-24 |
发明(设计)人: | 樊盛华;瞿涛;郑昱津;陈曦;汪鼎文 | 申请(专利权)人: | 武汉大学 |
主分类号: | G06V20/52 | 分类号: | G06V20/52;G06K9/62;G06N3/04;G06N3/08;G06V10/774;G06V10/82 |
代理公司: | 武汉智权专利代理事务所(特殊普通合伙) 42225 | 代理人: | 张凯 |
地址: | 430072*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 车载 图像 目标 检测 方法 系统 计算机 可读 存储 介质 | ||
1.一种车载图像目标检测方法,其特征在于,包括以下步骤:
使用测试场景相同的数据作为训练集,设定检测的目标类别数,对预设的深度卷积神经网络进行训练;
对训练后的所述深度卷积神经网络进行模型转换与量化处理,生成车载端芯片支持的WK格式文件;
车载端芯片读取、加载所述WK格式文件,并初始化NNIE对象;
读取待检测的目标图像,使用所述NNIE对象对所述目标图像进行转化并将数据转移到所述车载端芯片中进行推理,获得推理的多维向量数组;
对所述多维向量数组进行NMS处理,去除冗余框,得到最终结果。
2.如权利要求1所述的车载图像目标检测方法,其特征在于,所述深度卷积神经网络包括基于darknet53的YOLO V3神经网络模型。
3.如权利要求2所述的车载图像目标检测方法,其特征在于,所述对训练后的所述深度卷积神经网络进行模型转换与量化处理的步骤包括:
将训练好的YOLO V3神经网络模型利用darknet2caffe工具,转换为caffemodel;
利用RuyiStudio工具,对caffemodel进行量化操作,将所述YOLO V3神经网络模型量化为所述车载端芯片支持的8bit的WK格式文件。
4.如权利要求3所述的车载图像目标检测方法,其特征在于,所述对所述多维向量数组进行NMS处理,去除冗余框,得到最终结果的步骤包括:
对所述多维向量数组进行后处理,使用预设的anchor在三种尺度的feature map上进行候选框估计与分数计算,筛选出分数最高的作为选择框,对选择框进行NMS处理,过滤掉多余的框,得到最终的检测框,得到最终结果。
5.如权利要求2所述的车载图像目标检测方法,其特征在于,所述YOLO V3神经网络模型包括YOLOV3-SPP深度网络模型,所述YOLOV3-SPP深度网络模型包括多层卷积计算层和设置在相邻层卷积计算层之间的SPP模块。
6.如权利要求5所述的车载图像目标检测方法,其特征在于,所述卷积计算层至少包括第五层卷积计算层和第六层卷积计算层,所述SPP模块设置在所述第五层卷积计算层和所述第六层卷积计算层之间。
7.如权利要求5所述的车载图像目标检测方法,其特征在于,所述SPP模块包括四个并行的分支模块,所述四个并行的分支模块分别为一个跳跃连接模块和三个最大池化层模块,三个所述最大池化层模块的池化核大小分别为3×3、9×9、13×13。
8.一种车载图像目标检测系统,其特征在于,包括:
训练模块,用于根据设定检测的目标类别数,并使用测试场景相同的数据作为训练集,对预设的深度卷积神经网络进行训练;
转化与量化模块,用于对训练后的所述深度卷积神经网络进行模型转换与量化处理,生成车载端芯片支持的WK格式文件;
车载端芯片,用于读取、加载所述WK格式文件,还用于读取待检测的目标图像;
NNIE对象,用于对所述目标图像进行转化并将数据转移到所述车载端芯片中进行推理,获得推理的多维向量数组;
处理模块,用于对所述多维向量数组进行NMS处理,去除冗余框,得到最终结果。
9.如权利要求8所述的车载图像目标检测系统,其特征在于,所述深度卷积神经网络包括基于darknet53的YOLO V3神经网络模型。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现如权利要求1至7中任一项所述车载图像目标检测方法的所有方法步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉大学,未经武汉大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210210487.0/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序