[发明专利]一种基于区域候选网络的目标检测方法及系统有效

专利信息
申请号: 201910519737.7 申请日: 2019-06-17
公开(公告)号: CN110348435B 公开(公告)日: 2022-06-07
发明(设计)人: 袁志勇;林啓峰;赵俭辉 申请(专利权)人: 武汉大学
主分类号: G06V10/25 分类号: G06V10/25;G06N3/04;G06T7/11;G06T7/136;G06T7/194
代理公司: 武汉科皓知识产权代理事务所(特殊普通合伙) 42222 代理人: 魏波
地址: 430072 湖*** 国省代码: 湖北;42
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 区域 候选 网络 目标 检测 方法 系统
【权利要求书】:

1.一种基于区域候选网络的目标检测方法,其特征在于,包括以下步骤:

步骤1:采集遥感数据集,并划分为训练集、验证集和测试集;

步骤2:生成包含感兴趣对象的裁剪区域;

步骤2的具体实现包括以下子步骤:

步骤2.1:通过弱语义特征抽取网络生成只考虑前景和背景语义及定位功能的弱语义特征,同时基于弱语义特征来进行区域假设;

在弱语义特征抽取网络中,通过削减每个卷积层的通道数来简化特征表达能力,其中弱化的特征图仅保留对感兴趣对象ROI整体定位能力及边界锁定能力,以及区分前景和背景语义,而不考虑ROI所属的具体类别语义;每个卷积层通道数减少到传统特征抽取网络的相应地,弱语义特征抽取网络的损失函数定义为:

其中,预测边界框的损失函数与目标检测网络Faster-RCNN一样,对象分类的损失函数定义为前景损失函数Lfore,pi是预测第i个建议区域是前景的可能性,如果对应的i个建议区域是前景,则为1,否则设为0,Nfore为预测类别数量,Lreg表示为边界损失函数,其中ti表示边界元素的预测值,表示边界元素的真实值;Nreg表示边界元素,包括中心点坐标(x,y)和宽高(w,h);λ用于控制两个损失的比例;

步骤2.2:生成裁剪区域;

通过弱语义RPN网络来获取每个预测对象的位置与边界,筛选合并邻近预测区域来生成感兴趣的裁剪区域,以减少裁剪区域数量,并进行目标检测实现对大尺度图像的整体检测;

所述进行目标检测实现对大尺度图像的整体检测,具体实现包括以下子步骤:

步骤2.2.1输入弱语义特征抽取网络输出的裁剪区域B={b1,b2,...,bn},一个范围阈值τ;

步骤2.2.2:基于范围阈值τ,将整个B的设置分为两个子集Bs,Bl;把预测尺度大于τ的预测区域归入子集Bl中,把预测尺度小于τ的归于子集Bs中;

步骤2.2.3:把Bl中所有大于τ的预测区域,通过进行空间相邻的区域合并,但合并后的区域尺度的缩放尺度不能超过计算机的最大处理尺度,来生成预裁剪区域;迭代该操作,最终生成大预测尺度剪裁区域集CRl

把Bs中所有小于τ的预测区域,通过进行空间相邻的区域合并,但合并后的区域尺度不能超过计算机的最大处理尺度,最终生成预裁剪区域;迭代该操作,最终生成小预测尺度剪裁区域集CRs

步骤3:执行每个剪裁区域的对象检测;

步骤4:合并多个裁剪区域的检测结果,并去除冗余检测结果,得到最后检测结果。

2.根据权利要求1所述的基于区域候选网络的目标检测方法,其特征在于,步骤3的具体实现过程是:针对裁剪区域网络CRPN输出两个不同尺度的剪裁区域CRs和CRl,分别进行不同的数据预处理以训练目标检测网络;

对于CRs中的小预测尺度裁剪区域,首先根据每个裁剪区域获取裁剪后的子图像和对应的真实标签,然后对目标检测网络进行训练;

对于CRl中的大预测尺度裁剪区域,将裁剪后的子图像缩小,并设定尺度阈值以过滤掉尺度小于阈值的真实标签;然后对目标检测网络进行训练。

3.根据权利要求1所述的基于区域候选网络的目标检测方法,其特征在于:步骤4中,通过NMS算法去除冗余,以得到最后的大尺度图像检测结果。

4.一种基于区域候选网络的目标检测系统,其特征在于:包括遥感数据集采集划分模块、裁剪模块、对象检测模块、检测结果生成模块;

所述遥感数据集采集划分模块,用于采集遥感数据集,并划分为训练集、验证集和测试集;

所述裁剪模块,用于生成包含感兴趣对象的裁剪区域;具体实现包括以下子模块:

子模块2.1,用于通过弱语义特征抽取网络生成只考虑前景和背景语义及定位功能的弱语义特征,同时基于弱语义特征来进行区域假设;

在弱语义特征抽取网络中,通过削减每个卷积层的通道数来简化特征表达能力,其中弱化的特征图仅保留对感兴趣对象ROI整体定位能力及边界锁定能力,以及区分前景和背景语义,而不考虑ROI所属的具体类别语义;每个卷积层通道数减少到传统特征抽取网络的相应地,弱语义特征抽取网络的损失函数定义为:

其中,预测边界框的损失函数与目标检测网络Faster-RCNN一样,对象分类的损失函数定义为前景损失函数Lfore,pi是预测第i个建议区域是前景的可能性,如果对应的i个建议区域是前景,则为1,否则设为0,Nfore为预测类别数量,Lreg表示为边界损失函数,其中ti表示边界元素的预测值,表示边界元素的真实值;Nreg表示边界元素,包括中心点坐标(x,y)和宽高(w,h);λ用于控制两个损失的比例;

子模块2.2,用于生成裁剪区域;

通过弱语义RPN网络来获取每个预测对象的位置与边界,筛选合并邻近预测区域来生成感兴趣的裁剪区域,以减少裁剪区域数量,并进行目标检测实现对大尺度图像的整体检测;

所述进行目标检测实现对大尺度图像的整体检测,具体实现包括以下子模块:

子模块2.2.1,用于输入弱语义特征抽取网络输出的裁剪区域B={b1,b2,...,bn},一个范围阈值τ;

子模块2.2.2,用于基于范围阈值τ,将整个B的设置分为两个子集Bs,Bl;把预测尺度大于τ的预测区域归入子集Bl中,把预测尺度小于τ的归于子集Bs中;

子模块2.2.3,用于把Bl中所有大于τ的预测区域,通过进行空间相邻的区域合并,但合并后的区域尺度的缩放尺度不能超过计算机的最大处理尺度,来生成预裁剪区域;迭代该操作,最终生成大预测尺度剪裁区域集CRl

把Bs中所有小于τ的预测区域,通过进行空间相邻的区域合并,但合并后的区域尺度不能超过计算机的最大处理尺度,最终生成预裁剪区域;迭代该操作,最终生成小预测尺度剪裁区域集CRs

所述对象检测模块,用于执行每个剪裁区域的对象检测;

所述检测结果生成模块,用于合并多个裁剪区域的检测结果,并去除冗余检测结果,得到最后检测结果。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉大学,未经武汉大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910519737.7/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top