[发明专利]一种基于角度自适应融合的目标检测方法及系统在审
申请号: | 202210343569.2 | 申请日: | 2022-04-02 |
公开(公告)号: | CN114743015A | 公开(公告)日: | 2022-07-12 |
发明(设计)人: | 胡建国;张月;黎昱彤;杨学彬;夏邦;肖辉敏;卢星宇 | 申请(专利权)人: | 中山大学 |
主分类号: | G06V10/40 | 分类号: | G06V10/40;G06V10/82;G06V10/80;G06V10/764;G06V10/77;G06K9/62;G06N3/04 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 梁嘉琦 |
地址: | 510275 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 角度 自适应 融合 目标 检测 方法 系统 | ||
1.一种基于角度自适应融合的目标检测方法,其特征在于,包括:
通过基干网络对输入图像进行特征提取,并从不同阶段的卷积层输出结果中输出对应的第一特征图;
通过特征金字塔网络对所述原始特征图进行横向连接降维和自上而下的融合处理,得到第二特征图;
通过角度自适应融合金字塔网络,对所述第二特征图进行目标多角度特征提取及融合处理,得到第三特征图;
通过检测器头部网络对所述第三特征图进行分类和回归,输出目标检测结果。
2.根据权利要求1所述的一种基于角度自适应融合的目标检测方法,其特征在于,所述通过角度自适应融合金字塔网络,对所述第二特征图进行目标多角度特征提取及融合处理,得到第三特征图,包括:
通过多角度特征提取模块对输入的所述第二特征图进行处理,得到多张不同角度方向信息且保留浅层细节的第四特征图;
通过多特征融合模块对所述第四特征图进行加权融合,获得最终角度自适应融合的第三特征图。
3.根据权利要求2所述的一种基于角度自适应融合的目标检测方法,其特征在于,所述通过多角度特征提取模块对输入的所述第二特征图进行处理,得到多张不同角度方向信息且保留浅层细节的第四特征图,包括:
采用3×3的卷积核对所述第二特征图进行旋转卷积处理,将权重参数对应的位置按旋转角度进行逆时针内旋,输出第五特征图;
对所述第五特征图进行自下而上的连接融合,得到第四特征图。
4.根据权利要求3所述的一种基于角度自适应融合的目标检测方法,其特征在于,所述采用3×3的卷积核对所述第二特征图进行旋转卷积处理,将权重参数对应的位置按旋转角度进行逆时针内旋,输出第五特征图,具体为:
配置四条角度偏移为0°、90°、180°、270°的偏移卷积支路,用四条所述偏移卷积支路分别提取输入特征图不同方向的特征信息,输出第五特征图。
5.根据权利要求4所述的一种基于角度自适应融合的目标检测方法,其特征在于,所述配置四条角度偏移为0°、90°、180°、270°的偏移卷积支路,用四条所述偏移卷积支路分别提取输入特征图不同方向的特征信息,输出第五特征图,包括:
以一条卷积核大小为3×3的卷积支路为基准支路,将所述基准支路作为角度偏移为0°的偏移卷积支路;
对所述基准支路的卷积核分别进行90°、180°、270°旋转,得到三条特定角度偏移的偏移卷积支路,其中,四条所述偏移卷积支路的权重互相共享;
通过各个卷积支路输出第五特征图。
6.根据权利要求3所述的一种基于角度自适应融合的目标检测方法,其特征在于,所述对所述第五特征图进行自下而上的连接融合,得到第四特征图,包括:
在相邻特征图同一角度偏移卷积的结果之间构建自下而上的连接融合通路;
对于最低层的特征图,直接输出为第四特征图;
对于非最低层的特征图,先将输入的低层特征图下采样至与输入的高层特征图的尺寸相同,将下采样后的特征图与输入的高层特征图按通道维度进行拼接,得到拼接后的特征图,使用一个1×1的卷积层对拼接后的特征图进行通道降维,使融合后的特征图,输出为第四特征图;
其中,所述下采样为3×3卷积操作。
7.根据权利要求2所述的一种基于角度自适应融合的目标检测方法,其特征在于,所述通过多特征融合模块对所述第四特征图进行加权融合,获得最终角度自适应融合的第三特征图,包括:
从所述第四特征图中获取三个特征图集,其中,每个特征图集内包含四张大小相同但具有目标不同角度方向信息的特征图;并对每个特征图集进行以下操作:
将不同的特征图进行逐像素相加,得到特征图的融合结果;
对融合后的特征图进行全局平局池化操作,生成大小为1×1×C的第一特征向量;其中,每个第一特征向量代表每个通道上的全局信息;
将所述第一特征向量通过一个全连接层生成第二特征向量;
根据所述第二特征向量,计算不同输入特征图的通道加权值;
根据所述通道加权值对特征图集内的特征图进行自适应加权融合,输出第三特征图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210343569.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:空调和环境参数控制方法
- 下一篇:一种滑撬