[发明专利]一种基于两级注意力机制的行人检测方法及系统有效
申请号: | 201910260572.6 | 申请日: | 2019-04-02 |
公开(公告)号: | CN110135243B | 公开(公告)日: | 2021-03-19 |
发明(设计)人: | 张重阳;罗艳 | 申请(专利权)人: | 上海交通大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/32;G06K9/46;G06K9/62;G06N3/04;G06N3/08;G06T3/00 |
代理公司: | 上海恒慧知识产权代理事务所(特殊普通合伙) 31317 | 代理人: | 徐红银;刘翠 |
地址: | 200240 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 两级 注意力 机制 行人 检测 方法 系统 | ||
1.一种基于两级注意力机制的行人检测方法,其特征在于,包括:
S1,基于Faster RCNN以及FPN网络构造一个端到端行人检测网络,所述检测网络包括基础网络Faster RCNN中的RPN模块、pool模块和分类回归模块,还包括第一级注意力模块和第二级注意力模块,其中第一级注意力模块的输入特征是基于RPN模块产生的目标候选框;
S2,利用第一级注意力模块得到精准的部位特征:
原始输入图像Image送入RPN模块提取目标候选框B;将每一个目标候选框B自上而下分为三个子区域P1、P2和P3,分别对应直立行人头部、上身以及下身;将每个子区域经过pool模块的特征,各自送入一个对应的第一级注意力模块A1;通过第一级注意力模块的仿射变换功能,提取出三个子区域中精准的部位特征和
S3,利用第二级注意力模块平衡整体与部位特征:
将每个目标候选框B通过第一级注意力模块得到的每一个子区域部位特征和分别与目标候选框B整体特征堆叠,作为第二级注意力模块A2的输入特征;利用第二级注意力模块的自适应加权功能,依据输入特征的不同,自适应地计算得到不同大小的权重o′g、o′h、o′u和o′l,其中o′、o′h、o′u和o′l分别对应整体、头部、上身以及下身;将加权后的特征o′g·B、和分别送入分类回归模块分类与回归,得到检测结果B0,即为图像中需要检出的行人目标。
2.根据权利要求1中所述的基于两级注意力机制的行人检测方法,其特征在于,所述S2中,每一个目标候选框子区域的划分方法包括:
确定每一个目标候选框的尺寸为H×W,其中H、W分别为目标候选框的高和宽;每一个目标候选框的左上角点与右下角点的坐标分别为(x1,y1)、(x2,y2);根据以上表示,得到三个子区域,即:
W=|x2-x1|
H=|y2-y1|
P1=[(x1,y1),(x2,y1+α·H)]
P3=[(x1,y2-α·H),(x2,y2)]
其中,α表示用于控制目标候选框每一个子区域高度的参数。
3.根据权利要求2所述的基于两级注意力机制的行人检测方法,其特征在于,在整体检测过程中,参数α被设定为0.4,表示每一个子区域的高度占整个目标候选框高度的40%。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910260572.6/1.html,转载请声明来源钻瓜专利网。