[发明专利]一种多人姿态估计方法、系统及设备在审
申请号: | 202211202786.6 | 申请日: | 2022-09-29 |
公开(公告)号: | CN116071816A | 公开(公告)日: | 2023-05-05 |
发明(设计)人: | 白秀秀;魏星;王增莹 | 申请(专利权)人: | 西安交通大学 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V10/46;G06V10/82;G06N3/0464;G06N3/08 |
代理公司: | 西安通大专利代理有限责任公司 61200 | 代理人: | 陈翠兰 |
地址: | 710049 陕*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 姿态 估计 方法 系统 设备 | ||
1.一种多人姿态估计方法,其特征在于,包括以下步骤:
对待估计图像进行特征提取,得到输入特征图Fin;
将所述输入特征图Fin,作为预构建的遮挡者分支ORB的输入,获取待估计图像中的遮挡者特征图Fout1;并利用预设的第一姿态预测头对所述待估计图像中的遮挡者特征图Fout1进行关键点的定位,得到遮挡者的关键点热图Hoccluder;
将所述输入特征图Fin与所述遮挡者特征图Fout1进行特征融合,得到输入特征图Fin_occludee;
将所述输入特征图Fin_occludee,作为预构建的被遮挡者分支OEB的输入,获取待估计图像中的被遮挡者特征图Fout2;并利用预设的第二姿态预测头对所述待估计图像中的被遮挡者特征图Fout2进行关键点定位,得到被遮挡者的关键点热图Hoccludee;
将所述遮挡者的关键点热图Hoccluder和所述被遮挡者的关键点热图Hoccludee作为输出,得到所述待估计图像的多人姿态估计结果。
2.根据权利要求1所述的一种多人姿态估计方法,其特征在于,对待估计图像进行特征提取,得到特征图Fin的过程,具体如下:
利用预选取的主干网络,对待估计图像进行特征提取,得到所述特征图Fin;其中,所述预选取的主干网络为HRNet特征提取器、ResNet特征提取器或SimpleBaseline特征提取器。
3.根据权利要求1所述的一种多人姿态估计方法,其特征在于,所述预构建的遮挡者分支ORB包括依次相连的第一注意力模块、第一卷积模块、第二注意力模块及第二卷积模块;
所述第一注意力模块,用于对所述输入特征图Fin进行注意力机制运算,得到遮挡者特征图Fattention1;
所述第一卷积模块,用于对所述遮挡者特征图Fattention1进行两次卷积操作,得到遮挡者特征图F′in1;
所述第二注意力模块,用于对所述遮挡者特征图F′in1进行注意力机制运算,得到遮挡者特征图F′attention1;
所述第二卷积模块,用于对所述遮挡者特征图F′attention1进行两次卷积操作,得到待估计图像中的遮挡者特征图Fout1。
4.根据权利要求3所述对一种多人姿态估计方法,其特征在于,所述第一注意力模块和所述第二注意力模块的结构相同,均包括通道注意力模块及空间注意力模块;
其中,所述通道注意力模块,用于增加预设通道的权重;所述空间注意力模块,用于增加关注空间需要的权重。
5.根据权利要求1所述的一种多人姿态估计方法,其特征在于,所述遮挡者的关键点热图为Hoccluder:
Hoccluder=Convpred(Fout1)。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安交通大学,未经西安交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211202786.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种吊取装置
- 下一篇:基于FRET效应的荧光对、包含其的探针及应用