[发明专利]3D姿态重建方法、装置和计算机设备在审
申请号: | 202310266851.X | 申请日: | 2023-03-14 |
公开(公告)号: | CN116310116A | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 徐倩茹;刘世良 | 申请(专利权)人: | 深圳市洲明科技股份有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T7/73;G06V10/74;G06V10/75 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 聂榕 |
地址: | 518101 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 姿态 重建 方法 装置 计算机 设备 | ||
1.一种3D姿态重建方法,其特征在于,所述方法包括:
获取多视角图像;
将各视角图像通过图像处理模型,得到各视角图像的第一关节点特征图;所述关节点特征图包括多个关节点、关节点置信度和姿态;
根据所述关节点置信度过滤所述第一关节点特征图中不符合要求的关节点,得到各视角图像的第二关节点特征图;
对所述第二关节点特征图中各姿态的关节点进行匹配,得到所述视角图像中姿态的相似度以及各视角图像的所述第二关节点特征图的相似度;
根据所述视角图像中姿态的相似度以及各视角图像的所述第二关节点特征图的相似度,得到不同视角图像中的匹配姿态;
获取预设相机参数,根据所述预设相机参数及所述不同视角图像中的匹配姿态,进行3D姿态重建。
2.根据权利要求1所述的方法,其特征在于,所述对所述第二关节点特征图中各姿态的关节点进行匹配,得到所述视角图像中姿态的相似度以及各视图图像的所述第二关节点特征图的相似度包括:
将同一视角的所述第二关节点特征图中姿态的相似度设置为0;
对所述第二关节点特征图中各姿态的关节点进行匹配,确定匹配关节点;
将所述匹配关节点通过极线搜索,得到所述视角图像中姿态的相似度;
根据所述视角图像中姿态的相似度,确定各视图图像的所述第二关节点特征图的相似度。
3.根据权利要求2所述的方法,其特征在于,所述将匹配的关节点通过极线搜索,得到所述视角图像中姿态的相似度包括:
将所述匹配关节点通过极线搜索,得到各视角图像的极线输出向量;
根据所述极线输出向量,得到匹配的各视角图像像素块;
计算匹配的各视角图像像素块的相似度,得到所述视角图像中姿态的相似度。
4.根据权利要求2所述的方法,其特征在于,所述对所述第二关节点特征图中各姿态的关节点进行匹配,确定匹配关节点的步骤之前,所述方法还包括:
获取各相机到所述第二关节点特征图中各姿态的关节点的投影线段;
过滤所述投影线段的最短距离超过预设距离的关节点。
5.根据权利要求1所述的方法,其特征在于,所述获取预设相机参数,根据所述预设相机参数,对不同视角图像中的匹配姿态进行3D姿态重建之后,所述方法还包括:
获取3D姿态重建图像的高和宽;
过滤所述3D姿态重建图像的高和宽不满足预设阈值的3D图像。
6.根据权利要求1所述的方法,其特征在于,所述将各视角图像通过图像处理模型,得到各视角图像的第一关节点特征图,包括:
将各视角图像通过图像处理模型,识别各视角图像的2D包围盒;
识别所述2D包围盒中的关节点;
根据所述关节点,得到各视角图像的第一关节点特征图。
7.一种3D姿态重建装置,其特征在于,所述装置包括:
图像获取模块,用于获取多视角图像;
第一关节点特征图获取模块,用于将各视角图像通过图像处理模型,得到各视角图像的第一关节点特征图;所述关节点特征图包括多个关节点、关节点置信度和姿态;
第二关节点特征图获取模块,用于根据所述关节点置信度过滤所述第一关节点特征图中不符合要求的关节点,得到各视角图像的第二关节点特征图;
相似度获取模块,用于对所述第二关节点特征图中各姿态的关节点进行匹配,得到所述视角图像中姿态的相似度以及各视图图像的所述第二关节点特征图的相似度;
匹配姿态获取模块,用于根据所述视角图像中姿态的相似度以及各视图图像的所述第二关节点特征图的相似度,得到不同视角图像中的匹配姿态;
重建模块,用于获取预设相机参数,根据所述预设相机参数,对不同视角图像中的匹配姿态进行3D姿态重建。
8.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市洲明科技股份有限公司,未经深圳市洲明科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310266851.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种物流用条码打印装置
- 下一篇:一种高性能磁性剪切增稠抛光介质制备方法