[发明专利]三维点检测的方法、装置、电子设备及存储介质在审
申请号: | 202110929512.6 | 申请日: | 2021-08-13 |
公开(公告)号: | CN113610967A | 公开(公告)日: | 2021-11-05 |
发明(设计)人: | 吴思泽;金晟;刘文韬;钱晨 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T7/73;G06N3/04;G06N3/08 |
代理公司: | 北京中知恒瑞知识产权代理事务所(普通合伙) 11889 | 代理人: | 袁忠林 |
地址: | 100080 北京市海淀区北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维 检测 方法 装置 电子设备 存储 介质 | ||
1.一种三维点检测的方法,其特征在于,所述方法包括:
获取多个视角下对多个目标对象进行拍摄得到的目标图像,以及基于获取的所述目标图像确定的所述多个目标对象中每个目标对象的候选三维点的三维坐标信息;
针对所述每个目标对象,执行如下步骤:
基于所述目标对象的候选三维点的三维坐标信息,确定所述目标对象对应的候选三维空间;
基于所述目标对象对应的候选三维空间、以及所述目标图像,确定所述目标对象的目标三维点的三维坐标信息。
2.根据权利要求1所述的方法,其特征在于,所述三维点包括三维中心点;所述候选三维点包括候选三维中心点,且所述目标对象的所述候选三维中心点位于所述目标对象的中心位置;所述目标三维点包括目标三维中心点。
3.根据权利要求1或2所述的方法,其特征在于,所述基于所述目标对象对应的候选三维空间、以及所述目标图像,确定所述目标对象的目标三维点的三维坐标信息,包括:
将所述目标对象的候选三维空间进行空间采样,确定多个采样点;
针对所述多个采样点中的每个采样点,基于所述采样点在所述候选三维空间内的三维坐标信息、以及所述目标图像,确定所述采样点对应的三维点检测结果;
基于得到的所述三维点检测结果,确定所述目标对象的目标三维点的三维坐标信息。
4.根据权利要求3所述的方法,其特征在于,所述基于所述采样点在所述候选三维空间内的三维坐标信息、以及所述目标图像,确定所述采样点对应的三维点检测结果,包括:
针对所述多个采样点中的每个采样点,基于所述候选三维空间所在三维坐标系与各个视角所在二维坐标系之间的对应关系,将所述三维坐标信息投影至不同视角下,确定所述采样点分别在多个所述目标图像中的二维投影点信息;
基于所述采样点分别在多个所述目标图像中的二维投影点信息,确定所述采样点在不同视角下的采样点特征信息;
基于所述采样点在不同视角下的采样点特征信息,确定所述采样点对应的三维点检测结果。
5.根据权利要求4所述的方法,其特征在于,所述二维投影点信息包括二维投影点的图像位置信息;所述基于所述采样点分别在多个所述目标图像中的二维投影点信息,确定所述采样点在不同视角下的采样点特征信息,包括:
提取多个所述目标图像分别对应的图像特征;
针对多个所述目标图像中的每个所述目标图像,基于所述采样点在多个所述目标图像中的二维投影点的图像位置信息,从所述目标图像对应的图像特征中提取与所述图像位置信息对应的图像特征;
将提取的与所述图像位置信息对应的图像特征,确定所述采样点在不同视角下的采样点特征信息。
6.根据权利要求4或5所述的方法,其特征在于,所述基于所述采样点在不同视角下的采样点特征信息,确定所述采样点对应的三维点检测结果,包括:
基于所述采样点在不同视角下的采样点特征信息,以及与所述采样点关联的其他采样点的采样点特征信息,确定所述采样点在不同视角下的更新采样点特征信息;
基于所述采样点对应的更新采样点特征信息,确定所述采样点对应的三维点检测结果。
7.根据权利要求1-6任一所述的方法,其特征在于,按照如下步骤确定每个目标对象的候选三维点的三维坐标信息:
从多个所述目标图像中分别提取多个二维点的图像特征信息,其中,每个二维点是位于对应的目标对象中的像素点;
基于从多个所述目标图像中分别提取的图像特征信息,确定属于同一目标对象的成对的二维点,其中,所述成对的二维点来自不同的目标图像;
根据确定的所述成对的二维点在各自目标图像中的二维坐标信息,确定所述同一目标对象的候选三维点的三维坐标信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110929512.6/1.html,转载请声明来源钻瓜专利网。