[发明专利]一种基于2D视觉图像的三维重建方法有效

专利信息
申请号: 202010768584.2 申请日: 2020-08-03
公开(公告)号: CN111899345B 公开(公告)日: 2023-09-01
发明(设计)人: 余世杰;贺骥;杨辉;费越;桂仲成 申请(专利权)人: 成都圭目机器人有限公司
主分类号: G06T17/00 分类号: G06T17/00;G06V10/44;G06V10/75
代理公司: 成都佳划信知识产权代理有限公司 51266 代理人: 史姣姣
地址: 610000 四川省成都市龙*** 国省代码: 四川;51
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 视觉 图像 三维重建 方法
【权利要求书】:

1.一种基于2D视觉图像的三维重建方法,其特征在于,包括以下步骤:

利用相机采集序列图像;

对任一图像进行特征点提取,并求得任一图像对应的描述子;

根据图像的描述子之间的汉明距离并确定匹配对;

根据图像的匹配对上的特征点求得图像帧的旋转R和平移t;

根据相邻帧的图像的旋转R和平移t,求得匹配对的重投影误差,并优化旋转R和平移t;

将优化后的旋转R和平移t作为输入,提取两帧之间的边缘点,梯度较大的点作为备选点,通过得到的旋转R和平移t,对两帧之间的匹配点进行配对,配对优化关系不再是特征点配对的像素点位置,而是像素点的像素值,提取图像帧边缘点并最优化光度误差,从而匹配边缘点,其表达式为:

其中,Epj表示需要求解的最小化能量方程,ωp表示权重函数,c表示常数,其取1.2,▽Ii(p)表示点p的梯度,NP表示边缘点周围的8个点,(Ij[pj])表示点p的在图像I中的像素值,a和b分别表示求解的两个变量,代表了其物体本身的光度值,t'表示图像的曝光时间,|| ||γ为Huber惩罚函数;

对匹配上的边缘点进行三角测量从而得到稠密三维点云,以实现三维重建。

2.根据权利要求1所述的一种基于2D视觉图像的三维重建方法,其特征在于,所述利用相机采集序列图像,采用数个相机并以不低于30帧/秒的速度对目标区域进行图像采集。

3.根据权利要求2所述的一种基于2D视觉图像的三维重建方法,其特征在于,还包括配置惯性测量单元或GPS模块获取相机拍摄的图像的位置。

4.根据权利要求1所述的一种基于2D视觉图像的三维重建方法,其特征在于,所述对任一图像进行特征点提取,并求得任一图像对应的描述子,其表达式为:

其中,p(x)和p(y)分别为点x和点y的像素值,n表示特征点对数,f(m)表示描述子。

5.根据权利要求1所述的一种基于2D视觉图像的三维重建方法,其特征在于,所述根据图像的匹配对上的特征点求得图像帧的旋转R和平移t,其表达式为:

E=t^R,F=K-TEK-1,

其中,E表示本质矩阵,F表示基础矩阵,K表示相机内参矩阵,x1和x2是特征点的归一化坐标,p1和p2是特征点的像素坐标。

6.根据权利要求1所述的一种基于2D视觉图像的三维重建方法,其特征在于,所述得匹配对的重投影误差eij,其表达式为:

其中,pi表示第i点的像素值,pj表示第j点的像素值,Ri表示第i点的旋转,ti表示第i点的平移。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都圭目机器人有限公司,未经成都圭目机器人有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010768584.2/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top