[发明专利]物体的三维重构方法及相关装置有效

专利信息
申请号: 202110361990.1 申请日: 2021-04-02
公开(公告)号: CN113223169B 公开(公告)日: 2023-05-26
发明(设计)人: 刘亦芃;杜国光;赵开勇 申请(专利权)人: 达闼机器人股份有限公司
主分类号: G06T17/10 分类号: G06T17/10;G06T15/10;G06T5/50
代理公司: 深圳市爱迪森知识产权代理事务所(普通合伙) 44341 代理人: 何婷;田利琼
地址: 201111 上*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 物体 三维 方法 相关 装置
【说明书】:

发明实施例涉及计算机视觉技术领域,公开了一种物体的三维重构方法,该方法包括:获取目标物体的N张侧面图像;所述N张侧面图像为环绕所述目标物体一周所拍摄的N张侧面图像,N为正整数;将所述侧面图像中所述目标物体沿竖直方向进行分层处理,得到所述侧面图像所对应的多层切片;将N张侧面图像中位于同一层的切片图像融合,得到每一层的边界多边形;将各层所述边界多边形合并,得到所述目标物体对应的不含上下表面的侧面立体结构;将所述侧面立体结构的上下表面进行补全处理,得到目标模型。通过上述方式,本发明实施例实现了普适性强、提高效率的有益效果。

技术领域

本发明实施例涉及计算机视觉技术领域,具体涉及一种物体的三维重构 方法、机器人的物体定位方法、物体的三维重构装置、物体的三维重构设备、 机器人及计算机可读存储介质。

背景技术

服务型机器人主要抓取体型较小的物体,如饮料瓶、杯子、水果等,在 算法层面需要对物体进行3D检测定位。目前3D检测定位一般采用点云或其 他3D数据格式的深度学习算法或传统的icp配准方法,这些方法都需要物体 的3D模型作为支持。获取3D模型的方法主要包括:利用3D扫描仪得到物 体轮廓信息;基于视觉的MVS算法,得到大量物体表面的特征点,从而形成 点云;通过CAD等技术人工设计模型。

然而,发明人发现,现有的模型重构方式存在以下问题:3D扫描仪可对 任意形状进行表面重建,但无法处理透明、反光的表面,且设备昂贵;MVS 算法依赖图像的特征,无法处理表面纹理不丰富的物体且速度很慢;人工设 计的模型最为精确,但成本太高且效率太低。

发明内容

鉴于上述问题,本发明实施例提供了一种物体的三维重构方法、机器人 的物体定位方法、物体的三维重构装置、物体的三维重构设备、机器人及计 算机可读存储介质,用于解决现有技术中存在的普适性差的技术问题。

根据本发明实施例的一个方面,提供了一种物体的三维重构方法方法, 所述方法包括:

获取目标物体的N张侧面图像;所述N张侧面图像为环绕所述目标物体 一周所拍摄的N张侧面图像,N为正整数;

将所述侧面图像中所述目标物体沿竖直方向进行分层处理,得到所述侧 面图像所对应的多层切片;

将N张侧面图像中位于同一层的切片图像融合,得到每一层的边界多边 形;

将各层所述边界多边形合并,得到所述目标物体对应的不含上下表面的 侧面立体结构;

将所述侧面立体结构的上下表面进行补全处理,得到目标模型。

在一种可选的方式中,所述获取目标物体的N张侧面图像之前,包括: 将相机固定在所述目标物体的侧面,所述目标物体的中心位于所述相机的中 心轴;对所述目标物体进行拍摄,得到当前角度下的目标物体的侧面图像; 将所述目标物体绕所述目标物体的竖直中心线旋转预设角度;继续所述对多 数目标物体进行拍摄,得到当前角度下的目标物体的侧面图像,以及所述将 所述目标物体绕所述目标物体的竖直中心线旋转预设角度的步骤,直至所述 目标物体旋转一周,得到N张侧面图像。

在一种可选的方式中,所述将N张侧面图像中位于同一层的切片图像融 合,得到每一层的边界多边形,包括:确定每一层切片的两个端点,在所述 两个端点处构建垂直于所述侧面图像的平行线;确定所述N张侧面图像中同 一层上所有切片对应的平行线的交点;根据所述交点确定每一层的所述边界 多边形。

在一种可选的方式中,所述根据所述交点确定每一层的所述边界多边形, 包括:根据所述交点到直线的距离计算所有内点;利用凸包算法计算所述内 点形成的凸包;根据所述凸包得到所述边界多边形。

在一种可选的方式中,所述将所述侧面图像中所述目标物体沿竖直方向 进行分层处理,得到所述侧面图像所对应的多层切片,包括:统计所述目标 物体在竖直方向的像素个数;按照所述像素个数对所述目标物体沿竖直方向 进行分层处理,得到所述侧面图像所对应的多层切片。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于达闼机器人股份有限公司,未经达闼机器人股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110361990.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top