[发明专利]对象三维重建方法、装置、电子设备及存储介质在审
申请号: | 202010348666.1 | 申请日: | 2020-04-28 |
公开(公告)号: | CN113570634A | 公开(公告)日: | 2021-10-29 |
发明(设计)人: | 马里千;张国鑫;孙佳佳;张博宁 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06T7/194 | 分类号: | G06T7/194;G06T7/62;G06T7/73;G06T7/90;G06T17/20;G06K9/00 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 张恺宁 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 对象 三维重建 方法 装置 电子设备 存储 介质 | ||
1.一种对象三维重建方法,其特征在于,包括:
获取二维目标图像包含的对象中各个部位的关键信息,其中所述关键信息包括关键点和/或蒙版图像;
基于所述关键信息,获得由第一差异和第二差异确定的损失函数,其中所述第一差异为根据所述对象的三维目标网格在二维空间的投影确定的关键信息与根据所述二维目标图像获取的关键信息之间的差异,所述第二差异为所述三维目标网格中各个顶点与相邻顶点的相对位置,与所述对象的预设三维网格中各个顶点与相邻顶点的相对位置之间的差异;
确定所述损失函数取最小值时所使用的三维目标网格中各个顶点的位置坐标;
根据确定的各个顶点的位置坐标进行三维重建,生成与所述对象对应的三维模型。
2.如权利要求1所述的方法,其特征在于,所述二维目标图像是按照预设图层次序将所述各个部位的分层图像叠加得到的,每个所述分层图像包括至少一个对象的部位,不同的分层图像包括的部位不同;
所述获取二维目标图像包含的对象中各个部位的关键信息,包括:
获取所述二维目标图像包含的对象中各个部位的分层图像,其中所述各个部位的分层图像是根据预设的各个部位的分层模板生成的;
从所述各个部位的分层图像中提取与各个部位对应的关键信息。
3.如权利要求1所述的方法,其特征在于,所述获取二维目标图像包含的对象中各个部位的关键信息,包括:
针对任意一个部位,将所述二维目标图像中与所述部位对应的图像转换为蒙版图像,并将所述蒙版图像作为所述部位的关键信息;或
针对任意一个部位,提取所述部位在所述二维目标图像中对应的关键点,并将提取的关键点作为所述部位的关键信息。
4.如权利要求3所述的方法,其特征在于,在所述基于所述关键信息,获得由第一差异和第二差异确定的损失函数之前,还包括:
若所有部位的关键信息都为蒙版图像,则将各个部位对应的第一蒙版向量和第二蒙版向量的距离之和作为所述第一差异;其中,部位对应的第一蒙版向量为根据所述投影获得的所述部位的蒙版图像中所有像素点的位置坐标组合得到的,部位对应的第二蒙版向量为根据所述二维目标图像获得的所述部位的蒙版图像中所有像素点的位置坐标组合得到的。
5.如权利要求3所述的方法,其特征在于,在所述基于所述关键信息,获得由第一差异和第二差异确定的损失函数之前,还包括:
若所有部位的关键信息都为关键点,则将各个部位对应的第一位置向量和第二位置向量的距离之和作为所述第一差异;其中,部位对应的第一位置向量是根据所述投影获得的所述部位的关键点的位置向量,部位对应的第二位置向量是根据所述二维目标图像获得的所述部位的关键点的位置向量。
6.如权利要求3所述的方法,其特征在于,在所述基于所述关键信息,获得由第一差异和第二差异确定的损失函数之前,还包括:
若所有部位中第一目标部位的关键信息为蒙版图像,第二目标部位的关键信息为关键点,则将各个第一目标部位对应的第一蒙版向量与第二蒙版向量的距离之和作为蒙版差异,以及将各个第二目标部位对应的第一位置向量与第二位置向量的距离之和作为关键点差异,并根据所述蒙版差异和所述关键点差异确定所述第一差异。
7.如权利要求6所述的方法,其特征在于,在所述基于所述关键信息,获得由第一差异和第二差异确定的损失函数之前,还包括:
针对任意一个部位,确定所述部位在所述二维目标图像中所占的面积;
若所述部位所占的面积大于预设阈值,则确定所述部位为第一目标部位;
若所述部位所占的面积不大于预设阈值,则确定所述部位为第二目标部位。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010348666.1/1.html,转载请声明来源钻瓜专利网。