[发明专利]三维重建方法、装置、电子设备及计算机可读存储介质有效
申请号: | 202211140932.7 | 申请日: | 2022-09-20 |
公开(公告)号: | CN115222896B | 公开(公告)日: | 2023-05-23 |
发明(设计)人: | 李宗原 | 申请(专利权)人: | 荣耀终端有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T17/20;G06T15/00;G06V20/64;G06V10/42;G06V10/44;G06V10/75;G06V10/764;G06V10/77;G06V10/774;G06V10/82;G06N3/0464;G06N3/08 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 晏波 |
地址: | 518000 广东省深圳市福田区香蜜湖街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 三维重建 方法 装置 电子设备 计算机 可读 存储 介质 | ||
1.一种三维重建方法,其特征在于,应用于客户端,包括:
提取拍摄图像中的目标图像特征;
将所述目标图像特征和所述拍摄图像上传至服务器,所述服务器用于根据所述目标图像特征和预设图像数据集中各图像的预设目标图像特征之间的距离,在所述预设图像数据集中检索对应的匹配图像,并根据位姿估计算法计算给定图像的位姿;基于初始化三维网格遍历所述给定图像,并通过初始化MLP网络遍历所述初始化三维网格的网格顶点坐标,输出对应的透明度和球谐系数;基于体渲染技术、所述透明度以及所述球谐系数重建所述位姿的图像,获得重建图像;基于所述重建图像和所述给定图像进行三维重建,生成待重建物体对应的目标三维模型,所述位姿包括拍摄位置和拍摄角度,所述给定图像包括拍摄图像或匹配图像;
接收所述服务器反馈的目标三维模型。
2.如权利要求1所述三维重建方法,其特征在于,所述提取拍摄图像中的目标图像特征,包括:
对拍摄图像进行特征提取,得到全局图像特征;
在所述全局图像特征中提取多个局部图像特征;
根据各所述局部图像特征,生成目标图像特征。
3.如权利要求2所述三维重建方法,其特征在于,所述根据各所述局部图像特征,生成目标图像特征,包括:
对各所述局部图像特征分别进行全连接,得到各全连接特征;
对各所述全连接特征进行聚合,生成目标图像特征。
4.如权利要求3所述三维重建方法,其特征在于,所述对各所述局部图像特征分别进行全连接,得到各全连接特征,包括:
对各所述局部图像特征进行归一化,得到各第一归一化特征;
分别对各所述第一归一化特征进行全连接,得到各全连接特征。
5.如权利要求3所述三维重建方法,其特征在于,所述对各所述全连接特征进行聚合,生成目标图像特征,包括:
对各所述全连接特征进行归一化,得到各第二归一化特征;
对各所述第二归一化特征进行聚合,得到局部聚合图像特征;
对所述局部聚合图像特征进行归一化,生成目标图像特征。
6.如权利要求5所述三维重建方法,其特征在于,所述对所述局部聚合图像特征进行归一化,生成目标图像特征,包括:
对所述局部聚合图像特征进行归一化,得到第三归一化特征;
对所述第三归一化特征进行PCA白化,得到目标图像特征。
7.如权利要求1至6中任一项所述三维重建方法,其特征在于,所述将所述目标图像特征和所述拍摄图像上传至服务器的步骤之前,还包括:
获取所述拍摄图像对应的图像场景分类标记;
所述将所述目标图像特征和所述拍摄图像上传至服务器的步骤,包括:
将所述图像场景分类标记、所述目标图像特征和所述拍摄图像上传至服务器,所述服务器用于根据所述目标图像特征和预设图像数据集中各图像的预设目标图像特征之间的距离以及所述图像场景分类标记,在所述预设图像数据集中检索对应的匹配图像,并根据所述匹配图像和所述拍摄图像进行三维重建,生成待重建物体对应的目标三维模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于荣耀终端有限公司,未经荣耀终端有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211140932.7/1.html,转载请声明来源钻瓜专利网。