[发明专利]一种人体三维模型重建方法、装置和存储介质有效
申请号: | 201810990982.1 | 申请日: | 2018-08-28 |
公开(公告)号: | CN109285215B | 公开(公告)日: | 2021-01-08 |
发明(设计)人: | 李琛;易鸿伟;曹琼;沈小勇;戴宇榮;賈佳亞 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T17/00 | 分类号: | G06T17/00 |
代理公司: | 深圳翼盛智成知识产权事务所(普通合伙) 44300 | 代理人: | 黄威 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 人体 三维 模型 重建 方法 装置 存储 介质 | ||
本发明实施例公开了一种人体三维模型的重建方法、装置和存储介质;本发明实施例可以获取待重建人体的二维图像,将二维图像映射至体素空间,得到该二维图像的体素化结果,然后,采用预设三维参数回归网络对该体素化结果进行计算,并基于计算得到的该二维图像的三维形变模型参数重建人体的三维模型;该方案在计算三维形变模型参数之前,可以将二维图像映射至体素空间,因此,可以避免由于二维图像信息缺失所导致的准确性较差的问题,可以大大提高三维模型重建的准确性和效果。
技术领域
本发明涉及通信技术领域,具体涉及一种人体三维模型重建方法、装置和存储介质。
背景技术
三维模型重建,是计算机视觉和计算机图形学中研究的重要课题之一,也是虚拟现实(VR,Virtual Reality),增强现实(AR,Augmented Reality)和混合现实(MR)的基础技术之一,因此,如何更好地实现三维模型重建,具有重大意义。
传统的三维模型重建,主要是利用深度传感器、结构光(Structure Lights)、以及多目立体匹配(Stereo Matching)等技术来实现,不仅设备价格昂贵,而且图片采集过程也较为繁琐。为此,现有技术又提出了另一种方案,该方案只需利用单张二维图像,便可重建出相应的三维模型(即恢复该对象的几何结构)。例如,以人脸为例,具体可以通过在三维人脸形变模型(3DMM,3D Face Morphable Model)上人工标注人脸特征点位置,然后,通过优化基向量对应的系数实现该三维形变模型上的人脸特征点与输入图片上二维人脸特征点的对齐,从而得到该输入图片对应的基向量系数组合,根据该基向量系数组合,便可以得到该输入图片对应的三维模型(即人脸三维模型)。但是,在对现有技术的研究和实践过程中,本发明的发明人发现,该方案非常依赖准确的人脸特征点检测,而由于二维人脸图像本身会因为侧脸、大表情、或有遮挡等情况产生一部分的信息缺失,所以,该方案除了正脸无遮挡图片的重建效果较好之外,侧脸、大表情、或有遮挡的人脸重建效果并不是非常理想,准确性较低。
发明内容
本发明实施例提供一种人体三维模型重建方法、装置和存储介质;可以提高重建的人体三维模型的准确性,改善重建效果。
本发明实施例提供一种人体三维模型重建方法,包括:
获取待重建人体的二维图像;
将二维图像映射至体素空间,得到所述二维图像的体素化结果;
采用预设三维参数回归网络对所述体素化结果进行计算,得到所述二维图像对应的三维形变模型参数;
基于所述三维形变模型参数重建所述人体的三维模型。
相应的,本发明实施例还提供一种人体三维模型重建装置,包括:
获取单元,用于获取待重建人体的二维图像;
映射单元,用于将二维图像映射至体素空间,得到所述二维图像的体素化结果;
计算单元,用于采用预设三维参数回归网络对所述体素化结果进行计算,得到所述二维图像对应的三维形变模型参数;
重建单元,用于基于所述三维形变模型参数重建所述人体的三维模型。
可选的,在一些实施例中,所述三维形变模型参数包括形态系数、状态系数和相机参数,所述重建单元包括构建子单元和投影子单元,如下:
构建子单元,用于基于所述形态系数和状态系数构建所述人体的正视三维模型;
投影子单元,用于根据所述相机参数,将所述人体的正视三维模型投影至图像空间,得到所述人体对应的三维模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810990982.1/2.html,转载请声明来源钻瓜专利网。