[发明专利]一种基于辐射场技术的三维实时重建方法

说明书

本发明公开了一种基于辐射场技术的三维实时重建方法，涉及虚拟现实技术领域。包括以下步骤：S1，在三维场景空间部署多个摄像头进行空间数据实时采集，通过网络模块把数据都传输到后端分布式平台上；S2，利用automl深度学习算法获得深度估计切割前景和背景；S3，通过多个摄像头的数据，融合数据，得到粗糙的三维模型，三维模型设定为V₀；S4，根据可逆体渲染方法对V₀进行精确的重建，利用V_fine←R^‑1(V₀)；其中R^‑1为体素渲染的逆渲染；S5，构建loss方程，S6，采用adam方程求解。本发明的有益效果在于：做到高精度实时三维重建。

技术领域

本发明主要涉及虚拟现实技术领域，具体是一种基于辐射场技术的三维实时重建方法。

背景技术

各大游戏、智慧园区、VR房屋展示等应用市场对3D内容的需求在近年来 呈指数级增长，而传统的3D内容通常由专业团队或其他人力方式生成。这种 3D内容的获取方式在质量上参差不齐，在时间、资源上费时费力，是社会资源 的巨大损失。

发明内容

为解决现有技术的不足，本发明提供了一种基于辐射场技术的三维实时重建方法，它能够实时的对场景进行3d重建，然后进行三维传输和直播，在终端进行展示。

本发明为实现上述目的，通过以下技术方案实现：

一种基于辐射场技术的三维实时重建方法，包括以下步骤：

S1，在三维场景空间部署多个摄像头进行空间数据实时采集，通过网络模块把数据都传输到后端分布式平台上；

S2，利用automl深度学习算法获得深度估计切割前景和背景；

S3，通过多个摄像头的数据，融合数据，得到粗糙的三维模型，三维模型设定为V₀；

S4，根据可逆体渲染方法对V₀进行精确的重建，利用V_fine←R^-1(V₀)；其中 R-1为体素渲染的逆渲染；

S5，构建loss方程，C为原始图像，表示预估的值；方程如下所示：

其中C_i表示颜色值，P_i表示入射射线在volume块的占比，体素密度σ(x)定义为光线停留在位置x处无穷小粒子的可导概率，δ_i＝t_i+1-t_i是相邻样本之间的距离；

S6，采用adam方程求解。

所述网络模块为网线和/或wifi和/或5G。

对比现有技术，本发明的有益效果是：

本发明使用的方法布局多个摄像头，然后每一个角度有一台摄像头负责一个volume区域进行计算，由于每一个角度的互不相干性，可以把空间网格分布到多个机器上进行分布式计算，做到高精度实时三维重建。

具体实施方式

结合具体实施例，对本发明作进一步说明。应理解，这些实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解，在阅读了本发明讲授的内容之后，本领域技术人员可以对本发明作各种改动或修改，这些等价形式同样落于本申请所限定的范围。

一种基于辐射场技术的三维实时重建方法，包括以下步骤：