[发明专利]一种基于动态感知机图的实时渲染方法及装置

摘要

发明公开了一种基于动态感知机图的实时渲染方法及装置，通过预测逐帧的感知机图来表示体积视频，实现动态三维场景的实时渲染。本发明的实现包括：给定多视角视频，通过二维深度神经卷积网络预测每一帧的感知机图，以此表示每一帧的三维场景；感知机图是一种二维图，每个像素存储一个多层感知机的网络参数；基于感知机图，构造三维场景的几何和外观的神经表示。对于三维场景中的任意一个三维点，从感知机图中选择相应的网络参数，用于预测三维点的体素密度和颜色。本发明通过动态感知机图，实现了神经体积视频的高效建模，提高了动态三维场景的渲染速度本。