[发明专利]场景数据的生成方法、装置、电子设备和存储介质

说明书

本公开提供了一种场景数据的生成方法、装置、电子设备和存储介质，涉及人工智能领域，具体涉及深度学习、计算机视觉、增强现实和虚拟现实等技术领域，可应用于元宇宙等场景。场景数据的生成方法的具体实现方案为：对神经辐射场输出的体素网格数据进行不同粒度地至少两次采样，得到至少两个采样结果；其中，神经辐射场是根据多个视角下目标场景的多个图像构建的；根据至少两个采样结果中的每个采样结果提取纹理特征，得到与至少两个采样结果分别对应的至少两个纹理特征；根据每个采样结果和与每个采样结果对应的纹理特征，生成表达目标场景的一组场景数据，得到不同粒度下表达目标场景的至少两组场景数据。

技术领域

本公开涉及人工智能领域，具体涉及深度学习、计算机视觉、增强现实和虚拟现实等技术领域，可应用于元宇宙等场景。

背景技术

随着计算机技术和网络技术的发展，图像渲染技术及通过与神经网络整合来对图像渲染技术进行了改进的神经渲染（neural rendering）技术得到快速发展。图像渲染技术旨在根据三维模型生成二维图像，以给用户带来更接近于现实世界的视觉感受，在图像渲染之前，需要生成表示场景的三维模型的场景数据。通过加载该场景数据并进行图像渲染可以得到二维图像。

发明内容

本公开旨在提供一种场景数据的生成方法、装置、电子设备和存储介质，旨在使得场景数据的加载可以兼容不同处理能力的设备。

根据本公开的一个方面，提供了一种场景数据的生成方法，包括：对神经辐射场输出的体素网格数据进行不同粒度地至少两次采样，得到至少两个采样结果；其中，神经辐射场是根据多个视角下目标场景的多个图像构建的；根据至少两个采样结果中的每个采样结果提取纹理特征，得到与至少两个采样结果分别对应的至少两个纹理特征；以及根据每个采样结果和与每个采样结果对应的纹理特征，生成表达目标场景的一组场景数据，得到不同粒度下表达目标场景的至少两组场景数据。

根据本公开的另一个方面，提供了一种场景数据的生成装置，包括：采样模块，用于对神经辐射场输出的体素网格数据进行不同粒度地至少两次采样，得到至少两个采样结果；其中，神经辐射场是根据多个视角下目标场景的多个图像构建的；纹理特征提取模块，用于根据至少两个采样结果中的每个采样结果提取纹理特征，得到与至少两个采样结果分别对应的至少两个纹理特征；以及场景数据生成模块，用于根据每个采样结果和与每个采样结果对应的纹理特征，生成表达目标场景的一组场景数据，得到不同粒度下表达目标场景的至少两组场景数据。

根据本公开的另一个方面，提供了一种电子设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行本公开提供的场景数据的生成方法。

根据本公开的另一个方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，计算机指令用于使计算机执行本公开提供的场景数据的生成方法。

根据本公开的另一个方面，提供了一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令在被处理器执行时实现本公开提供的场景数据的生成方法。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案，不构成对本公开的限定。其中：

图1是根据本公开实施例的场景数据的生成方法和装置的应用场景示意图；

图2是根据本公开实施例的场景数据的生成方法的流程示意图；

图3是根据本公开实施例的场景数据的生成方法的实现原理图；

图4是根据本公开实施例的生成表达目标场景的场景数据的原理示意图；