[发明专利]流式传输利用无损或有损压缩进行压缩的光场

说明书

公开了流式传输利用无损或有损压缩进行压缩的光场。远程设备利用光线追踪来计算要渲染的场景的光场，其中该光场包括关于从该场景内的表面反射出来的光的信息。然后，利用无损或有损压缩以及实现时间复用的一种或更多种视频压缩技术来压缩该光场，使得仅压缩该场景的光场与先前场景的光场之间的差异。随后将经压缩的光场数据发送到客户端设备，该客户端设备解压缩光场数据并使用这样的数据来在该客户端设备处获得场景的光场。然后由客户端设备使用该光场以计算场景的全局照明。全局照明可用于在移动设备处准确地渲染场景，从而产生由移动设备呈现的逼真场景。

要求优先权

本申请要求于2020年11月3日提交的美国临时申请No.63/109,204的权益，该申请的全部内容在此通过引用合并。

技术领域

本发明涉及图像渲染，并且更具体地，涉及对场景执行全局照明。

背景技术

今天的用于游戏的高性能图形系统包括多个GPU、硬件加速的光线追踪以及高效算法，并且可以使用光线追踪的全局照明实时地接近影片效果的渲染质量，同时提供测量的数毫秒的交互延迟。这些高端系统设置当前难以在由热限制、电池功率和受限的GPU特征集约束的较低端消费者平台上满足的期望。

当前的基于云的图形解决方案将全部内容作为完全渲染的图像从远程服务器流式传输到客户端。在客户端上，视频流被解压缩并在显示器上显示。然而，网络延迟、带宽限制、以及增加的屏幕分辨率和帧率威胁了这种方法在未来的可行性。因此，需要实现具有减少的带宽和延迟特性的分布式渲染系统。

附图说明

图1示出了根据一个实施例的用于流式传输压缩的光场的方法的流程图。

图2示出了根据一个实施例的并行处理单元。

图3A示出了根据一个实施例的图2的并行处理单元内的通用处理集群。

图3B示出了根据一个实施例的图2的并行处理单元的存储器分区单元。

图4A示出了根据一个实施例的图3A的流式多处理器。

图4B是根据一个实施例的使用图2的PPU实现的处理系统的概念图。

图4C示出了可以在其中实现各种先前实施例的各种架构和/或功能的示例性系统。

图5是根据一个实施例的由图2的PPU实现的图形处理管线的概念图。

图6是适合用于实现本公开的一些实施例的示例游戏流式传输系统的框图。

图7是适合用于实现本公开的一些实施例的示例计算设备的框图。

图8示出了根据一个实施例的用于流式传输利用无损或有损压缩来压缩的光场的方法的流程图。

图9示出了根据一个实施例的用于接收并解压缩利用颜色转换压缩的经压缩的光场的方法的流程图。

图10示出了根据一个实施例的示例性分布式渲染系统。

图11示出了根据一个实施例的示例性数据流。

具体实施方式

远程设备(诸如服务器或一个或更多个分布式计算节点)利用光线追踪来计算要渲染的场景的光场，其中光场包括关于从场景内的表面反射出的光的信息。然后，利用实现时间复用(temporal reuse)的一个或更多个视频压缩技术以有效的方式压缩该光场，使得仅压缩该场景的光场与先前场景的光场之间的差异。这最小化了要发送的数据的量。压缩的光场数据然后被发送到客户端设备(诸如移动计算设备)，客户端设备解压缩光场数据并且在客户端设备处使用这样的数据来获得场景的光场。该光场接着由客户端设备使用以计算场景的全局照明。全局照明可用于在移动设备处准确地渲染场景，从而导致由移动设备向一个或更多个用户呈现的逼真场景。