[发明专利]实时渲染影像的追踪系统、方法及非暂态电脑可读取媒体

说明书

一种实时渲染影像的追踪系统、追踪方法以及非暂态电脑可读取媒体，追踪系统包含控制器、服务器以及电子装置。电子装置包含处理器以及显示器。控制器用以提供第一追踪数据以及第二追踪数据，电子装置用以提供第一观察数据以及第二观察数据。服务器用以根据第一追踪数据以及接收自电子装置的第一观察数据产生第一影像。处理器用以接收第一影像以及根据第一影像、第二追踪数据以及第二观察数据产生第二影像。显示器用以根据第二影像显示模拟场景。借此因此，头戴式显示装置能够在增强现实场景中无延迟地显示模拟手势的技术效果。

技术领域

本公开涉及一种实时渲染影像的系统、方法以及非暂态电脑可读取媒体，且特别涉及一种用于利用最新的追踪数据重新投影影像的追踪系统、追踪方法以及非暂态电脑可读取媒体。

背景技术

在增强现实(augmented reality,AR)以及虚拟现实(virtual reality,VR)系统中，需要实时考虑使用者的移动，以提供更逼真的虚拟现实或增强现实的体验。当使用者移动其控制器时，需要更新头戴式装置(head-mounted device，HMD)显示的图像。然而，如果手持控制器以及头戴式装置移动，系统需要根据使用者新的动作重新渲染新的影像，头戴式装置显示新影像时可能会发生延迟。因此，本领域中需要一种用于虚拟现实或增强现实中根据最新的追踪数据以及最新的观察数据来降低渲染影像的延迟系统的追踪系统。

发明内容

依据本公开文件的第一实施方式，其公开一种实时渲染影像的追踪系统，实时渲染影像的追踪系统包含控制器、服务器以及电子装置。控制器用以提供第一追踪数据以及第二追踪数据，其中第一追踪数据以及第二追踪数据对应不同的时间。服务器与控制器通信连接，用以接收第一追踪数据。电子装置与控制器以及服务器通信连接，用以提供第一观察数据以及第二观察数据，其中第一观察数据以及第二观察数据对应不同的时间。电子装置包含处理器以及显示器，处理器用以接收第二追踪数据，显示器电性连接至处理器，其中，服务器用以根据第一追踪数据以及接收自电子装置的第一观察数据产生第一影像。处理器用以接收第一影像以及根据第一影像、第二追踪数据以及第二观察数据产生第二影像，显示器用以根据第二影像显示模拟场景。

根据本公开一实施例，该服务器用以传送该第一影像、该第一观察数据、该第一追踪数据以及对应于该第一影像的一深度数据至该电子装置。

根据本公开一实施例，由该控制器提供的该第二追踪数据的时间晚于由该控制器提供的该第一追踪数据的时间，并且由该电子装置提供的该第二观察数据的时间晚于由该电子装置提供的该第一观察数据的时间。

根据本公开一实施例，该处理器更用以执行以下步骤：根据该第一影像以及该深度数据建构一第一三维影像；根据该第一观察数据将位于一标准化装置坐标系统中的该第一三维影像转换至一世界坐标系统；根据该第二追踪数据产生一第二三维影像；根据该第二追踪数据以及该第二观察数据将位于该世界坐标系统中的该第二三维影像转换至该标准化装置坐标系统；以及根据该第二三维影像产生该第二影像。

根据本公开一实施例，该第一追踪数据包含一控制器的第一位置，以及该第二追踪数据包含一控制器的第二位置；该第一观察数据包含一电子装置的第一位置，以及该第二观察数据包含一电子装置的第二位置。

根据本公开一实施例，通过该控制器的第一位置以及该控制器的第二位置产生一模型矩阵，通过该电子装置的第一位置以及该电子装置的第二位置产生一观察矩阵。

依据本公开文件的第二实施方式，其公开一种实时渲染影像的追踪方法，实时渲染影像的追踪方法包含：通过服务器根据接收自控制器的第一追踪数据以及接收自电子装置的第一观察数据产生第一影像；通过电子装置接收第一影像以及根据第一影像、收自控制器的第二追踪数据以及接收自电子装置的第二观察数据产生第二影像；以及通过显示器根据第二影像显示模拟场景，其中，由控制器提供的第一追踪数据以及第二追踪数据对应不同的时间，以及由电子装置提供的第一观察数据以及第二观察数据对应不同的时间。