[发明专利]基于渲染引擎的实时图像处理方法以及显示设备

说明书

本申请公开了基于渲染引擎实时处理图像数据的方法。所述方法包括：采样将在具有第二像素排列的像素的显示屏幕中显示为图像的第一像素排列的第一数据集合。所述方法还包括创建第一模型和第二模型，第一模型映射有第一数据集合以产生第二数据集合并且第二模型映射有第一数据集合以产生第三数据集合。此外，所述方法还包括：利用第一着色器渲染第二数据集合以输出第四数据集合，以及利用第二着色器渲染第三数据集合以输出第五数据集合。此外，所述方法包括：将第四数据集合叠加在第五数据集合上以显示第六数据集合。

技术领域

本申请涉及图像处理技术，更具体地，涉及基于渲染引擎的实时图像处理方法、实时图像处理设备、以及实现所述方法的显示设备。

背景技术

比如虚拟现实(VR)或增强现实(AR)之类的显示产品的现代显示技术需要在显示静态图像或视频图像的同时进行实时图像处理。渲染引擎恰好是一种与这些显示产品相关联的实时图像处理器，用于实时地处理图像数据并且将可以采样的虚拟场景方面的处理后的图像数据输出至显示屏幕进行显示。此外，一直以来要求这些产品有更高的图像分辨率。

发明内容

在一方面，本公开提供了一种基于渲染引擎实时处理图像数据的方法。所述方法包括：采样将在具有第二像素排列的像素的显示屏幕中显示为图像的第一像素排列的第一数据集合。所述方法还包括：将所述第一数据集合映射至用于渲染引擎的第一模型以产生第二数据集合，并且将第一数据集合映射至用于渲染引擎的第二模型以产生第三数据集合。此外，所述方法包括：将第二数据集合和第三数据集合加载至渲染引擎，并且利用与第一像素排列相关联的第一着色器通过渲染引擎处理第二数据集合以输出第四数据集合。所述方法还包括：利用与第二像素排列相关联的第二着色器通过渲染引擎处理第三数据集合以输出第五数据集合。此外，所述方法包括：将第四数据集合叠加在第五数据集合上以获得第六数据集合。此外，所述方法包括：在具有第二像素排列的像素的显示屏幕中显示第六数据集合。

可选地，所述方法还包括：基于显示屏幕创建用于渲染引擎的第一模型和第二模型。创建第一模型的步骤包括：产生第一数量的矩形条状体，每个矩形条状体具有像素的第一宽度和一行第二数量的像素的第一长度并且通过一行像素与相邻的矩形条状体分隔开。第一数量和第二数量分别表示与显示屏幕相关联的竖直显示分辨率的一半和横向显示分辨率的一半。第二模型由与显示屏幕对应的、具有第二宽度和第二长度的矩形体表征，第二宽度等于一行像素的第一长度，第二长度等于两倍于第一数量行的像素的第一宽度之和。

可选地，采样第一数据集合的步骤包括：利用与渲染引擎相关联的采样相机实时地收集第一数据集合。

可选地，采样相机包括正交投影相机或透视投影相机。

可选地，将第一数据集合映射至第一模型以产生第二数据集合的步骤包括：通过按照UV映射将第一数据集合转换为第二数据集合来产生第一虚拟图像，所述第一虚拟图像的第一边缘与第一模型的第一数量的矩形条状体中的第一个对齐。将第一数据集合映射至第二模型以产生第三数据集合的步骤包括：通过按照UV映射将第一数据集合转换为第三数据集合来产生附着至第二模型的单个矩形体的第二虚拟图像。

可选地，将第二数据集合和第三数据集合加载至渲染引擎包括：产生分别加载至渲染引擎的至少承载与第一模型相关联的第二数据集合的信息的第一Filmbox(FBX)文件以及至少承载与第二模型相关联的第三数据集合的信息的第二FBX文件。

可选地，所述方法还包括：创建与第一像素排列相关联的第一着色器。创建第一着色器的步骤包括：定义对第一像素排列的图像数据的一个或多个计算机可执行处理，第一像素排列的每行像素以真实RGB子像素顺序排列。

可选地，处理第二数据集合的步骤包括：通过渲染引擎渲染第一虚拟图像。处理第二数据集合的步骤还包括：通过第一着色器对与第一模型相关联的第二数据集合调整颜色、纹理和网格信息，以获得第一像素排列的第四数据集合。