[发明专利]图像渲染方法及系统

权利要求书

1.一种图像渲染方法，其特征在于，包括：

获取步骤，获取待渲染图像的图像帧，其中，所述图像帧包括多个关键帧和多个参考帧，一个关键帧对应多个参考帧，所述关键帧为具体的场景光学信息，参考帧为关键帧的深度信息；

处理步骤，根据所述多个关键帧和多个参考帧得到两种运动场，所述两种运动场包括：所述关键帧与参考帧之间的运动场，不同关键帧之间的运动场，其中，所述处理步骤进一步包括：将所述关键帧划分为多个等大小的图像块；分别计算所述关键帧与所述关键帧对应的多个参照帧之间的光流；定义描述所述图像块的运动和图像库中像素的第一运动差异的能量函数；定义相邻近所述图像块的第二运动差异的能量函数；定义所述图像块上多个运动向量的对称性的能量函数；将所述第一运动差异的能量函数、所述第二运动差异的能量函数和所述对称性的能量函数，通过线性组合定义生成目标能量函数，并求解目标能量函数以获得每个图像块对应的多个运动向量；将获得的每个所述图像块对应的多个运动向量的终点进行曲线拟合，以获得每个图像块对应的拟合曲线；

渲染步骤，根据多个处理后的关键帧渲染得到渲染图像，其中，渲染步骤进一步包括：确定待渲染图像的最邻近关键帧，其中，最邻近关键帧是获取待渲染图像的多个关键帧后，在多个关键帧中确定出的与所述待渲染图像最邻近的关键帧；获取最邻近关键帧与其他关键帧之间的方向与距离差异；根据方向与距离差异对关键帧进行渲染；基于光流混合，获取渲染图像。

2.根据权利要求1所述的图像渲染方法，其特征在于，获取待渲染图像的关键帧的方法包括：

建立一个固定半径的采样球，相隔固定的经度和纬度，在球面上朝向与球面法向方向相同的方向进行采样，以获取关键帧。

3.根据权利要求2所述的图像渲染方法，其特征在于，获取待渲染图像的参考帧的方法包括：

在所述关键帧的周围划分一个固定半径的采样球，在采样球上相隔固定的角度，在球面上朝向与球面法向方向相同的方向进行采样，以获取参考帧。

4.根据权利要求1所述的图像渲染方法，其特征在于，得到关键帧与参考帧之间的运动场的方法为：通过计算关键帧与参考帧之间的光流得到关键帧与参考帧之间的运动场。

5.一种图像渲染系统，其特征在于，包括：

获取模块，用于获取待渲染图像的图像帧，其中，所述图像帧包括多个关键帧和多个参考帧，一个关键帧对应多个参考帧，所述关键帧为具体的场景光学信息，参考帧为关键帧的深度信息；

处理模块，用于根据所述多个关键帧和多个参考帧得到两种运动场，所述两种运动场包括：所述关键帧与参考帧之间的运动场，不同关键帧之间的运动场，其中，处理模块具体用于将所述关键帧划分为多个等大小的图像块；分别计算所述关键帧与所述关键帧对应的多个参照帧之间的光流；定义描述所述图像块的运动和图像库中像素的第一运动差异的能量函数；定义相邻近所述图像块的第二运动差异的能量函数；定义所述图像块上多个运动向量的对称性的能量函数；将所述第一运动差异的能量函数、所述第二运动差异的能量函数和所述对称性的能量函数，通过线性组合定义生成目标能量函数，并求解目标能量函数以获得每个图像块对应的多个运动向量；将获得的每个所述图像块对应的多个运动向量的终点进行曲线拟合，以获得每个图像块对应的拟合曲线；

渲染模块，用于根据多个处理后的关键帧渲染得到渲染图像，其中，渲染模块具体用于确定待渲染图像的最邻近的关键帧，其中，最邻近关键帧是获取待渲染图像的多个关键帧后，在多个关键帧中确定出的与所述待渲染图像最邻近的关键帧；获取最邻近关键帧与其他关键帧之间的方向与距离差异；根据方向与距离差异对关键帧进行渲染；基于光流混合，获取渲染图像。

6.根据权利要求5所述的图像渲染系统，其特征在于，获取待渲染图像的关键帧的方法包括：

建立一个固定半径的采样球，相隔固定的经度和纬度，在球面上朝向与球面法向方向相同的方向进行采样，以获取关键帧。