[发明专利]一种基于深度和动作流信息的远程绘制方法

摘要

一种基于深度和动作流信息的远程绘制方法，其步骤为：（1）服务器从属性缓冲中进行边界提取;（2）根据步骤（1）计算得到的边界信息，提取边界动作流信息和边界深度信息，进行数据压缩处理并发送给客户端；（3）绘制低分辨率图像，使用H.264标准发送到客户端；（4）客户端接受服务器端发送到的信息，首先对边界动作流信息和边界深度信息通过扩射算法进行恢复，得到完整的动作流信息和深度信息；（5）根据步骤（4）得到的数据，使用时空向上采样算法得到高分辨图像。

主权项

一种基于深度和动作流信息的远程绘制方法，首先要在服务器端进行深度与动作流信息提取，边界信息提取和低分辨率图像绘制，然后进行数据压缩，最后客户端得到高分辨率图像，其特征在于步骤如下：(1)服务器从属性缓冲中进行边界提取；(2)根据步骤(1)计算得到的边界信息，提取边界动作流信息和边界深度信息，进行数据压缩处理并发送给客户端；(3)绘制低分辨率图像，使用H.264标准发送到客户端；(4)客户端接受服务器端发送到的信息，首先对边界动作流信息和边界深度信息通过扩射算法进行恢复，得到完整的动作流信息和深度信息；(5)根据步骤(4)得到的数据，使用时空向上采样算法得到高分辨图像；所述步骤(2)中，边界深度信息和边界动作流信息的提取和数据压缩，其步骤如下：首先从属性缓冲区根据边界信息提取边界深度信息和边界动作流信息，然后对两种元素，一个像素是否是边界样例、边界样例值，进行编码：首先以二值图像的形式对一个像素是否为边界样例进行编码，1表示该像素为边界样例，0表示不是；对于边界样例的值，以按行扫描的方式进行存储；步骤(4)包括：其核心是一种“推拉机制”，首先通过降低图像分辨率来填补空洞，具体操作是进行连续向下采样得到金字塔状图像，每一级别增加边界样本的一个像素宽度，空洞被迅速填补；然后把填补好的空洞传播回高分辨率图像；通过自顶向下的方式，粗略级别的样本被“拉”回到自己相应的精确位置；由于在推的阶段保留了偶数位置的值，所以在拉的阶段只从偶数位取值，在金字塔每一层，对剩余像素使用局部扩散的方法进行复制，在这个过程中采用先对角线后坐标轴的方式；步骤(5)包括步骤如下:首先通过动作流信息和存储在客户端的前一帧图像推断出当前帧的各像素位置；然后使用Herzog提出的双向加权方案给前一帧图像和当前帧低分辨图像中的时空上相邻的像素分别赋予权重，用加权和求出当前帧H_t中个像素的值，最终得到高分辨图像。