[发明专利]一种虚拟视点图像绘制方法

权利要求书

1.一种虚拟视点图像绘制方法，其特征在于包括以下具体步骤：

①获取t时刻的K个参考视点的尺寸大小为P×Q的K幅彩色图像及其对应的K幅 深度图像，将t时刻的第k个参考视点的彩色图像记为I_R，t^k，将t时刻的第k个参考视点 的深度图像记为D_R，t^k，将t时刻的第k个参考视点的彩色图像I_R，t^k划分成N_R^k个尺寸大小 为(p+Δp)×(q+Δq)的块，记第k个参考视点的彩色图像I_R，t^k中的第n个块为B_n^k，其中， k∈[1，K]，NRk=Pp×Qq,]]>1≤n≤NRk,]]>∪n=1NRkBnk=IR,tk,]]>Δp表示块B_n^k与其右相邻块之间重叠 的像素点的列数，0≤Δp≤p，当Δp＝0时表示块B_n^k与其右相邻块不重叠或表示块B_n^k为 第k个参考视点的彩色图像I_R，t^k的右边界处的块，Δq表示块B_n^k与其下相邻块之间重叠的 像素点的行数，0≤Δq≤q，当Δq＝0时表示块B_n^k与其下相邻块不重叠或表示块B_n^k为第 k个参考视点的彩色图像I_R，t^k的下边界处的块；

②定义第k个参考视点的彩色图像I_R，t^k中的第n个块B_n^k为当前块B_n^k，判断当前块B_n^k是否为平坦块，如果当前块B_n^k为非平坦块，则利用第k个参考视点的深度图像D_R，t^k所提 供的深度信息，采用公知的三维图像变换方法逐像素点计算当前块B_n^k中的各个像素点 在需绘制的虚拟视点彩色图像中的坐标位置，并将当前块B_n^k中的各个像素点逐像素点 地映射到需绘制的虚拟视点彩色图像中；如果当前块B_n^k为平坦块，则选取当前块B_n^k中 的一个像素点，再利用第k个参考视点的深度图像D_R，t^k所提供的该像素点的深度信息， 采用公知的三维图像变换方法计算该像素点在需绘制的虚拟视点彩色图像中的坐标位 置，得到把该像素点从第k个参考视点的彩色图像I_R，t^k映射到需绘制的虚拟视点彩色图 像中的坐标映射关系，并利用该坐标映射关系将当前块B_n^k中的各个像素点映射到需绘 制的虚拟视点彩色图像中，具体处理过程如下：a.任取当前块B_n^k中的一个像素点，记 该像素点的坐标为(x_c，y_c)，将该像素点到当前块B_n^k的左边界的距离记为Δx，将该像素 点到当前块B_n^k的下边界的距离记为Δy，则该像素点到当前块B_n^k的右边界的距离为 (p+Δp)-Δx-1，该像素点到当前块B_n^k的上边界的距离为(q+Δq)-Δy-1；b.利用第k 个参考视点的深度图像D_R，t^k所提供的坐标为(x_c，y_c)的像素点的深度信息，采用公知的三 维图像变换方法计算坐标为(x_c，y_c)的像素点在需绘制的虚拟视点彩色图像中的坐标位 置，记计算得到的坐标位置为(x′_c，y′_c)；c.计算需绘制的虚拟视点彩色图像中坐标为 (x′，y′)的像素点的像素值，其中，(x′_c-Δx)≤x′≤(x′_c+((p+Δp)-Δx-1))， (y′_c-Δy)≤y′≤(y′_c+((q+Δq)-Δy-1))，记由第k个参考视点的彩色图像I_R，t^k和第k个参 考视点的深度图像D_R，t^k绘制得到的虚拟视点彩色图像为I_D，t^k，记虚拟视点彩色图像I_D，t^k中 坐标为(x′，y′)的像素点的像素值为I_D，t^k(x′，y′)，ID,tk(x′,y′)=IR,tk(xc+x′-xc′,yc+y′-yc′),]]>其中，I_R，t^k(x_c+x′-x′_c，y_c+y′-y′_c)为第k个参考视点的彩色图像I_R，t^k中坐标为 (x_c+x′-x′_c，y_c+y′-y′_c)的像素点的像素值；在采用公知的三维图像变换方法确定平坦块 和非平坦块的映射关系时，如果需绘制的虚拟视点彩色图像I_D，t^k中坐标为(x′，y′)的像素 点与第k个参考视点的彩色图像I_R，t^k中的多个像素点相对应，则虚拟视点彩色图像I_D，t^k中 坐标为(x′，y′)的像素点的像素值I_D，t^k(x′，y′)取第k个参考视点的彩色图像I_R，t^k中与坐标为 (x′，y′)的像素点对应的多个像素点中深度值最小的像素点的像素值；

③重复步骤②将第k个参考视点的彩色图像I_R，t^k中的所有块全部映射到需绘制的虚 拟视点彩色图像I_D，t^k中，得到由第k个参考视点的彩色图像I_R，t^k和第k个参考视点的深度 图像D_R，t^k绘制的虚拟视点彩色图像I_D，t^k；

④重复步骤①～③直至得到由K个参考视点的彩色图像和其对应的深度图像分别 绘制的K幅虚拟视点彩色图像，K幅虚拟视点彩色图像用集合表示为{ID,tk|1≤k≤K};]]>

⑤采用图像融合方法融合由K个参考视点的彩色图像和其对应的深度图像分别绘 制得到的K幅虚拟视点彩色图像，得到融合后的虚拟视点彩色图像，记融合后的虚拟视 点彩色图像为I′_D，t并对融合后的虚拟视点彩色图像I′_D，t中的空洞像素点进行填补，得到 最终的虚拟视点彩色图像，记最终的虚拟视点彩色图像为I_D，t。