[发明专利]一种基于融合深度线索的全自动二维转三维方法和装置

摘要

本发明针对当前全自动2D转3D系统提取深度信息不准确，立体感受不舒适等缺点，提出了一种融合运动视差和色彩两种深度线索的全自动2D到3D的转换方法和装置。本发明将运动视差和色彩两种深度线索以适当的方式融合起来作为提取深度信息的依据，充分利用了两种深度线索的优势，使提取的深度图适用于更多的场景条件，更加准确。用户通过简单的参数设置就对二维的图片序列或者视频进行深度图的提取，并能够合成三维立体视频，在三维视频生成领域有着实际的应用价值。

主权项

一种基于融合深度线索的全自动2D转3D方法，根据运动视差和Cr色度分量两种深度线索的适当组合提取深度图，然后利用基于深度图的渲染技术合成立体视图，其特征在于：利用光流的方法计算运动向量，将运动向量量化为深度值；同时利用原始二维图像的Cr色度分量提取深度信息；最后将两种深度值根据人工设置的权重进行加权，从而获得融合的深度图，具体步骤如下：(1)利用光流的方法进行运动估计：利用光流的方法对图片序列或者视频的当前帧和之后一帧进行运动估计，为了提高计算速度，在运动估计之前对图像进行下采样；(2)将根据运动估计获得的深度图与Cr色差分量表示的深度图进行融合：根据运动向量坐标值计算前后两帧对应运动匹配点间的欧式距离，并根据映射函数量化为最大为255的深度值，然后，提取当前帧图像的Cr色度分量的值作为根据Cr色度分量提取的深度值，最后，将运动向量量化后的深度值和根据Cr色度分量提取的深度值按照人工设定的权重进行加权，获得最终的融合深度图；(3)立体视图合成：根据人工设置的最大视差，利用深度图和原始二维视图，通过基于深度图的渲染技术合成左右眼视图。