[发明专利]用于将2维内容实时转换为3维内容的方法和设备

说明书

对相关申请的交叉引用

本申请参考于2012年3月28日提交的序列号为13/432,065的美国专利申请，其全部内容通过引用合并于此。

本申请参考于2011年2月28日提交的序列号为13/036,656的美国专利申请，其全部内容通过引用合并于此。

技术领域

本公开内容的各种实施例涉及内容转换。更具体地，本公开内容的各种实施例涉及将2维(2D)内容实时转换为3维(3D)内容的方法和设备。

背景技术

消费者电子装置的制造者在尝试利用可用的有限的存储器空间而不影响处理能力时必须处理效率相关的问题。尤其是，在将二维内容实时转换为三维内容期间，消费者电子装置需要高的处理能力和大的存储器空间。因此，存在对高效的2D到3D内容转换系统的需求。

通过比较这样的具有在本申请的其余部分中参照附图阐述的本公开内容的一些方面的系统，常规的和传统的方法的其它局限性和缺点对于本领域的技术人员来说将变得明显。

发明内容

用于将2维内容实时转换为3维内容的方法和设备基本上在附图中的至少一个中被示出，并且/或者结合附图中的至少一个被描述，如权利要求中更全面地阐述的。

通过与附图一起来阅读本公开内容的下面的详细描述，可以认识到本公开内容的这些和其它的特征和优点，在附图中，相同的附图标记始终表示相同的部分。

附图说明

图1是示出根据本公开内容的实施例的用于实时2D至3D转换的网络环境的框图。

图2是根据本公开内容的实施例的计算装置的框图。

图3示出根据本公开内容的实施例的图像帧。

图4A至图4C是示出根据本公开内容的实施例的图像帧中的像素行的示例图。

图5是示出根据本公开内容的实施例的用于在计算装置处提供实时2D至3D转换的示例性步骤的流程图。

图6是示出根据本公开内容的另一个实施例的用于在计算装置处提供实时2D至3D转换的示例性步骤的流程图。

具体实施方式

可以在用于提供2维内容到3维内容的实时转换的方法和/或设备中发现各种实施方式。

本公开内容的示例性方面可以包括用于视频处理的计算装置。在实施例中，计算装置可以确定图像帧中的像素子集的平均垂直速度和/或平均水平速度。基于与像素子集中的像素相关联的计算出的运动向量、平均垂直速度和平均水平速度，可以确定像素子集中的每个像素的深度值。

运动向量算法可能无法计算图像帧中的均质的区域内的像素的运动向量。对于进一步的计算，可以考虑与均质的区域内的这种像素相对应的运动向量。在实施例中，可以提供与图像帧相对应的运动向量作为输入。与一个或多个像素相对应的运动向量可能是未知的，或者可能在给定的输入中未定义。具有未知的运动向量和/或未定义的运动向量的这种像素可能不具有预定的运动向量，由此，可能不包括在用于深度计算的像素子集中。

在实施例中，基于与像素子集中的像素相关联的计算出的运动向量、图像帧的平均垂直像素速度和图像帧的平均水平像素速度，可以确定像素子集中的每个像素的深度值。可以基于图像帧中具有预定的运动向量的像素来计算平均垂直像素速度和平均水平像素速度。基于与图像帧的像素相关联的深度值，计算装置可以产生用于图像帧的立体图像对。立体图像对可以包括左图像和右图像，在左图像中，图像帧中的每个像素可以向左偏移特定的值，并且，在右图像中，图像帧中的每个像素可以向右偏移特定的值。特定的值可以与同图像帧中的每个像素相关联的深度值成比例。在实施例中，像素子集可以属于图像帧中的一行或多行像素。

在实施例中，图像帧可以是二维(2D)图像帧。在实施例中，图像帧可以是具有缩小尺寸的像素分辨率的二维(2D)图像帧。在实施例中，计算装置可以从外部装置和/或本地存储器中的一个或两个接收图像帧。计算装置可以包括电视机、智能电话、平板计算机、膝上型计算机和/或桌上型计算机中的一个或多个。外部装置可以包括视频播放器、机顶盒、个人视频记录器、摄像机和/或云服务器中的一个或多个。

图1是示出根据本公开内容的实施例的用于实时2D至3D转换的网络环境的框图。参照图1，示出网络环境100。网络环境100可以包括计算装置102、一个或多个外部装置104(例如，视频播放器104a、机顶盒104b、个人视频记录器104c、云服务器104d、摄像机104e)和通信网络106。尽管如此，本公开内容并不限于此，并且可以在不限制本公开内容的范围的情况下采用其它的外部装置。