[发明专利]用于基于用户偏好调节3D视频渲染的3D视频控制系统

说明书

本申请要求于2010年10月4日提交的美国临时申请61/389,372的优先权，其整体内容被合并于此作为参考。

技术领域

本发明涉及多媒体数据的渲染和处理，并且更具体地，涉及三维图像和视频数据的渲染和处理。

背景技术

立体视频处理的计算复杂度在三维（3D）图形的渲染中是很重要的，尤其是在诸如移动电话、移动媒体播放器、个人数字助理（PDA）设备等等之类的低功率（即电池供电）设备中的3D场景的可视化中。在一些电影、视频游戏、用户界面和其他3D图形应用的呈现中，3D场景的可视化是有帮助的。

通常，在具有立体能力的显示器（例如，自由立体（auto-stereoscopic）显示器或立体（stereoscopic）显示器）上的3D图形渲染中的困难来自于立体视频处理的高效性和真实性方面。低功率设备的有限计算资源会导致3D图形渲染成为一种耗时过大的例程。尽管为了增加立体视频处理的性能而进行了可观的努力，但是仍然希望有着进一步的提高。

另外，还希望实现允许用户定制其观看体验的能力。当将同一场景的两个视图分别呈现给左眼和右眼时，人类视觉系统（HVS）感知到深度。平面型3D显示器，无论是立体型的还是自由立体型的，都依赖于分别向左眼和右眼提供两个不同的视图，这种方式与眼睛直接观看场景时所感知的情况相一致。因此，位于场景中不同深度处的点在这两个视图中会被不同地进行偏移。这种位置上的偏移在指代图像时被称为视差（disparity），而当该位置在屏幕上时，被称为视差（parallax）。

当在左视图中一个给定点在屏幕上的位置在右视图中该点在屏幕上的位置的左侧时，该点的视差为正。如果在左视图中该点在屏幕上的位置在右视图中该点在屏幕上的位置的右侧，则视差为负。如果两个视图中的位置相同，则视差为空。在包含全部具有零视差的点的空间中的位置已知为会聚平面（convergence plane）。负视差提供了凸出效果，而正视差则提供了凹入效果（如同穿过一个孔或窗来观看）。

在给定了诸如屏幕属性和观看距离之类的特定观看条件的情况下，存在一个每个人能够使得他们的眼睛会聚的最大图像视差。其被称为可熔范围（fusible range）。正负视差的范围不是对称的，并且取决于各个人。屏幕视差（parallax）的可感知视网膜视差（retinal disparity）取决于图像视差、屏幕上像素的间距（与屏幕的大小和分辨率有关）以及观看距离。由于各个人眼睛的差异以及观看条件的不同，对于不同的观看者而言，用于渲染最佳3D内容的参数的有效性会是不同的。

发明内容

本发明描述了用于基于从用户接收到的用户偏好数据来修改3D图像数据的技术。在一些实例中，可以在第一设备处接收用户偏好数据并将其用于调节由第一设备产生的供显示设备呈现的3D图像数据。在另一实例中，第一设备可以接收用户偏好数据并将其发送至显示设备，以便显示设备可以基于用户偏好数据来调节3D图像数据。在这两种情况中任一种中，都可以基于用户偏好数据来调节3D图像数据，以便能够支持按照用户期望的方式在显示设备上呈现和观看3D图像。在一些实例中，该第一设备可以是移动设备，诸如移动电话、移动媒体播放器、个人数字助理（PDA）设备等等。3D用户观看偏好的实例可以包括：图像中凸出效果的量、图像的立体基线、图像的深度范围、图像的空间分布、图像中的深度锐化程度（degree of depth sharpness）、或者对用户主眼（dominant eye）的指定。

在一个实例中，一种系统包括用户接口模块，其被配置为接收用于3D图像内容的呈现的用户偏好数据；视差估计模块，其被配置为存储基于与所述3D图像内容相关联的视差值的视差图；以及，视差处理模块，其被配置为基于所述用户偏好数据修改所述视差图。

在另一个实例中，一种方法包括：接收用于3D图像内容的呈现的用户偏好数据；存储基于与所述3D图像内容相关联的视差值的视差图；基于所述用户偏好数据来修改所述视差图；基于所修改的视差图来产生3D视频。

在另一个实例中，一种有形计算机可读存储介质存储了一个或多个指令，所述指令当被一个或多个处理器执行时使得所述一个或多个处理器：接收用于3D图像内容的呈现的用户偏好数据；存储基于与所述3D图像内容相关联的视差值的视差图；基于所述用户偏好数据来修改所述视差图；以及，基于所修改的视差图来产生3D视频。