[发明专利]图像帧复用方法及系统

说明书

技术领域

描述的实施例涉及图像处理过程，且尤其涉及将多个图像帧编码并解码为减小数量的复用帧。

背景技术

任何现有的图像数据传输或处理基础设施通常具有有限的数据带宽。该带宽通常足以服务于为该基础设施被设计用于的功能(例如，以指定分辨率或质量提供视频)。然而，一旦需要增强的或新的功能(例如，希望传输更高图像质量的视频)，通常需要升级或更换该基础设施。该升级或更换过程可涉及改变硬件、软件和/或部件之间的网络连接(特别是如果对于新功能更高的数据带宽是必要的，而系统的算法和协议保持不变的情况下)。

例如，数字电影视频通常以每秒24帧的帧速率(fps)提供，每一帧传统上以已知为2K(2048×1080或2.2兆像素)，或4K(4096×2160或8.8兆像素)的分辨率提供。为了在电影院中以该帧速率和分辨率显示电影视频，电影院通常包含具有足够带宽的基础设施以将电影视频传输到显示装置(例如，投影仪)。

摄像机技术的最新发展已经允许以更高帧速率捕获数字电影视频(通常称HFR视频)。例如，这些视频的帧速率可提供在指定空间分辨率的48fps、60fps或甚至120fps。针对HFR视频，大大增加了要传输到显示装置的数据量。

随着技术的发展，数字电影视频可能开始以高于2K和4K的图像空间分辨率提供。即使在现有的帧速率，这些校高分辨率视频流也可能会增加传输到显示装置的数据量。

而且，多视点视频流正得到普及(例如，提供三维(3D)观看体验的立体视频流)。这些类型的视频流比正常的单视点(例如，二维(2D))视频流需要更高的传输带宽。

电影院的现有基础设施可能无法提供足够的带宽，以将这些较新类型的视频流传输到显示装置。升级现有的基础设施，特别是硬件、软件和/或系统连接带宽是代价高的或不可取的。因此，需要可选地改善编码和解码图像流中的图像帧的现有方法或系统，以允许在现有的有限带宽的基础设施上传输新类型视频流的图像帧。

发明内容

在一个方面中，本发明的一些实施例提供了一种动态帧打包方法，该方法包括：

识别多个图像帧；

修改多个图像帧中的每一帧以产生多个对应的经处理帧；

产生掩码数据(maskingdata)，该掩码数据指示如何可以由多个经处理帧中的一个帧和多个经处理帧中的另一个帧产生输出帧，该输出帧对应于多个经处理帧中的另一个帧；和

组合多个经处理帧和掩码数据以形成复用帧。

在另一个方面中，本发明的一些实施例提供了一种解码复用帧的方法，该方法包括：

接收复用帧，该复用帧包括：

多个经处理的帧，和

掩码数据；

解包复用帧以识别多个经处理帧和掩码数据；和

由多个经处理帧产生多个输出帧，其中该产生包括通过将多个经处理帧中的一个帧与多个经处理帧中的另一个帧根据掩码数据组合在一起产生输出帧，并且其中该输出帧对应于多个经处理帧中的另一个帧。

在另一个方面中，本发明的一些实施例提供了一种传送复用帧的方法，该方法包括：

识别图像帧流；

从图像帧流中选择多个图像帧；

修改多个图像帧中的每一帧以产生多个对应的经处理帧；

产生掩码数据，该掩码数据指示如何可以由多个经处理帧中的一个帧和多个经处理帧中的另一个帧产生输出帧，该输出帧对应于多个经处理帧中的另一个帧；和

组合多个经处理帧和掩码数据以形成复用帧；

压缩复用帧以产生经压缩帧；和

传输该经压缩帧。

在另一个方面中，本发明的一些实施例提供了一种显示复用帧的方法，该方法包括：

接收经压缩帧；

解压缩该经压缩帧以产生复用帧，其中该复用帧包括：

多个经处理帧，和

掩码数据；

解包复用帧以识别多个经处理帧和掩码数据；和

由多个经处理帧产生多个输出帧，其中该产生包括通过将多个经处理帧中的一个帧与多个经处理帧中的另一个帧根据掩码数据组合在一起产生输出帧，并且其中该输出帧对应于多个经处理帧中的另一个帧；和

将多个输出帧传输到至少一个显示装置。

在另一个方面中，本发明的一些实施例提供了一种用于传输复用帧的系统，该系统包括：

接收模块，其配置为接收多个图像帧；

编码模块，其配置为：

修改多个图像帧中的每一帧以产生多个对应的经处理帧；