[发明专利]实时多媒体流处理带宽管理

说明书

技术领域

本发明涉及实时多媒体流处理，更具体地，涉及网络上多个摄影机的实时视频流处理。

背景技术

低成本、高分辨率视频摄影机的可用性便于其在各种应用和环境中扩散。在典型的分辨率、帧速率和色彩深度下，即使采用高级压缩技术，使产生的视频图像流动所需要的带宽也非常高。这反过来对基于IP的网络为不同类型的业务提供某一类型的服务质量(QoS)保证导致很大的挑战。现有技术通过人工地限制摄影机视图的分辨率和/或帧速率解决了带宽约束问题。该方法确实降低了带宽，但以图片质量为代价。

发明内容

现有技术的各种缺陷通过实时多媒体流处理方法和系统得到解决。具体地，该方法包括以下步骤：根据各自的编码特性对多个多媒体流的每一个进行转码，以提供转码多媒体流；向多个观看者转发每一个转码多媒体流；以及响应于来自一个或多个用户的指示偏好的反馈，修改与至少一个转码多媒体流相关联的编码特性，从而降低与所述至少一个转码多媒体流相关联的带宽要求。

另一个实施例提供一种系统，其具有视频管理器，其可通信地连接到一个或多个摄影机/编码器、一个或多个转码器和一个或多个传输处理器，该视频管理器接收观看者的视频偏好的标记，并响应地修改所述摄影机/编码器和转码器的编码特性，从而根据所述观看者视频偏好提供转码视频流。该系统还包括多个转码器，每个编码器用于将各自的具有初始特性的视频流转码成具有随后的视频特性的随后的视频流。作为该系统的一部分，传输处理器用于对多个转码视频流的每一个进行编码以用于传输；此外，传输处理器向观看者传送一个或多个转码视频流。

附图说明

通过结合附图并考虑以下的详细描述，本实施例的教导能够被容易地理解，其中：

图1描绘了根据一个实施例的实时视频流处理系统的框图；

图2图形化地示出根据一个实施例的视频会议的环境图；

图3图形化地示出根据一个实施例的设备中每个摄影机的优选布置；

图4图形化地示出根据一个实施例的实时视频流处理系统中的视频会议的全景图；

图5描绘了根据一个实施例的实时视频流处理系统中通过框内扩大(in-frame expansion)的观看者选择；

图6描绘了根据一个实施例的实时视频流处理系统中通过框选择的观看者选择；

图7描绘了根据一个实施例的实时视频流处理系统中编码器设备的框图；

图8描绘了根据一个实施例的实时视频流处理系统中视频转码器设备的框图；

图9描绘了根据一个实施例的实时视频流处理系统中传输处理器设备的框图。

为了便于理解，在可能的情况下，相同的附图标记用于表示附图中的相同单元。

具体实施方式

现有技术的各种缺陷可以例如通过在会议中将任意视图中的一个或多个远离说活者、向副视图提供更低的质量、集中于兴趣点并向兴趣点提供最高质量来解决。带宽策略基于用户以及应用的基于用户的带宽管理的想法通过将观看者的偏好结合到编码处理中并相应地分配带宽来实现。

通常，远程会议观看者(参加者)在任何一个时间只看整个视频的一小部分(即，场景)；此外，大多数观看者可能持续看同一个场景。例如，大多数的会议参加者集中于当前的说话者。观看者不能在他/她后面观看。另外，在外围视图内的场景是重要的，但眼睛通常不能提供与中心视图相同的分辨率和质量。

上述的实施例主要在实时视频流处理的上下文内进行描述；然而，本领域的普通技术人员和在此通过教导知道的人员将认识到本发明也可应用于期望带宽管理的多媒体系统。

图1描绘了根据一个实施例的实时视频流处理系统的框图。图1的系统100包括多个摄影机110-1至110-3，它们向各自的编码器120-1至120-3提供图像信号。摄影机110可包括本地或远程摄影机。来自每个编码器120的编码输出被馈送到各自的视频转码器170。编码器与转码器之间的链路在长度上可以是几英寸或几英里。另外，链路可以是电缆或光纤链路、微波链路、电话网络链路、这些链路的组合或任何其它适合的通信路径。

转码输出被馈送到传输处理器190，其进一步对流进行编码以用于向观看者传播。传输处理器分配与转码视频流的特性相符的带宽。在其它实施例中，副视图基于它们的相对重要性和可用的网络带宽而被分配带宽。