[发明专利]多画面处理方法、多点控制单元及视频系统

说明书

技术领域

本发明涉及通信领域，具体而言，涉及多画面处理方法、多点控制单元及 视频系统。

背景技术

多点视频通讯需求越来越大，每台局端设备容量有限，需要多台局端设备 级联来解决容量问题，局端设备也可以称为多点控制单元(MultiControlUnit， 简称为MCU)。

目前，在多点视频通讯中通常会使用多画面功能，在相关技术中，多画面功 能的实现是基于每台局端设备(MCU)内部多点实现的，级联时由于局端设备 (MCU)间的带宽有限，一般只有一路图像的带宽，很难实现多个子画面在不 同局端设备的多画面功能。针对这个问题有多种解决方案，例如，最简单的解 决方案就是多通道级联，这种方案牺牲了的局端间的带宽。

针对相关技术中使用简单的多通道级联来实现多画面功能所导致的问题，目 前尚未提出有效的解决方案。

发明内容

本发明提供了多画面处理方法、多点控制单元及视频系统，以至少解决相 关技术中使用简单的多通道级联来实现多画面功能所导致的问题。

根据本发明的一个方面，提供了一种多画面处理方法，包括：一个或多个多 点控制单元MCU中的每个MCU将多画面布局中的本MCU下的终端的视频图 像按照所述多画面布局进行缩放合成；所述每个MCU将合成后的视频图像进行 编码并发送；终点MCU将接收到所述每个MCU发送的合成后的视频图像解码 并提取每个终端的视频图像；所述终点MCU使用提取到的视频图像以及所述终 点MCU下的终端的视频图像按照所述多画面布局进行合成并发送合成后的视频 图像。

进一步地，所述方法还包括：根据预定规则从多个MCU中协商并确定一个 MCU作为所述终点MCU。

进一步地，所述预定规则包括以下至少之一：选择特定终端所在MCU为终 点MCU、带宽最大的MCU作为终点MCU、选择运算处理能力最强的MCU作 为终点MCU、选择空闲资源最多的MCU作为终点MCU、根据管理员的设置确 定终点MCU。

进一步地，所述方法还包括：所述终点MCU获取所述每个MCU所能够使 用的带宽资源；所述每个MCU将合成后的视频图像进行编码并发送包括：所述 每个MCU按照其所能使用的带宽将合成后的视频图像进行编码并发送。

进一步地，所述终点MCU使用提取到的视频图像以及所述终点MCU下的 终端的视频图像按照所述多画面布局进行合成并发送合成后的视频图像包括： 所述终点MCU获取另一MCU发送多画面的信息，所述信息用于表示所述另一 MCU所需要的终端的视频图像；所述终点MCU根据所述信息将所述另一MCU 所需要的终端的视频图像按照上述多画面布局进行合成并向终端和/或需要此合 成图像的MCU发送合成后的视频图像。

根据本发明的另一个方面，提供了一种多画面处理方法，包括：多点控制单 元MCU将多画面布局中的本MCU下的终端的视频图像按照所述多画面布局进 行缩放合成，将合成后的视频图像进行编码并发送；或者，所述MCU接收其他 MCU发送的按照所述多画面布局合成后的视频图像并进行解码以及提取每个终 端的视频图像，使用提取到的视频图像以及该MCU下的终端的视频图像按照所 述多画面布局进行合成并发送合成后的视频图像。

进一步地，所述方法还包括：所述MCU与所述其他MCU根据预定规则进 行协商并确定作为所述终点MCU的MCU；在所述MCU未作为终点MCU的情 况下，所述MCU将多画面布局中的本MCU下的终端的视频图像按照所述多画 面布局进行缩放合成，将合成后的视频图像进行编码并发送；在所述MCU作为 终点MCU的情况下，所述MCU接收所述其他MCU发送的按照所述多画面布 局合成后的视频图像并进行解码以及提取每个终端的视频图像，使用提取到的 视频图像以及所述MCU下的终端的视频图像按照所述多画面布局进行合成并发 送合成后的视频图像。

进一步地，所述预定规则包括以下至少之一：选择特定终端所在MCU为终 点MCU、选择带宽最大的MCU作为终点MCU、选择运算处理能力最强的 MCU作为终点MCU、选择空闲资源最多的MCU作为终点MCU、根据管理员 的设置确定终点MCU。

进一步地，所述MCU将合成后的视频图像进行编码并发送包括：所述 MCU按照其所能使用的带宽将合成后的视频图像进行编码并发送，其中，所能 使用的带宽为所述终点MCU确定的。