[发明专利]一种图像拼接方法和设备

说明书

技术领域

本发明涉及通讯技术领域，尤其涉及一种图像拼接方法和设备。

背景技术

现有技术中，视频会议系统通过网络通讯技术实现虚拟会议，实时传输 各个会场的图像和声音，使得地理上分散的各个会场从逻辑上位于一个会议 中。通过图像、声音等多种方式交流信息，实现位于各个会场的与会者间的 交流。视频会议在最大程度上缩短了空间距离，实现了各个会场的与会者间 实时且直观的交流。

目前的视频会议系统中，对于各个会场，通常采用一个摄像头采集会场 图像(通常情况下，发言者所在会场的摄像头采集发言人图像，其他会场的 摄像头采集会场全景图像)，经过编码后发送给会议中的其他会场，其他会场 中的视频设备经过解码后进行显示，从而得到远端会场的更多信息。但是一 个摄像头的采集范围非常有限，不能采集到大范围宽视角的会场信息。目前 有很多设备支持双流功能，采用两个摄像头采集不同的图像(发言人图像和 会场全景图像)，通过两路码流发送给会议中的其他会场。该方法虽然可以同 时传送两路图像，但两路图像之间没有相关性，因此不能起到拓宽视角的作 用。

另外，现有的视频会议系统中逐步采用了高清格式标准，即1080P或720P 的图像分辨率，通过使用16∶9的广角摄像头在会议中传输横宽比为16∶9的图 像，视角较标清系统(采用横宽比为4∶3的图像)有所增加，使视频会议系统 中能够显示的会场信息有所增加。16∶9的图像与4∶3的图像相比，在水平方向 上视角增加了1/3，但用户仍不能根据所需观看的会场信息的需要，自由选择 增加竖直方向或水平方向的视角。

发明内容

本发明提供一种图像拼接方法和设备，用于在视频会议中根据需要增加 竖直方向或水平方向的视角。

为达到上述目的，本发明提供了一种图像拼接方法，包括：

在接收多条码流之前，接收端与码流的发送端协商获取多条码流的拼接 配置，或者接收端和发送端分别与多点控制单元MCU协商获取关于接收到的 多条码流的拼接配置；该拼接配置包括：横向参数M，用于表示由M×N个 图像采集装置构成的系统中位于水平方向的图像采集装置的数量；纵向参数 N，用于表示由M×N个图像采集装置构成的系统中位于垂直方向的图像采集 装置的数量；码流序列，用于标识每一码流与M×N个图像采集装置中的一 图像采集装置的对应关系；

所述接收端根据所述关于接收到的多条码流的拼接配置，对接收到的多 条码流中的图像进行拼接。

所述根据关于接收到的多条码流的拼接配置，对接收到的多条码流中的 图像进行拼接包括：

根据所述接收到的多条码流中携带的同步标识，获取所述多条码流中每 一帧的时间先后关系；

根据所述码流序列，获取每一码流的标识与M×N个图像采集装置中的 图像采集装置的对应关系；根据所述横向参数以及纵向参数，获取每一图像 采集装置在所述M×N个图像采集装置中的位置；

根据所述每一码流的标识所对应的图像采集装置、以及每一图像采集装 置在所述M×N个图像采集装置中的位置，将所述多条码流中具有相同时间 的帧解码得到的图像进行拼接。

其中，所述根据所述每一码流所对应的图像采集装置、以及每一图像采 集装置在所述M×N个图像采集装置中的位置，将所述多条码流中具有相同 时间的帧解码得到的图像进行拼接前，还包括：

根据所述每一码流所对应的图像采集装置、每一图像采集装置在所述M ×N个图像采集装置中的位置、以及图像采集装置的参数，将所述多条码流 中解码得到的图像中存在的重叠区域进行裁剪。

其中，发送端与所述接收端间通过MCU通信时，所述发送端与所述MCU 协商得到所述MCU接收到的多条码流的第一拼接配置，MCU与接收端的协 商得到所述接收端接收到的多条码流的第二拼接配置；其中，所述第一拼接 配置中的码流序列，用于标识MCU从发送端接收到的每一码流与M×N个图 像采集装置中的一图像采集装置的对应关系；所述第二拼接配置中的码流序 列，用于标识接收端从MCU接收到的每一码流与M×N个图像采集装置中的 一图像采集装置的对应关系；

所述接收端根据所述关于接收到的多条码流的拼接配置，对接收到的多 条码流中的图像进行拼接之前，还包括：

所述发送端将本地采集装置采集到的多条码流中分别添加同步标识后向 所述MCU发送；