[发明专利]一种基于图像分割的视频会议系统编码传输方法

说明书

本发明提供一种基于图像分割的视频会议系统编码传输方法，包括：编码流程开始时，根据实时检测到的网络条件，对预先设定的变化域值进行实时调节，从而得到与当前网络条件相适配的图像单元变化域值；编码端对图像帧进行人脸识别和分割，分割成人脸图像和背景图像，同时得到人脸图像在背景图像上面的位置信息；对人脸图像进行编码，并和位置信息打包发送给解码端；对于背景图像，如果前后背景图像的变化程度不超过图像单元变化域值，则不编码和发送；否则进行编码和发送；解码端进行解码。本发明达到在网络带宽有限的情况下，自动调节编码，减少视频通讯需要的码率，同时保证视频通讯中的重要信息即：人脸图像的流畅性，避免卡顿现象。

技术领域

本发明属于视频编码传输技术领域，具体涉及一种基于图像分割的视频会议系统编码传输方法。

背景技术

视频会议系统是一种基于网络的多媒体通信系统，其核心功能是多人视频通讯，目前，主要采用以下方式实现：对于每个会议人，实时采集视频图像，其中，每帧视频图像同时包含人脸图像以及背景图像；然后，对采集到的每帧视频图像进行编码，再将编码后的视频图像发送给其他会议人。

上述视频会议系统具有以下问题：传输的每帧编码后的视频图像会占用较多的码率，因此，在带宽一定的条件下，多人同时在线时常常发生带宽不够的情况，从而导致图像模糊以及视频卡顿，影响会议体验。

发明内容

针对现有技术存在的缺陷，本发明提供一种基于图像分割的视频会议系统编码传输方法，可有效解决上述问题。

本发明采用的技术方案如下：

本发明提供一种基于图像分割的视频会议系统编码传输方法，包括以下步骤：

步骤1，编码端对摄像头采集的图像序列进行实时编码并传输给解码端，具体包括：

步骤1.1，当编码流程开始时，变化域值调节模块根据实时检测到的网络条件，对预先设定的变化域值进行实时调节，从而得到与当前网络条件相适配的图像单元变化域值d；

编码端实时接收摄像头采集的原视频图像序列；所述原视频图像序列由多个图像帧按次序组成；其中，每个图像帧均具有唯一的图像帧序列号；图像帧序列号从1开始逐渐增加；

步骤1.2，每当编码端接收到图像帧i时，其中，i为图像帧序列号，编码端对图像帧i进行人脸识别，检测出图像帧i的人脸区域，然后，根据人脸区域，将图像帧i分割成人脸图像A_i和背景图像B_i，同时得到人脸图像A_i在背景图像B_i上面的位置信息P_i；

步骤1.3，对于人脸图像A_i，编码端对人脸图像A_i进行视频压缩编码，得到人脸图像码流M_ai；然后将人脸图像码流M_ai和位置信息P_i打包，得到人脸图像码流数据包E_i，并将人脸图像码流数据包E_i传输给解码端；

对于背景图像B_i，编码端判断当前的背景图像B_i对应的图像帧序列号i是否为1，如果等于1，则编码端对背景图像B_i进行视频压缩编码，得到背景图像码流M_bi；然后将背景图像码流M_bi和位置信息P_i打包，得到背景图像码流数据包F_i，并将背景图像码流数据包F_i传输给解码端；