[发明专利]一种图像处理方法及设备

说明书

本发明实施例公开了一种图像处理方法和设备。其中，所述方法包括：采集物体的视频图像和深度图像；利用所述深度图像对同一时刻的所述视频图像对应的视频图像帧进行分割，得到所述视频图像帧中前景图像的轮廓；根据所述前景图像的轮廓，对所述视频图像帧中所述前景图像的轮廓以内的视频图像像素点进行第一编码，对所述视频图像帧中所述轮廓以外的视频图像像素点进行第二编码，获得所述视频图像帧对应的编码数据，其中，所述第一编码的编码速率高于所述第二编码的编码速率；输出所述视频图像帧对应的编码数据以及所述前景图像的轮廓对应的深度数据。通过本发明实施例，使得可以降低视频图像传输过程中的网络带宽占用率。

技术领域

本发明涉及图像数据处理技术领域，特别是涉及一种图像处理方法及设备。

背景技术

浸入式会议系统是下一代多媒体会议系统的典型，它能够提供更加逼真，身临其境的用户体验。其通常会应用诸如：高清音/视频、立体声、3D视频、增强现实等新技术来让用户在参加会议时能够有一种浸入式的体验。

通常，浸入式会议系统中包含两种摄像头，一种是传统的彩色摄像头，可以捕获用户的彩色图像；还有一种是深度摄像头，可以捕获用户与摄像头的距离的深度图像。深度信息摄像头捕获的深度信息为后续3D图像的合成、骨骼识别和追踪等技术都有很大的帮助。

现有的浸入式会议系统中，进行会议系统的视频图像合成时，网络带宽的占用率较高。

发明内容

本发明实施例中提供了一种图像处理方法及设备，实现视频图像中不同用户关注度的图像的分割，并对分割图像采用不同的编码方式，使得可以降低视频图像传输过程中的网络带宽占用率。

为了解决上述技术问题，本发明实施例公开了如下技术方案：

第一方面，提供一种图像处理方法，包括：

采集物体的视频图像和深度图像；

利用所述深度图像对同一时刻的所述视频图像对应的视频图像帧进行分割，得到所述视频图像帧中前景图像的轮廓；

根据所述前景图像的轮廓，对所述视频图像帧中所述前景图像的轮廓以内的视频图像像素点进行第一编码，对所述视频图像帧中所述轮廓以外的视频图像像素点进行第二编码，获得所述视频图像帧对应的编码数据，其中，所述第一编码的编码速率高于所述第二编码的编码速率；

输出所述视频图像帧对应的编码数据以及所述前景图像的轮廓对应的深度数据。

结合上述第一方面，在第一种可能的实现方式中，所述利用所述深度图像对同一时刻的所述视频图像对应的视频图像帧进行分割，得到所述视频图像帧中前景图像的轮廓，包括：

将所述视频图像帧的深度图像与视频图像进行像素对齐；

计算所述深度图像上每个像素点与各个相邻像素点的深度差值，确定像素点中与所有所述相邻像素点的深度差值的方差大于预设阈值的像素点为分割点；

遍历所述深度图像上全部像素点，确定出所有分割点；

根据所述所有分割点，得出所述视频图像中前景图像的轮廓。

结合上述第一方面，在第二种可能的实现方式中，所述输出所述轮廓对应的深度数据，包括：

根据所述轮廓，将所述深度图像简化为二值图像；

将所述二值图像进行编码处理，输出所述二值图像对应的编码数据。

结合上述第一方面，和第一种可能的实现方式，在第三种可能的实现方式中，所述输出所述前景图像的轮廓对应的深度数据，包括：

获取所述所有分割点中每一个分割点的坐标信息；