[发明专利]视频聊天的画面处理方法、装置和存储介质

权利要求书

1.一种视频聊天的画面处理方法，其特征在于，包括以下步骤：

获取当前用户的第一深度图像，并获取所述当前用户所在当前场景的第二深度图像，其中，所述第二深度图像表征包含所述当前用户的背景中各个人或物体的深度信息，所述当前用户的第一深度图像表征包含所述当前用户的背景中人物的深度信息；所述第二深度图像的场景范围与所述当前用户的第一深度图像的场景范围一致，且所述第二深度图像中的各个像素均能在所述第一深度图像中找到对应像素的深度信息；

根据所述第一深度图像和所述第二深度图像建立所述当前场景的三维模型，其中，所述当前场景的三维模型为所述当前场景的实际背景的三维模型，所述实际背景包括所述当前场景中被人物区域遮挡的背景部分和所述当前场景中除所述人物区域之外的其他背景区域；其中，所述被人物区域遮挡的背景部分是通过针对所述当前场景的多个叠加拍摄位置进行深度图像拍摄而获得的；

将所述当前场景的三维模型作为视频聊天背景显示在视频聊天画面；

其中，所述获取当前用户的第一深度图像，包括：

通过结构光投射器将散斑结构光投射到当前用户上，所述当前用户表面的高度差使得投射到所述当前用户上的散斑结构光的散斑图案发生变化，再利用结构光摄像头拍摄投射到所述当前用户上的散斑图案后，再利用散斑图案与预先标定所保存的多幅散斑图像逐一进行相关运算，以得到多幅相关度图像，空间中所述当前用户所在的位置在所述相关度图像上显示出峰值，将所述峰值进行叠加并经过插值运算后，以得到所述当前用户的深度图像。

2.如权利要求1所述的方法，其特征在于，所述获取当前用户的第一深度图像，包括：

向所述当前用户投射结构光；

拍摄经所述当前用户调制的结构光图像；

解调所述结构光图像的各个像素对应的相位信息以得到所述第一深度图像。

3.如权利要求2所述的方法，其特征在于，所述解调所述结构光图像的各个像素对应的相位信息以得到所述第一深度图像，包括：

解调所述结构光图像中的各个像素对应的相位信息；

将所述相位信息转化为深度信息；

根据所述深度信息生成所述第一深度图像。

4.如权利要求1所述的方法，其特征在于，所述根据第一深度图像和所述第二深度图像建立所述当前场景的三维模型，包括：

处理所述第一深度图像和所述第二深度图像以提取所述当前用户在所述第二深度图像中的人物区域而获得人物区域图像；

根据所述人物区域图像和所述第二深度图像，获得所述第二深度图像中除所述人物区域图像之外的其他背景区域图像；

获取针对所述当前场景的多个叠加拍摄位置，并获取在所述多个叠加拍摄位置上拍摄到的多张第三深度图像，所述多张第三深度图像包含所述当前场景中被所述人物区域遮挡的背景部分；

根据所述多张第三深度图像获取所述背景部分的深度信息；

将所述背景部分的深度信息合成至所述其他背景区域图像中，得到滤除所述人物区域后的背景深度图像；

根据所述背景深度图像建立所述当前场景的三维模型。

5.如权利要求4所述的方法，其特征在于，所述根据多张第三深度图像获取所述背景部分的深度信息，包括：

对于所述多个叠加拍摄位置中的每个叠加拍摄位置，计算所述叠加拍摄位置与原始拍摄位置之间的拍照角度差；

根据所述拍照角度差，计算所述叠加拍摄位置对应的投影面；

将所述叠加拍摄位置对应的第三深度图像投影在所述叠加拍摄位置对应的投影面上，得到待叠加的第三深度图像；

将所述待叠加的第三深度图像进行叠加，并从叠加后的第三深度图像中获取所述背景部分的深度信息。

6.如权利要求1至5中任一项所述的方法，其特征在于，还包括：

将所述当前场景的三维模型进行存储，构建多样化的三维背景数据库。