[发明专利]一种图像处理方法及显示设备

说明书

本申请涉及交互技术领域，涉及一种图像处理方法及显示设备，该方法从视频流中选取视频帧并解码，得到时间戳相同的第一图像和第二图像，所述第二图像与所述第一图像的分辨率相同，所述视频帧携带用户所在环境的光照类型；根据所述光照类型，对所述第一图像进行滤光处理；根据所述第一图像和所述第二图像，确定所述待渲染像素点的目标颜色值；根据所述待渲染像素点的目标颜色值，渲染所述用户在虚拟空间对应的人物模型，并显示渲染后的图像，通过第一图像和第二图像融合渲染人物模型，可以减少人物与背景边界处像素点的颜色值的影响，并且滤光处理后，显示的人物模型与虚拟空间更加协调，从而提高虚拟交互过程中图像的显示质量。

技术领域

本申请涉及交互技术领域，尤其涉及一种图像处理方法及显示设备。

背景技术

一般视频会议或者视频通话场景中，大多是显示设备通过显示对方的视频图像与本方的视频图像的方法进行多人通信，此交互过程中，双方通过显示屏幕上显示的多个视频图像了解视频状态。

为了提高视频过程中的沉浸感，衍生出一种新式的视频通信方法一虚拟通信，交互双方的发射端设备通过对摄像头采集的用户图像进行人物抠图处理，并为抠出的人物区域添加纯色背景，编码后发送给接收端设备；接收端设备对各个发送端设备发送的图像解码后，对纯色背景进行颜色值的替换，从各个图像中得到的人物模型，并将各个人物模型摆放到虚拟空间中的不同的位置处，使交互双方感觉像在同一个场景下中进行对话。

由于图像编码过程中，对人与背景边界处的像素点的颜色值进行了插值计算，导致边界处的像素点的颜色值存在失真，这样，接收端设备进行颜色替换时，会产生纯色背景的遗留，导致最后显示的图像中人物的周围就像增加了一个带有色彩的光圈一样，模糊不清，显示质量较差。

发明内容

本申请提供了一种图像处理方法及显示设备，用以提高虚拟交互过程中图像的显示质量。

第一方面，本申请提供一种对图像进行处理的显示设备，包括：

所述显示器，与所述图形处理器连接，被配置为显示渲染后的图像；

所述存储器，与所述图形处理器连接，被配置为存储计算机程序指令；

所述图形处理器，被配置为根据所述计算机程序指令，执行以下操作：

从视频流中选取视频帧并解码，得到时间戳相同的第一图像和第二图像，所述第二图像与所述第一图像的分辨率相同，所述视频帧携带用户所在环境的光照类型；

根据所述光照类型，对所述第一图像进行滤光处理；

根据所述第一图像和所述第二图像，确定所述待渲染像素点的目标颜色值；

根据所述待渲染像素点的目标颜色值，渲染所述用户在虚拟空间对应的人物模型，并显示渲染后的图像。

第二方面，本申请提供一种对图像进行处理的显示设备，包括摄像头、存储器、图形处理器：

所述摄像头，与所述图形处理器连接，被配置为采集图像；

所述存储器，与所述图形处理器连接，被配置为存储计算机程序指令；

所述图形处理器，被配置为根据所述计算机程序指令，执行以下操作：

采集视频交互过程中用户的第一图像；

根据所述第一图像，识别所述用户所在环境的光照类型；

对所述第一图像进行人物抠图处理，根据抠出的人物区域生成所述用户的第二图像，所述第二图像与所述第一图像的分辨率相同；

对所述第一图像和所述第二图像进行编码，得到编码后的视频帧并发送给接收端，编码后的视频帧携带所述用户所在环境的光照类型。