[发明专利]一种图像信息的处理方法、装置、服务器及终端

说明书

本发明提供一种图像信息的处理方法、装置、服务器及终端，方法包括：接收云端扩增现实AR终端传输的用户的当前姿态数据；根据所述用户的历史姿态数据以及所述当前姿态数据，预测用户的姿态轨迹；根据所述姿态轨迹，计算用户的视窗区域的渲染图像的像素深度信息。本发明的方案可以实现虚拟图像深度信息的有效传输，并减少网络带宽。

技术领域

本发明涉及通信技术领域，特别是指一种图像信息的处理方法、终端及服务器。

背景技术

XR技术综合利用计算机图形学、光电成像技术、传感技术、计算机仿真、人工智能等多种技术，并借助各种交互设备，旨在为用户提供一个逼真的、具有多重感知的虚拟景象，云XR技术通过渲染技术引入云端，实现渲染上云，解决了因终端处理能力不足导致的画面卡顿，用户眩晕的问题。

目前的云VR业务中的云渲染过程中，云端服务器完成渲染步骤生成虚拟景象，以二维视频流的形式传送给终端设备。传输过程中只传输图像的x和y坐标，没有传输z方向的值(也就是深度值)，所以终端设备无法接受每个像素的深度信息；另外，对于云AR业务，显示效果为实景之上又叠加虚景，实景和虚景之间中存在遮挡关系，需要z方向的深度信息判断实景和虚景的位置关系，没有z信息的情况下将无法实现遮挡判断。

发明内容

本发明要解决的技术问题是如何提供一种图像信息的处理方法、装置、服务器及终端。实现虚拟景象深度信息的有效传输并减少网络带宽。

为解决上述技术问题，本发明的技术方案如下：

一种图像信息的处理方法，应用于服务器，所述方法包括：

接收扩增现实AR终端传输的用户的当前姿态数据；

根据所述用户的历史姿态数据以及所述当前姿态数据，预测用户的姿态轨迹；

根据所述姿态轨迹，计算用户的视窗区域的渲染图像的像素深度信息。

可选的，接收扩增现实AR终端传输的用户的当前姿态数据，包括：

接收AR终端传输的用户的当前眼动姿态数据以及当前头部姿态数据。

可选的，根据所述用户的历史姿态数据以及所述当前姿态数据，预测用户的姿态轨迹，包括：

根据所述用户的历史眼动姿态数据以及所述当前眼动姿态数据，预测用户的眼动轨迹；

根据所述用户的历史头部姿态数据以及所述当前头部姿态数据，预测用户的头部姿态轨迹。

可选的，根据所述姿态轨迹，计算用户的视窗区域的渲染图像的像素深度信息，包括：

根据用户的当前姿态数据，得到渲染图像；

根据所述眼动轨迹在当前图像的坐标信息以及所述头部姿态轨迹在当前图像的坐标信息，确定用户的视窗区域；

对所述视窗区域进行划分，得到用户感兴趣的第一区域以及除所述第一区域外的第二区域；

计算所述第一区域和/或第二区域的像素深度信息。

可选的，对所述视窗区域进行划分，得到用户感兴趣的第一区域以及除所述第一区域外的第二区域，包括：

对所述视窗区域中，以眼球追踪确定的用户的当前焦点坐标为中心，确定用户感兴趣的第一区域；并将所述视窗区域中除所述第一区域外的区域确定为第二区域。

可选的，计算所述第一区域和/或第二区域的像素深度信息，包括：

为所述第一区域的像素深度分配第一视觉加权系数，为所述第二区域分配第二视觉加权系数，所述第一视觉加权系数大于所述第二视觉加权系数；