[发明专利]信息处理方法及其装置、电子设备和介质

说明书

本公开提供了一种由交互本端设备执行的信息处理方法，方法包括：接收来自交互对端设备的第一视频帧图像，其中，第一视频帧图像是包含有目标对象的二维图像；检测第一视频帧图像中是否存在姿态信息；在第一视频帧图像中存在姿态信息的情况下，将姿态信息从第一视频帧图像中剔除，以获得第二视频帧图像；解码第二视频帧图像，以获得包含有目标对象的RGB图像和深度图像；对RGB图像、深度图像和姿态信息进行三维重建，以获得包含有目标对象的三维图像；以及展示三维图像在交互本端设备上。另外，本公开还提供了一种应用于交互本端设备的信息处理装置。

技术领域

本公开涉及一种信息处理方法及其装置、电子设备和介质。

背景技术

对于通过电子设备进行交互的本端设备来讲，通常只能看到交互对端设备呈现的二维平面图像，无法给用户带来真实的沉浸感，降低用户的感官体验。

发明内容

本公开的一个方面提供了一种由交互本端设备执行的信息处理方法，上述方法包括：接收来自交互对端设备的第一视频帧图像，其中，所述第一视频帧图像是包含有目标对象的二维图像；检测所述第一视频帧图像中是否存在姿态信息；在所述第一视频帧图像中存在所述姿态信息的情况下，将所述姿态信息从所述第一视频帧图像中剔除，以获得第二视频帧图像；解码所述第二视频帧图像，以获得包含有所述目标对象的RGB图像和深度图像；对所述RGB图像、所述深度图像和所述姿态信息进行三维重建，以获得包含有所述目标对象的三维图像；以及展示所述三维图像在所述交互本端设备上。

可选地，接收针对所述目标对象的标记请求；响应于所述标记请求，在所述三维图像中获得标记点的标记深度信息和标记位置信息；以及发送所述标记深度信息和标记位置信息至所述交互对端设备，以使所述交互对端设备能基于所述标记深度信息和标记位置信息标记所述目标对象。

可选地，接收针对所述目标对象的特定操作请求；响应于所述特定操作请求，在所述三维图像中获得对所述目标对象执行所述特定操作之后所述目标对象的目标深度信息和目标位置信息；以及发送所述目标深度信息和目标位置信息至所述交互对端设备，以使所述交互对端设备能基于所述目标深度信息和目标位置信息对所述目标对象执行所述特定操作。

本公开的另一个方面提供了一种由交互对端设备执行的信息处理方法，上述方法包括：采集包含有目标对象的RGB图像、深度图像和姿态信息；基于所述RGB图像和所述深度图像，生成第三视频帧图像；编码所述第三视频帧图像，以获得第四视频帧图像；在所述第四视频帧图像中插入所述姿态信息，以生成第五视频帧图像；以及发送所述第五视频帧图像至交互本端设备，以使所述交互本端设备能基于接收到的所述第五视频帧图像，将所述姿态信息从所述第五视频帧图像中剔除，以获得第六视频帧图像，解码所述第六视频帧图像，以获得包含有所述目标对象的RGB图像和深度图像，对所述RGB图像、所述深度图像和所述姿态信息进行三维重建，以获得并展示包含有所述目标对象的三维图像。

可选地，上述方法还包括：接收来自所述交互本端设备发送的用于标记所述目标对象的标记点的标记深度信息和标记位置信息，其中，所述标记深度信息和标记位置信息是所述交互本端设备响应于在所述三维图像中针对所述目标对象的标记请求获得的；以及基于所述标记深度信息和标记位置信息标记所述目标对象。

可选地，上述方法还包括：接收来自所述交互本端设备发送的对所述目标对象执行特定操作之后所述目标对象的目标深度信息和目标位置信息，其中，所述目标深度信息和目标位置信息是所述交互本端设备响应于在所述三维图像中针对所述目标对象执行的特定操作请求获得的；以及基于所述目标深度信息和目标位置信息对所述目标对象执行所述特定操作。