[发明专利]图像处理方法及装置、计算机可读存储介质、电子设备

说明书

本发明涉及计算机技术领域，提供了一种图像处理方法及装置、计算机可读存储介质、电子设备。该图像处理方法包括：通过第一引擎渲染生成多个图像帧，并将各所述图像帧进行编码压缩以形成视频流；将所述视频流实时发送至终端设备；接收所述终端设备实时发送的用户对所述视频流的操作信息，并通过所述第一引擎对所述操作信息进行处理以实现对所述图像帧的控制。本发明一方面能够减少数据的传输量，减少卡顿、提高画面质量；另一方面方便用户对画面的操作，真切感受虚拟与现实的交互，提升了用户体验。

技术领域

本发明涉及计算机技术领域，具体而言，涉及一种图像处理方法及装置、计算机可读介质及电子设备。

背景技术

为了使用户体验身临其境，真正感受三维空间内的事物，虚拟现实技术得到了广泛的应用，利用计算机模拟产生三维空间的虚拟世界，提供用户各种感官模拟体验，当用户执行动作时，计算机进行复杂运算，以增强用户在三维世界的真实感受。

常见的虚拟现实技术主要应用于游戏或虚拟拍摄中，为了进一步提高用户对真实效果的体验，可以使用户在游戏或虚拟拍摄中使用移动设备，例如手机或平板电脑，但是采用游戏引擎制作游戏场景时，需要强大的CPU和GPU硬件资源，因此在虚拟现实交互的过程中，存在数据传输量大、卡顿、画质差等问题，用户体验差。

因此本领域亟需寻求一种新的图像处理方法及装置。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本发明的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本发明的目的在于提供一种图像处理方法及装置、计算机可读介质及电子设备，进而减少数据传输量、减少卡顿，提高画质，进而提升用户体验。

本发明的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本发明的第一方面，提供一种图像处理方法，其特征在于，包括：

通过第一引擎渲染生成多个图像帧，并将各所述图像帧进行编码压缩以形成视频流；将所述视频流实时发送至终端设备；接收所述终端设备实时发送的用户对所述视频流的操作信息，并通过所述第一引擎对所述操作信息进行处理以实现对所述图像帧的控制。

根据本发明的第二方面，提供一种图像处理装置，其特征在于，包括：

视频流生成模块，用于通过第一引擎渲染生成多个图像帧，并将各所述图像帧进行编码压缩以形成视频流；发送模块，用于将所述视频流实时发送至终端设备；交互模块，用于接收所述终端设备实时发送的用户对所述视频流的操作信息，并通过所述第一引擎对所述操作信息进行处理以实现对所述图像帧的控制。

在本发明的一些实施例中，基于前述方案，所述视频流生成模块包括：

差别像素确定单元，用于确定各所述图像帧中的其它图像帧与关键图像帧之间的差别像素；

第一编码单元，用于对所述关键图像帧和所述差别像素进行编码压缩，以形成所述视频流。

在本发明的一些实施例中，所述图像帧为RGB格式的图像帧，基于前述方案，所述视频流生成模块包括：

格式转换单元，用于将所述RGB格式的图像帧转换为YUV格式的图像帧，以获得多个目标图像帧；

第二编码单元，用于将各所述目标图像帧进行编码压缩以形成所述视频流。

在本发明的一些实施例中，基于前述方案，所述第二编码单元包括：

数据包生成单元，用于通过预设编码方法分别对各所述目标图像帧进行编码压缩，以形成与各所述目标图像帧对应的图像数据包；视频流生成单元，用于根据各所述图像数据包形成所述视频流。