[发明专利]全景视频处理方法、装置和计算机可读存储介质

说明书

本发明实施例提供全景视频处理方法、全景视频处理装置和计算机可读存储介质。根据本发明实施例的全景视频处理方法包括：获取所述全景视频，所述全景视频包括多个全景帧图像，根据所述全景帧图像中的先前帧图像和当前帧图像确定至少一个对象的运动向量；根据所述至少一个对象的运动向量确定所述全景视频的参考对象的移动方向；根据所述移动方向确定所述当前帧图像中的第一区域；以及根据所确定的所述当前帧图像中的第一区域生成第一显示数据。

技术领域

本申请涉及全景视频处理领域，尤其涉及一种全景视频处理方法、装置和计算机可读存储介质。

背景技术

全景视频通常为通过全景相机拍摄的包括360度全方位范围的视频，并且在显示侧投影到各种合适的显示屏中，能够使观看者获得身临其境的观看体验。例如，在沉浸式健身的应用场景中，通过在跑步机上安装的环绕式显示屏上显示包含不断移动的道路及沿路风景等内容的全景视频，能够使跑步者在运动过程中获得仿佛实际在户外奔跑的良好体验。

在全景视频的处理和显示过程中，通常对包括360度范围的完整全景帧图像进行编码及传输到显示侧，而传输完整的全景帧图像并在传输过程中保持各个图像区域的高质量将占用很高的带宽，在用于视频实时传输及显示的场景下可能会出现播放不流畅的问题，影响用户的体验。此外，在观看全景视频时，由于观看者的视野范围限制，通常并不能观看到完整的图像区域，因此传输了许多不必要的冗余视频数据，造成了带宽浪费。并且，在显示侧往往还需要对大量视频数据进行复杂处理才能提取视频中的所需区域并进行渲染和显示，硬件成本高。

因此，需要一种能够降低全景视频的处理复杂程度以及传输带宽的全景视频处理方法和装置，从而提高全景视频的显示效果，并改善用户体验。

发明内容

为解决上述技术问题，根据本发明的一个方面，提供了一种全景视频处理方法，包括：获取所述全景视频，所述全景视频包括多个全景帧图像，根据所述全景帧图像中的先前帧图像和当前帧图像确定至少一个对象的运动向量；根据所述至少一个对象的运动向量确定所述全景视频的参考对象的移动方向；根据所述移动方向确定所述当前帧图像中的第一区域；以及根据所确定的所述当前帧图像中的第一区域生成第一显示数据。

根据本发明的另一个方面，提供了一种全景视频处理装置，包括：运动向量确定单元，配置为获取所述全景视频，所述全景视频包括多个全景帧图像，根据所述全景帧图像中的先前帧图像和当前帧图像确定至少一个对象的运动向量；移动方向确定单元，配置为根据所述至少一个对象的运动向量确定所述全景视频的参考对象的移动方向；第一区域确定单元，配置为根据所述移动方向确定所述当前帧图像中的第一区域；显示数据生成单元，配置为根据所确定的所述当前帧图像中的第一区域生成第一显示数据。

根据本发明的另一个方面，提供一种全景视频处理装置，包括：处理器；和存储器，在所述存储器中存储有计算机程序指令，其中，在所述计算机程序指令被所述处理器运行时，使得所述处理器执行以下步骤：获取所述全景视频，所述全景视频包括多个全景帧图像，根据所述全景帧图像中的先前帧图像和当前帧图像确定至少一个对象的运动向量；根据所述至少一个对象的运动向量确定所述全景视频的参考对象的移动方向；根据所述移动方向确定所述当前帧图像中的第一区域；以及根据所确定的所述当前帧图像中的第一区域生成第一显示数据。

根据本发明的另一个方面，提供一种计算机可读存储介质，其上存储有计算机程序指令，其中，所述计算机程序指令被处理器执行时实现以下步骤：获取所述全景视频，所述全景视频包括多个全景帧图像，根据所述全景帧图像中的先前帧图像和当前帧图像确定至少一个对象的运动向量；根据所述至少一个对象的运动向量确定所述全景视频的参考对象的移动方向；根据所述移动方向确定所述当前帧图像中的第一区域；以及根据所确定的所述当前帧图像中的第一区域生成第一显示数据。