[发明专利]视频处理方法、终端和存储介质

说明书

本申请提供一种视频处理方法、终端和存储介质，该方法包括：在待处理视频中提取图像序列；在相邻的两个图像的背景图像中获取匹配的多对关键点，并根据多对关键点在相邻的两个图像中的图像坐标和深度值，确定背景图像的移动信息；根据背景图像的移动信息和预设全景图像，替换图像的背景图像，根据替换背景图像后的图像序列，合成替换背景图像后的视频。本实施例中根据前后相邻的图像中的背景图像的移动信息替代终端的移动信息，根据终端的移动信息将预设全景信息替换图像中的背景图像，进而在保证了在没有借助其他设备的前提下，保证了合成视频不具有违和感。

技术领域

本申请涉及视频处理技术领域，尤其涉及一种视频处理方法、终端和存储介质。

背景技术

全景图像和传统图像相比，具有连贯性、多线性、多角度、临场感、大空间、高交互等优点。全景图像可提供更丰富的视觉信息、强烈沉浸感，带给用户更真实和有趣味的视觉体验。目前，很多用户均会采用具有拍摄功能的终端拍摄视频。例如，用户的自拍视频中，视频中的前景图像为用户，背景图像可以为风景等图像。若将全景图像替换自拍视频中的背景图像，则可以给用户带来丰富和新颖的视觉体验和趣味性。

拍摄视频时，终端大多沿着不同的轨迹移动。现有技术中为了降低全景图像替换视频中的背景图像带来的违和感，通常会依据终端中设置的重力传感器和加速度传感器等确定终端的移动信息，进而根据移动信息将全景图像替换背景图像。但这种方式依赖于其他设备，如重力传感器、加速度传感器等，适用范围小。

发明内容

本申请提供一种视频处理方法、终端和存储介质，能够在不借助其他设备的前提下，将全景图像替换视频中的背景图像。

本申请的第一方面提供一种视频处理方法，包括：

在待处理视频中提取图像序列，所述图像序列包括：按照时间顺序排列的多个图像，所述图像序列中相邻的两个图像的背景图像中包括匹配的关键点对；

在相邻的两个图像的背景图像中获取匹配的多对关键点，并根据多对所述关键点在所述相邻的两个图像中的图像坐标和深度值，确定背景图像的移动信息；

根据所述背景图像的移动信息和预设全景图像，替换所述相邻的两个图像中前一个图像或后一个图像的背景图像，获取替换背景图像后的图像序列；

根据所述替换背景图像后的图像序列，合成替换背景图像后的视频。

可选的，所述背景图像的移动信息包括：所述背景图像的旋转角度序列；所述根据多对所述关键点在所述相邻的两个图像中的图像坐标和深度值，确定背景图像的移动信息，包括：

根据每对所述关键点在所述相邻的两个图像中的图像横坐标、图像纵坐标和深度值，获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离；

根据在所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离，以及所述图像序列中的每个图像在水平方向上、竖直方向的尺寸、所述待处理视频的拍摄视角，获取在所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度；

根据所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度，获取所述背景图像的旋转角度序列。

可选的，所述获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离，包括：

根据每对所述关键点在所述相邻的两个图像中的图像横坐标、图像纵坐标，获取每对所述关键点在所述相邻的两个图像中的图像横坐标差值和图像纵坐标差值；

根据每对所述关键点在所述相邻的两个图像中的图像横坐标差值和图像纵坐标差值，以及每对所述关键点在所述相邻的两个图像中的深度值，获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离。