[发明专利]一种全景视频的拼接线优化方法及设备

权利要求书

1.一种全景视频的拼接线优化方法，其中，所述方法包括：

确定全景视频的每一帧全景拼接视频帧及其初始拼接线；

对每一帧所述全景拼接视频帧依次进行显著性区域检测和运动性显著区域检测，得到包含有至少一个运动显著区域及其运动方向的待优化的全景拼接视频帧，其中，所述待优化的全景拼接视频帧的帧数为至少一帧；

基于所述至少一个运动显著区域及其运动方向，对对应的待优化的全景拼接视频帧的初始拼接线进行优化，得到每一帧待优化的全景拼接视频帧的最优拼接线。

2.根据权利要求1所述的方法，其中，所述确定全景视频的每一帧全景拼接视频帧及其初始拼接线，包括：

获取全景中各拍摄视角上的至少一帧视频帧及其帧标记；

将每个帧标记对应的各拍摄视角上的视频帧进行对齐拼接，确定每个帧标记对应的全景拼接视频帧及其初始拼接线，确定全景视频的每一帧全景拼接视频帧及其初始拼接线。

3.根据权利要求1所述的方法，其中，所述对每一帧所述全景拼接视频帧依次进行显著性区域检测和运动性显著区域检测，得到包含有至少一个运动显著区域及其运动方向的待优化的全景拼接视频帧，还包括：

对每一帧所述全景拼接视频帧依次进行显著性区域检测和运动性显著区域检测，得到所述至少一个运动显著区域分别与所述初始拼接线之间的相对位置关系；

所述基于所述至少一个运动显著区域及其运动方向，对对应的待优化的全景拼接视频帧的初始拼接线进行优化，得到每一帧待优化的全景拼接视频帧的最优拼接线，包括：

基于所述相对位置关系和所述至少一个运动显著区域及其运动方向，对对应的待优化的全景拼接视频帧的初始拼接线进行优化，得到每一帧待优化的全景拼接视频帧的最优拼接线。

4.根据权利要求3所述的方法，其中，所述对每一帧所述全景拼接视频帧依次进行显著性区域检测和运动性显著区域检测，得到包含有至少一个运动显著区域及其运动方向的待优化的全景拼接视频帧，包括：

在所述初始拼接线的两侧的预设像素范围内，依次基于频谱残差法和图像二值化法，分别对每一帧所述全景拼接视频帧进行显著性区域检测和处理，得到每一帧所述全景拼接视频帧的至少一个显著目标区域；

分别对每一帧所述全景拼接视频帧的至少一个显著目标区域进行运动性显著区域检测，得到包含有至少一个运动显著区域及其运动方向的待优化的全景拼接视频帧。

5.根据权利要求4所述的方法，其中，所述分别对每一帧所述全景拼接视频帧的至少一个显著目标区域进行运动性显著区域检测，得到包含有至少一个运动显著区域及其运动方向的待优化的全景拼接视频帧，包括：

设当前全景拼接视频帧中的一个显著目标区域为区域C1，与当前全景拼接视频帧连续相邻的、前两帧全景拼接视频帧中的与区域C1对应的显著目标区域分别为区域C2和区域C3，其中，区域C1、区域C2和区域C3的中心点分别为点C1(x1，y1)、点C2(x2，y2)和点C3(x3，y3)；

计算所述连续三帧全景拼接视频帧中分别对应的区域C1、区域C2和区域C3之间的相对运动，得到两个相对运动参数Δx和Δy，分别为：Δx＝x3-x1，Δy＝y3-y1；

若所述相对运动参数Δx和Δy满足预设的相对运动参数条件，则确定所述显著目标区域为运动显著区域，并基于点C1(x1，y1)、点C2(x2，y2)和点C3(x3，y3)，得到所述运动显著区域的运动方向；

重复上述步骤，得到包含至少一个运动显著区域及其运动方向的待优化的全景拼接视频帧。

6.根据权利要求5所述的方法，其中，所述预设的相对运动参数条件为：

abs(Δx)预设像素范围；和/或，

abs(Δy)预设像素范围。

7.根据权利要求5所述的方法，其中，基于点C1(x1，y1)、点C2(x2，y2)和点C3(x3，y3)，得到所述运动显著区域的运动方向，包括：

采用最小二乘法将点C1(x1，y1)、点C2(x2，y2)和点C3(x3，y3)拟合成一条运动直线，基于该运动直线确定所述运动显著区域的运动方向。