[发明专利]立体图像的处理方法、检测分割方法及相关装置和设备

权利要求书

1.一种立体图像的处理方法，其特征在于，包括：

从输入的立体图像中检测后期加入物体PIO，并从所述立体图像中分割提取出所述PIO；

对所述分割提取出所述PIO后的立体图像进行立体校正处理；

在经过校正处理后的立体图像中重新加入所述分割提取出的PIO；

所述从输入的立体图像中检测后期加入物体PIO，并从所述立体图像中分割提取出所述PIO，具体包括：检测字幕框，从检测出的字幕框中，提取出字幕PIO；

在检测出字幕框之后，进一步包括如下中的至少一种：

根据字幕框的投影，重新定位字幕框；

利用字幕模型去除所述字幕框中的非字幕区域。

2.根据权利要求1所述的方法，其特征在于，在所述输入立体图像之后，检测PIO之前，进一步包括：

判断所述立体图像是否存在竖直方向上的视差，在存在竖直方向上的视差的情况下执行检测PIO及其后续步骤；

或者，判断所述立体图像所属的当前帧是否为视频段边界帧，如果是则进一步判断所述立体图像是否存在竖直方向上的视差，在存在竖直方向上的视差的情况下执行检测PIO及其后续步骤；如果所述立体图像所在的当前帧不是视频段边界帧，则采用与上一帧相同的处理方式处理当前帧的立体图像。

3.根据权利要求2所述的方法，其特征在于，所述判断所述立体图像所属的当前帧是否为视频段边界帧，具体包括：

确定当前帧的图像特征向量和上一帧的图像特征向量；

通过比较所述当前帧的图像特征向量和上一帧的图像特征向量，计算当前帧和上一帧之间的图像特征变化分数；

判断所述图像特征变化分数是否超过指定的阈值，如果超过则判定当前帧为视频段边界帧，否则判定当前帧不是视频段边界帧。

4.根据权利要求2所述的方法，其特征在于，所述判断所述立体图像是否存在竖直方向上的视差，具体包括：

分别从所述立体图像中的左图和右图之中提取图像特征点，分别对所述左图的图像特征点和右图的图像特征点计算特征向量；

根据所述左图和右图的特征向量的相似性，在所述左图和右图的图像特征点之间建立匹配对应关系；

统计所述左图和右图中相互匹配的图像特征点对在竖直方向上的图像坐标距离，计算所述图像坐标距离的分布直方图；

判断所述分布直方图的最大的峰值的位置是否大于指定阈值，如果大于则判定当前处理的立体图像存在竖直方向上的视差，否则判定当前处理的立体图像不存在竖直方向上的视差。

5.根据权利要求1所述的方法，其特征在于，该方法进一步在从所述立体图形中分割提取出所述PIO之后，所述重新加入所述分割提取出的PIO之前，进一步包括：对所述立体图像中分割提取出所述PIO的部位进行填充。

6.根据权利要求5所述的方法，其特征在于，所述对所述立体图像中分割提取出所述PIO的部位进行填充，具体包括：

在所述立体图像上的所述PIO的部位上，针对该PIO部位中的像素，在所述立体图像上沿着该像素的列的方向，向上或向下搜索与其距离最近的非PIO像素，将该非PIO像素的颜色值赋予该PIO的像素，通过该方式遍历处理所述PIO部位的像素，直到所述PIO的部位被填满；

或者，在所述立体图像上的所述PIO的部位上，针对该PIO部位中的像素，在所述立体图像上沿着该像素的行的方向，向左或向右搜索与其距离最近的非PIO像素，将该非PIO像素的颜色值赋予该PIO的像素，通过该方式遍历处理所述PIO部位的像素，直到所述PIO的部位被填满；

或者，对所述分割提取出PIO的立体图像进行下采样，再对最底层的图像进行高斯卷积扩大填充至原来图像的大小；

或者，利用所述立体图像中左图和右图之间的互补信息，对所述PIO物体进行填充。