[发明专利]一种适用于立体视频的立体字幕添加位置自动选择方法

摘要

本发明涉及一种适用于立体视频的立体字幕添加位置自动选择方法，包括下列步骤：立体图像视差计；立体字幕初步位置判定；最优字幕位置及视差选择：考虑到视差值越小越容易引起观看不舒适，将视差数据集P进行从大到小进行排序，选取数值较小且频率较高的数值作为立体字幕添加时候的最终视差值df，对于该视差值条件下可能会对应着多个候选区域，设这些区域对应的坐标组成集合，则立体字幕最终的坐标位置通过从集合中选择距离坐标点距离最近的坐标位置来确定。

主权项

1.一种适用于立体视频的立体字幕添加位置自动选择方法步骤如下：第一步：立体图像视差计算对于立体图像对Is，首先应用光流法计算其视差图D；第二部：立体字幕初步位置判定，首先设定如下的A‑C原则：A.对于立体图像选取上区域和下区域两个区域作为字幕添加的候选区域，上区域范围为其中W和H分别表示图像的宽和高，下区域的范围为B.考虑将字幕添加在屏幕外边更靠近观看者的一端，以提高观看立体感受；C.基于光流法的视差图，当立体字幕在屏幕外边更靠近观看者的一端，视差值是负值；立体字幕的初步位置由以下几步实现：1)对于待插入字幕Ω，在首先在上述定义的下区域内左上方选取与Ω同样大小的区域Λ用于字幕插入的初始候选区域，对于Λ，首先计算其内部所有视差的均值μ，其次，计算所有视差值的方差δ；对于区域Λ内，若一个像素的视差值在[μ‑δ,μ+δ]之外，则认为该点是奇异点；如果整个区域内奇异点的个数与N的比值小于0.1且均值μ小于1°，视差最小值大于‑1°，则认为该区域适合添加字幕，可以作为字幕添加的候选区域，其中心像素点坐标(Λx,Λy)作为候选字幕插入位置；字幕的视差设为dmin‑0.106°，其中dmin表示该区域内最小视差值；2)对于上区域，根据从左到右，从上到下的顺序对每一个Λ进行步骤1)的操作，可以获得多个候选区域，对应生成一个坐标数据集C和一个视差数据集P；3)如果对于下区域所有的区域Λ不存在适合字幕添加的候选区域，则将下区域换成上区域继续重复上述操作1)‑2)，若上下区域都不具备候选区域，则判定该图像不适合添加立体字幕；第三步：最优字幕位置及视差选择将视差数据集P进行从大到小进行排序，选取数值较小且频率较高的数值作为立体字幕添加时候的最终视差值d_f，对于该视差值条件下可能会对应着多个候选区域，假设这些区域对应的坐标组成集合Q，则立体字幕最终的坐标位置(x,y)可以通过从集合中选择距离坐标点(X₀,Y₀)距离最近的坐标位置来确定，其中，第四步：基于时间序列的立体字幕位置选择与优化通过第一步到第三步对立体视频所有帧的立体图像对进行操作，每一帧会获得一个对应的字幕位置信息，这种位置信息分为三类，即字幕放置在下区域，放置在上区域以及不可放置字幕，进一步对这些字幕进行整合，步骤如下：1)统计整个视频帧序列的字幕放置信息，对于不可以放置字幕的帧，其左右相邻15帧也不可以用于放置字幕；2)对于连续的位于上区域或者下区域的视频帧，当连续的帧超过30帧则放置字幕，否则这些帧都不放置字幕；通过上述两步的调整，一个视频序列可形成连续的字幕信息；对于一段连续的字幕信息，其视差值以该范围内所有帧的字幕的视差值的最小值df2来确定，位置为所有坐标点的均值。