[发明专利]一种基于自适应权值的时域一致性深度视频估计方法

摘要

本发明属于视频处理技术及立体显示领域，本发明旨在通过能量函数的最小化，可提高深度视频的时域连续性，同时提高深度视频及其绘制的虚拟视点的质量。为此，本发明采取的技术方案是，一种基于自适应权值的时域一致性深度视频估计方法，包括如下步骤一、能量函数构造二、帧间运动估计三、自适应权值计算四、基于运动的能量函数更新五、能量函数最小化。本发明主要应用于视频处理场合。

主权项

一种基于自适应权值的时域一致性深度视频估计方法，其特征是，包括如下步骤，一、能量函数构造首先通过块匹配的方法分别计算中间视点与左参考视点和右参考视点像素的亮度差值，并将其中的较小值作为能量函数的数据项，然后，对于每一个像素，分别计算相邻像素与其得的亮度差，将亮度差以一定权值进行加权作为能量函数平滑项；二、帧间运动估计通过计算当前帧与前一帧对应块的SAD(Sum of Absolute Difference)，将其与预先设定的阈值进行比较，确定此块是否为运动块；当SAD值小于阈值，则该块是静止的，将块内每一个像素的运动矢量MV取为(0,0)；当SAD值大于阈值，则该块是运动的，将该块划分为更小的块进行全搜索运动估计，得到块内每一个像素的运动矢量为(m,n)，SAD的定义如下：S=Σ0≤a,b≤w|I(x+a,y+b)-Ip(x+a,y+b)|]]>其中I和Ip分别代表当前帧及前一帧对应像素的亮度值；w是块的大小；三、自适应权值计算利用第二步求得的帧间运动矢量(m,n)计算能量函数时域项的自适应权值λt；四、基于运动的能量函数更新首先利用第二步求得的运动矢量以及前一帧的深度信息，计算当前帧能量函数的时域项Etemp；然后，以第三步得到的自适应权值作为时域项权值，将时域项代入能量函数，得到更新后的能量函数：E(x,y,d)＝λd·Edata(x,y,d)+λs·Esmooth(x,y,d)+λt·Etemp(x,y,d)Esmooth为像素的平滑项，Edata为能量函数数据项，Etemp当前帧能量函数的时域项；五、能量函数最小化采用图割法对以上能量函数进行最小化求值，得到可靠的视差值，并将其转化为深度值，视差与深度的转化方法如下：z=B·fd=B·f|xl-xr|]]>其中B和f分别是相机的基线距离以及焦距；d是视差值，z是与其对应的深度值；xl和xr是左右视点中对应像素的坐标。