[发明专利]视频处理方法、终端和存储介质有效
申请号: | 201910472462.6 | 申请日: | 2019-05-31 |
公开(公告)号: | CN110309721B | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 马春洋 | 申请(专利权)人: | 百度在线网络技术(北京)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;H04N5/262 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 朱颖;刘芳 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 终端 存储 介质 | ||
1.一种视频处理方法,其特征在于,包括:
在待处理视频中提取图像序列,所述图像序列包括:按照时间顺序排列的多个图像,所述图像序列中相邻的两个图像的背景图像中包括匹配的关键点对;
在相邻的两个图像的背景图像中获取匹配的多对关键点,并根据多对所述关键点在所述相邻的两个图像中的图像坐标和深度值,确定背景图像的移动信息序列;所述背景图像的移动信息序列包括所述相邻的两个图像中背景图像的移动信息;
根据所述背景图像的移动信息序列和预设全景图像,替换所述相邻的两个图像中前一个图像或后一个图像的背景图像,获取替换背景图像后的图像序列;
根据所述替换背景图像后的图像序列,合成替换背景图像后的视频。
2.根据权利要求1所述的方法,其特征在于,所述背景图像的移动信息序列包括:所述背景图像的旋转角度序列;所述根据多对所述关键点在所述相邻的两个图像中的图像坐标和深度值,确定背景图像的移动信息序列,包括:
根据每对所述关键点在所述相邻的两个图像中的图像横坐标、图像纵坐标和深度值,获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离;
根据所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离,以及所述图像序列中的每个图像在水平方向上、竖直方向的尺寸、所述待处理视频的拍摄视角,获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度;
根据所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度,获取所述背景图像的旋转角度序列。
3.根据权利要求2所述的方法,其特征在于,所述获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离,包括:
根据每对所述关键点在所述相邻的两个图像中的图像横坐标、图像纵坐标,获取每对所述关键点在所述相邻的两个图像中的图像横坐标差值和图像纵坐标差值;
根据每对所述关键点在所述相邻的两个图像中的图像横坐标差值和图像纵坐标差值,以及每对所述关键点在所述相邻的两个图像中的深度值,获取所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转距离。
4.根据权利要求2或3所述的方法,其特征在于,所述背景图像的旋转角度序列包括:所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度;所述根据所述背景图像的移动信息和预设全景图像,替换所述相邻的两个图像中前一个图像或后一个图像的背景图像,包括:
将所述预设全景图像投影至球体表面;
以球体中心为视角,根据所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度,在预设全景图像中获取所述相邻的两个图像对应的目标全景图像,所述相邻的两个图像对应的目标全景图像相对于所述球体中心的视角的旋转视角,与所述相邻的两个图像中背景图像在水平方向上、竖直方向上的旋转角度相同;
将所述目标全景图像替换所述相邻的两个图像中前一个图像或后一个图像的背景图像。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
对所述图像序列中的每个图像的像素块进行分类,获取所述每个图像的前景图像和前景掩码图,所述前景掩码图用于表征所述前景图像中的像素块和图像坐标的对应关系,每个所述图像的前景图像中的像素块均属于每个所述图像的前景图像;
所述获取替换背景图像后的图像序列,包括:
在所述相邻的两个图像对应的目标全景图像中,抠出所述相邻的两个图像中前一个图像或后一个图像的前景掩码图对应的像素块;
将所述相邻的两个图像中前一个图像或后一个图像的前景图像,叠加至所述目标全景图像中抠出所述前景掩码图对应的像素块中,获取替换背景图像后的图像序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于百度在线网络技术(北京)有限公司,未经百度在线网络技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910472462.6/1.html,转载请声明来源钻瓜专利网。