[发明专利]稳定视频在审
申请号: | 202110655510.2 | 申请日: | 2016-09-23 |
公开(公告)号: | CN113344816A | 公开(公告)日: | 2021-09-03 |
发明(设计)人: | 洪微;罗德里戈·卡尔斯罗尼 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T5/10;G06T5/20;G06T3/00;G06T7/20;G06T7/246;H04N5/232 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 李宝泉;周亚荣 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 稳定 视频 | ||
1.一种计算机实现的方法,包括:
由计算系统接收由相机捕获的视频的第一帧和第二帧;
由所述计算系统并且使用所述视频的所述第一帧和所述第二帧来生成第一数学变换,所述第一数学变换指示从所述第一帧被捕获时到所述第二帧被捕获时相对于由所述视频捕获的场景的所述相机的移动,包括最近开始的移动和长期已发生的移动,所述计算系统通过识别呈现于所述第一帧和所述第二帧中的特征点如何在所述第一帧和所述第二帧之间移动来生成所述第一数学变换;
由所述计算系统识别长期已发生的相对于所述场景的所述相机的移动;
由所述计算系统使用所述第一数学变换和所识别长期已发生的的相对于所述场景的所述相机的移动来通过一过程生成第二数学变换,所述过程涉及从所述第一数学变换移除所识别的长期已发生的所述相机的移动的指示,与所述第一数学变换相比,所述第二数学变换更多地代表最近开始的相对于所述场景的所述相机的移动以及更少地代表长期已发生的相对于所述场景的所述相机的移动;
由所述计算系统通过将所述第二数学变换应用到所述第二帧以从所述第二帧移除最近开始的移动并且保留长期已发生的移动、而不考虑来自所述视频的未来帧的相对于所述场景的所述相机的移动来生成所述第二帧的稳定版本。
2.根据权利要求1所述的计算机实现的方法,其中,所述第二帧是紧接着所述视频的所述第一帧的所述视频的帧。
3.根据权利要求1所述的计算机实现的方法,其中,指示相对于场景的所述相机的移动的所述第一数学变换包括单应性变换矩阵。
4.根据权利要求1所述的计算机实现的方法,其中,生成所述第二帧的所述稳定版本包括:缩放到通过将所述第二数学变换应用到所述第二帧而生成的所述第二帧的版本。
5.根据权利要求4所述的计算机实现的方法,进一步包括:水平或垂直地移位所述第二帧的所述稳定版本的放大区域以避免所述第二帧的所述稳定版本的所述放大区域呈现无效区域。
6.根据权利要求1所述的计算机实现的方法,其中,识别长期已发生的所述相机的移动包括分析在所述视频的所述第一帧和所述第二帧之前所述相机已捕获的所述视频的帧,以识别长期已发生的移动。
7.根据权利要求1所述的计算机实现的方法,其中,识别长期已发生的所述相机的移动包括基于对在所述视频的所述第一帧和所述第二帧之前所述相机已捕获的所述视频的帧的分析将低通滤波器应用到所述第一数学变换。
8.根据权利要求1所述的计算机实现的方法,进一步包括:
由所述计算系统基于以下各项之间的差异来识别将呈现在将所述第二数学变换应用到所述第二帧而产生的所述第二帧的稳定版本中的预期失真:
(i)将所述第二数学变换应用到所述第二帧而产生的水平方向上的失真量,以及
(ii)将所述第二数学变换应用到所述第二帧而产生的垂直方向上的失真量;
由所述计算系统基于所述预期失真超过从在所述第二帧之前的所述视频的多个帧中的失真计算得到的可接受失真变化的程度来确定降低将所述第二数学变换应用到所述第二帧而产生的稳定作用的量,
其中,生成所述第二帧的所述稳定版本包括基于降低所述稳定作用的所确定的量来降低将所述第二数学变换应用到所述第二帧的稳定作用。
9.根据权利要求1所述的计算机实现的方法,进一步包括:
由所述计算系统基于所述相机在所述视频的在所述第二帧之前的多个帧之间的移动速度的分析来计算所述相机的可接受移动速度变化;以及
由所述计算系统基于从所述第一帧到所述第二帧的所述相机的所确定的移动速度超过所述相机的所述可接受移动速度变化来确定降低将所述第二数学变换应用到所述第二帧而产生的稳定作用的量,
其中,生成所述第二帧的所述稳定版本包括基于所确定的降低所述稳定作用的量来降低将所述第二数学变换应用到所述第二帧而产生的稳定作用。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110655510.2/1.html,转载请声明来源钻瓜专利网。