[发明专利]提供移动设备的改进的视频稳定性的方法、系统和介质有效
申请号: | 201780041564.1 | 申请日: | 2017-09-18 |
公开(公告)号: | CN109644231B | 公开(公告)日: | 2021-05-04 |
发明(设计)人: | 梁家恺;屠雪;朱伦成;魏佳宁 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | H04N5/232 | 分类号: | H04N5/232 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 李佳;穆德骏 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 提供 移动 设备 改进 视频 稳定性 方法 系统 介质 | ||
1.一种用于在移动设备上提供改进的视频稳定性的方法,所述方法包括:
通过计算设备接收表示与相机相关联的第一输入帧的第一陀螺仪数据和第一图像数据;
通过所述计算设备接收表示与所述相机相关联的第二输入帧的第二陀螺仪数据和第二图像数据;
通过所述计算设备基于所述第一陀螺仪数据,确定第一物理相机定向估计,所述第一物理相机定向估计与所述第一输入帧相关联;
通过所述计算设备基于所述第二陀螺仪数据,确定第二物理相机定向估计,所述第二物理相机定向估计与所述第二输入帧相关联;
通过所述计算设备基于所述第一物理相机定向估计和所述第二物理相机定向估计,确定与所述第二输入帧相关联的校正相机定向,其中与所述第二输入帧相关联的所述校正相机定向表示被调整以去除不期望的相机移动的相机定向,其中确定与所述第二输入帧相关联的所述校正相机定向包括:
通过所述计算设备确定与所述第二输入帧相关联的初始校正相机定向,其中确定与所述第二输入帧相关联的所述初始校正相机定向包括:通过所述计算设备基于包括所述第一陀螺仪数据和所述第二陀螺仪数据的逻辑回归,确定相机平移的概率;
通过所述计算设备确定使用与所述第二输入帧相关联的初始校正相机定向所生成的输出帧是否包括任何未定义像素;以及
通过所述计算设备确定与所述第二输入帧相关联的最终校正相机定向以防止未定义像素包括在所述输出帧中,其中与所述第二输入帧相关联的所述校正相机定向是与所述第二输入帧相关联的最终校正相机定向;以及
基于与所述第二输入帧相关联的所述校正相机定向,通过所述计算设备生成输出帧。
2.根据权利要求1所述的方法,进一步包括:通过所述计算设备基于与所述第二输入帧和所述第二物理相机定向估计相关联的所述校正相机定向,确定用于将所述第二输入帧的像素映射到输出帧的变换。
3.根据权利要求2所述的方法,其中所述变换包括稳定网格。
4.根据权利要求1所述的方法,其中响应于确定所述平移的概率是零,确定与所述第二输入帧相关联的所述初始校正相机定向和与所述第一输入帧相关联的校正相机定向相同。
5.根据权利要求4所述的方法,其中确定与所述第二输入帧相关联的所述初始校正相机定向包括:通过所述计算设备基于历史相机定向数据,使用非线性平滑滤波器确定所述相机旋转的平滑近似。
6.根据权利要求1所述的方法,其中确定使用与所述第二输入帧相关联的初始校正相机定向所生成的输出帧是否包括任何未定义像素包括:确定覆盖在所述第二输入帧的图像上的稳定网格是否将完全覆盖使用所述初始校正相机定向所生成的输出帧的整个图像区域。
7.根据权利要求1所述的方法,其中所述方法进一步包括:
响应于确定使用与所述第二输入帧相关联的初始校正相机定向所生成的所述输出帧包括未定义像素,通过所述计算设备将与所述第二输入帧相关联的所述初始校正相机定向与所述第二物理相机定向估计混合,以生成所述最终校正相机定向以防止未定义像素包括在所述输出帧中。
8.根据权利要求1所述的方法,其中所述第一物理相机定向估计包括表示所述相机的偏航、俯仰和滚动的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201780041564.1/1.html,转载请声明来源钻瓜专利网。