[发明专利]生成插值视频帧的技术在审
申请号: | 202180012231.2 | 申请日: | 2021-07-28 |
公开(公告)号: | CN115104119A | 公开(公告)日: | 2022-09-23 |
发明(设计)人: | F·里达;K·萨普拉;R·T·波托夫;刘诗秋;A·陶;B·C·卡坦扎罗 | 申请(专利权)人: | 辉达公司 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;H04N7/01 |
代理公司: | 北京市磐华律师事务所 11336 | 代理人: | 高伟 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 生成 视频 技术 | ||
1.一种处理器,包括:
一个或更多个电路,用于至少部分地基于一个或更多个对象从第一视频帧到第二视频帧的多个可能运动中的一个来生成第三视频帧。
2.根据权利要求1所述的处理器,其中所述一个或更多个电路进一步用于至少部分地基于与所述第二视频帧的像素相关联的后向运动向量来确定所述多个可能运动。
3.根据权利要求1所述的处理器,其中所述一个或更多个对象是像素。
4.根据权利要求1所述的处理器,其中所述一个或更多个电路进一步用于至少部分地基于相机视点的一个或更多个运动来生成所述第三视频帧。
5.根据权利要求1所述的处理器,其中所述一个或更多个电路用于至少部分地基于深度信息来选择所述多个可能运动中的所述一个。
6.根据权利要求1所述的处理器,其中所述一个或更多个电路用于至少部分地基于与所述第二视频帧的像素相关联的后向运动向量以及相机视点的一个或更多个运动来生成一个或更多个附加视频帧。
7.根据权利要求1所述的处理器,其中所述一个或更多个电路用于至少部分地基于从一个或更多个缓冲器接收到所述第一视频帧、所述第二视频帧、深度信息和后向运动向量来生成所述第三视频帧。
8.一种机器可读介质,其上存储有一组指令,如果由一个或更多个处理器执行所述一组指令,则使所述一个或更多个处理器至少:
至少部分地基于一个或更多个对象从第一视频帧到第二视频帧的多个可能运动中的一个来生成第三视频帧。
9.根据权利要求8所述的机器可读介质,其中所述多个可能运动中的每一个与和所述第二视频帧的像素深度值相关联的一组后向运动向量中的从所述第二视频帧到所述第一视频帧的后向运动向量对应,并且如果由所述一个或更多个处理器执行所述指令,则进一步使所述一个或更多个处理器:
至少部分地基于与所述一组后向运动向量中的一个相关联的深度值来识别所述多个可能运动中的所述一个;以及
至少部分地基于所识别的运动生成所述第三视频帧。
10.根据权利要求9所述的机器可读介质,其中所述一个或更多个对象是像素。
11.根据权利要求8所述的机器可读介质,其中如果由所述一个或更多个处理器执行所述指令,则进一步使所述一个或更多个处理器:
确定所述第一视频帧和所述第二视频帧之间的相机视点矩阵的变化;以及
至少部分地基于所确定的所述相机视点矩阵的变化来生成所述第三视频帧。
12.根据权利要求8所述的机器可读介质,其中如果由所述一个或更多个处理器执行所述指令,则进一步使所述一个或更多个处理器:
确定所述第三视频帧中的一组被遮挡像素位置;
确定所述第三视频帧中的一组被去遮挡像素位置;以及
至少部分地基于所述一组被遮挡像素位置和所述一组被去遮挡像素位置来生成所述第三视频帧。
13.根据权利要求8所述的机器可读介质,其中如果由所述一个或更多个处理器执行所述指令,则进一步使所述一个或更多个处理器:
至少部分地基于一组后向运动向量生成从所述第一视频帧到所述第二视频帧的一组估计的前向运动向量,其中所述一组后向运动向量是从所述第二视频帧到所述第一视频帧;以及
至少部分地基于所生成的所述一组估计的前向运动向量和所述一组后向运动向量生成所述第三视频帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于辉达公司,未经辉达公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202180012231.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:自主清理堆料的系统和方法
- 下一篇:带手持式探头的嗅探式气体泄漏检测器