[发明专利]姿态校正

权利要求书

1.一种方法，包括：

接收包括多个帧的视频，所述视频被在第一视点处的物理相机捕捉，其中，所述视频包括与所述多个帧相对应的深度信息；

检测所述视频内的面部，其中，所述面部在所述多个帧的前景部分内；

基于与所述多个帧相对应的所述深度信息的一个或多个深度值来确定所述多个帧的所述前景部分；

将虚拟相机定位在第二视点，其中，所述第二视点与所述第一视点不同；

基于所述虚拟相机来获得所述前景部分的投影矩阵，所述投影矩阵与所述第二视点相对应；以及

基于所述投影矩阵来生成包括经修改前景部分的经修改视频。

2.根据权利要求1所述的方法，进一步包括调整所述前景部分的所述投影矩阵，以减少用于捕捉所述视频的所述物理相机的镜头效应。

3.根据权利要求1所述的方法，其中，检测所述面部包括从背景平面中提取出所述面部，其中，所述背景平面是基于所述深度信息来确定的。

4.根据权利要求3所述的方法，进一步包括旋转所述背景平面以面对在所述第二视点处的所述虚拟相机。

5.根据权利要求1所述的方法，其中，确定所述前景部分包括检测所述面部和背景，并且其中，所述检测包括从所述背景中突出所述面部的所述前景部分。

6.根据权利要求5所述的方法，其中，检测所述面部和所述背景包括：

基于所述深度信息来检测面部深度；

确定所述面部的外边缘的所述帧内的深度；以及

将所述背景设置为包括在所述面部的外边缘的深度处以及在超出所述面部的外边缘的深度处的所述帧的部分。

7.根据权利要求6所述的方法，进一步包括使所述背景模糊。

8.根据权利要求1所述的方法，其中，检测所述视频内的所述面部包括确定所述面部关于一个或多个轴的角度，并且其中，如果所述面部关于一个或多个轴的角度在阈值范围内，则所述确定、定位、获得和生成被执行。

9.根据权利要求8所述的方法，进一步包括：

确定所述视频的深度信息的时间历史；和

使用所述视频的深度信息的所述时间历史来执行视频重投影的滞后，以便保持重投影的连续性并且不响应于在正被重投影的所述面部前方移动的临时对象，其中，所述临时对象在正被重投影的所述面部前方少于阈值时间段。

10.一种系统，包括：

耦合至具有存储在其上的软件指令的非易失性计算机可读介质的一个或多个处理器，所述软件指令在被所述一个或多个处理器执行时，使所述一个或多个处理器执行操作，所述操作包括：

接收包括多个帧的视频，所述视频被在第一视点处的物理相机捕捉，其中，所述视频包括与所述多个帧相对应的深度信息；

检测所述视频内的面部，其中，所述面部在所述视频的所述多个帧的前景部分内；

基于与所述多个帧相对应的所述深度信息的一个或多个深度值来确定所述多个帧的所述前景部分；

将虚拟相机定位在第二视点，其中，所述第二视点与所述第一视点不同；

基于所述虚拟相机来获得所述前景部分的投影矩阵，所述投影矩阵与所述第二视点相对应；

基于所述投影矩阵来生成包括经修改前景部分的经修改视频；以及

稳定所述经修改视频的所述经修改前景部分。

11.根据权利要求10所述的系统，其中，所述操作进一步包括调整所述前景部分的所述投影矩阵，以减少用于捕捉所述视频的所述物理相机的镜头效应。

12.根据权利要求10所述的系统，其中，检测所述面部包括从背景平面中提取出所述面部，其中，所述背景平面是基于所述深度信息来确定的。