[发明专利]用于在真实环境的视图中表示虚拟对象的方法和系统

权利要求书

1.一种在真实环境的视图中表示虚拟对象的方法，包括：

获得由第一相机捕获的真实环境中的人脸的至少一部分的图像；

确定所述图像中人脸的所述至少一部分的与一个或多个面部采样位置对应的图像位置；

确定与离开所述人脸的反射光对应的第一强度信息；

确定与进入到真实环境的入射光对应的第二强度信息；

根据第一强度信息、第二强度信息和所述一个或多个面部采样位置，确定第一光的至少一个特征,其中第一光的所述至少一个特征包括所述第一光的强度、波长和方向中的至少一者；以及

根据所述第一光的所述至少一个特征生成虚拟对象。

2.根据权利要求1所述的方法，其中所述一个或多个面部采样位置中的每个面部采样位置与针对一个或多个光方向的入射光和反射光的辐射率相关联。

3.根据权利要求1所述的方法，其中所述第一光的所述至少一个特征包括所述第一光的所述方向。

4.根据权利要求1所述的方法，其中所述第一光的所述至少一个特征包括所述第一光的所述波长。

5.根据权利要求1所述的方法，其中生成所述虚拟对象包括根据所述第一光的所述至少一个特征照亮所述虚拟对象的至少一部分。

6.根据权利要求1所述的方法，其中确定第一光的所述至少一个特征包括：

获得与所述图像的包括所述人脸的区域有关的深度信息；以及

还根据与所述图像的包括所述人脸的所述区域有关的所述深度信息来确定所述第一光的所述至少一个特征。

7.根据权利要求1所述的方法，还包括：

将所述图像中的非面部图像区域的至少一部分确定为背景区域；

根据所述背景区域确定至少一个第二光；以及

进一步根据第二光来生成所述虚拟对象。

8.一种计算机可读介质，所述计算机可读介质包括用于在真实环境的视图中表示虚拟对象的计算机可读代码，所述计算机可读代码能够由一个或多个处理器执行以：

获得由第一相机捕获的真实环境中的人脸的至少一部分的图像；

确定所述图像中人脸的所述至少一部分的与一个或多个面部采样位置对应的图像位置；

确定与离开所述人脸的反射光对应的第一强度信息；

确定与进入到真实环境的入射光对应的第二强度信息；

根据第一强度信息、第二强度信息和所述一个或多个面部采样位置，确定第一光的至少一个特征,其中第一光的所述至少一个特征包括所述第一光的强度、波长和方向中的至少一者；以及

根据所述第一光的所述至少一个特征生成虚拟对象。

9.根据权利要求8所述的计算机可读介质，其中所述一个或多个面部采样位置中的每个面部采样位置与针对一个或多个光方向的入射光和反射光的辐射率相关联。

10.根据权利要求8所述的计算机可读介质，其中所述第一光的所述至少一个特征包括所述第一光的所述方向。

11.根据权利要求8所述的计算机可读介质，其中所述第一光的所述至少一个特征包括所述第一光的所述波长。

12.根据权利要求8所述的计算机可读介质，其中生成所述虚拟对象包括根据所述第一光的所述至少一个特征照亮所述虚拟对象的至少一部分。

13.根据权利要求8所述的计算机可读介质，其中用于确定第一光的所述至少一个特征的计算机可读代码包括用于执行以下操作的计算机可读代码：

获得与所述图像的包括所述人脸的区域有关的深度信息；以及

还根据与所述图像的包括所述人脸的所述区域有关的所述深度信息来确定所述第一光的所述至少一个特征。