[发明专利]用于光估计的方法与装置

权利要求书

1.一种处理器实现的用于光估计的方法，包括：

使用光估计模型估计与输入图像相对应的光信息；

检测所述输入图像中的参考对象；

确定所述参考对象的对象信息和支撑所述参考对象的参考平面的平面信息；

基于所述光信息、所述对象信息和所述平面信息渲染与所述参考对象相对应的虚拟对象；以及

通过基于将所述参考对象与所渲染的虚拟对象相比较的结果更新所述光估计模型，来训练所述光估计模型。

2.根据权利要求1所述的方法，其中，所述渲染包括渲染所述虚拟对象的着色和所述虚拟对象的阴影。

3.根据权利要求1所述的方法，其中，所述比较的结果包括：将表示所述参考对象的着色和所述参考对象的阴影的像素数据与表示所述虚拟对象的着色和所述虚拟对象的阴影的像素数据相比较的结果。

4.根据权利要求1所述的方法，其中，

所述对象信息包括所述参考对象的姿态、形状、材质中的任何一个或任何两个或更多个的任何组合，并且

所述平面信息包括所述参考平面的姿态、形状、材质中的任何一个或任何两个或更多个的任何组合。

5.根据权利要求1所述的方法，其中，所述确定包括：响应于所述参考对象被确定为已知对象，使用对象数据库确定所述对象信息的至少一部分。

6.根据权利要求1所述的方法，其中，所述确定包括：响应于所述参考对象和所述参考平面被确定为已知的组合结构，使用对象数据库确定所述对象信息和所述平面信息的至少一部分。

7.根据权利要求6所述的方法，其中，将与所述参考对象相对应的球形部分结构和与所述参考平面相对应的平坦部分结构相组合，以形成所述组合结构。

8.根据权利要求1所述的方法，其中，所述确定包括：响应于所述参考平面被确定为未知平面，通过检测所述输入图像中的所述参考平面确定所述平面信息。

9.根据权利要求1所述的方法，其中所述确定包括：响应于所述参考对象被确定为未知对象，基于预定代理对象的信息确定所述对象信息。

10.根据权利要求1所述的方法，其中，所述渲染包括：

通过将所述参考平面的每个采样点的光信息和可见性信息相融合来确定每个采样点的阴影信息；以及

通过将所述参考平面的每个采样点的所述阴影信息投影到所述输入图像的捕获视图，来渲染所述虚拟对象的阴影。

11.根据权利要求10所述的方法，其中，响应于所述参考对象和所述参考平面被确定为已知的组合结构，预先确定所述可见性信息以渲染所述组合结构的阴影。

12.根据权利要求1所述的方法，其中，所述更新包括：更新所述光估计模型以减小所述参考对象和所述虚拟对象之间的差异。

13.根据权利要求1所述的方法，还包括：

获取另一图像；以及

使用经训练的光估计模型估计与所述另一图像相对应的光信息。

14.一种存储指令的非暂时性计算机可读存储介质，当所述指令由一个或多个处理器执行时，将所述一个或多个处理器配置为执行权利要求1所述的方法。