[发明专利]用反射率图表示增强深度图表示

权利要求书

1.一种用于生成对象的三维3D表示的方法，包括：

用照明图案的结构化光对场景中的所述对象照明；

捕捉所述对象的图像，所述对象的所述图像具有根据所述照明图案的多个图案特征；

分析所述对象的捕捉图像中的至少一个图案特征；

基于所述捕捉图像的所述至少一个图案特征的分析生成所述对象的深度图表示，所述对象的所述深度图表示包括描述当捕捉所述对象的图像时所述对象相对于视点的距离的信息；

从所述对象的所述捕捉图像生成反射率图表示，所述对象的反射率图表示包括描述所述对象的至少一部分的反射率特性的信息，其中，生成所述对象的所述反射率图表示包括：

索引投影到所述对象上的所述捕捉图像中的所述至少一个图案特征，

导出至少一个索引的图案特征的功能行为，并且

基于所述至少一个图案特征的导出的所述功能行为，从所述对象的所述捕捉图像中去除所述至少一个图案特征；

组合所述对象的所述深度图表示和所述对象的所述反射率图表示；并且

基于所述对象的所述深度图表示和所述对象的所述反射率图表示的组合生成所述对象的所述三维3D表示。

2.根据权利要求1所述的方法，其中，索引所述至少一个图案特征包括：

基于所述至少一个图案特征的特征特性，标记所述至少一个图案特征，所述特征特性包括所述至少一个图案特征的强度、形状、尺寸或颜色中的至少一个。

3.根据权利要求1所述的方法，其中，所述至少一个图案特征的所述功能行为由所述至少一个图案特征沿着预定方向的强度来表示。

4.根据权利要求1所述的方法，其中，去除所述至少一个图案特征包括：

将乘法函数应用于所述至少一个图案特征；并且

基于所述乘法函数的应用，去除所述至少一个图案特征。

5.根据权利要求1所述的方法，其中，去除所述至少一个图案特征包括：

确定所述至少一个图案特征相对于所述捕捉图像中的所述对象的像素的中心的位置；并且

校正所述至少一个图案特征相对于所述对象的像素的中心的所述位置，其中，在校正之后，从所述对象的所述捕捉图像中去除所述至少一个图案特征。

6.根据权利要求1所述的方法，还包括：

为所述对象提供额外的照明；并且

利用对所述对象的所述额外的照明来改善所述对象的所述反射率图表示，所述对象的改善的所述反射率图表示提供描述所述对象的表面的至少一部分的反射率特性的额外的信息。

7.根据权利要求1所述的方法，还包括生成所述对象的增强3D表示，其中，生成所述对象的所述增强3D表示包括：

捕捉所述对象的一个或多个额外图像；

利用所述反射率图表示将一个或多个所述额外图像登记到所述对象的所述深度图表示上；

从所述一个或多个额外图像导出额外3D数据；并且

利用所述额外3D数据生成所述对象的增强3D表示。

8.根据权利要求7所述的方法，还包括：

利用对象的改善的反射率图表示，生成所述对象的所述增强3D表示。

9.根据权利要求1所述的方法，其中，所述图案特征是具有不同强度的条纹，相邻的两个条纹被暗间隔分开。