[发明专利]从图像生成三维模型

权利要求书

1.一种有利于图像建模的方法，包括：

接收代表立面的输入图像数据；

以计算机重建输入图像数据以计算关于该立面的三维(3D)点、线、和相机的位置；及

对已重建输入图像数据执行多视点语义分割，以识别立面结构和分割立面。

2.如权利要求1的方法，进一步包括：

接到分割指令，以互动方式细化多视点语义分割。

3.如权利要求1的方法，进一步包括：

把已重建输入图像数据进行区块分区，以生产至少一个与分割立面有关的独立建筑物区块。

4.如权利要求3的方法，进一步包括：

对于与至少一个独立建筑物区块有关的已重建输入图像数据，执行一个逆正投影组合以产生该至少一个独立建筑物区块的组合正投影深度图和纹理。

5.如权利要求4的方法，进一步包括：

接收影像修复指令，以互动方式编辑组合正投影深度图或纹理中的至少一个。

6.如权利要求4的方法，进一步包括：

对组合正投影深度图和纹理进行结构分析和正规化以为至少一个独立建筑物区块识别不同立面深度的结构要素。

7.如权利要求6的方法，进一步包括：

根据所识别的不同立面深度的结构要素来为至少一个独立建筑物区块生成几何以及对该至少一个独立建筑物区块加上纹理，以此生成三维模型，。

8.如权利要求7的方法，进一步包括：

通过将为至少一个独立建筑物区块产生的三维模型和为至少一个其它独立建筑物区块产生的三维模型结合以产生城市建模。

9.一种图像建模系统，包括：

多视点语义分割组件，其基于至少一部分与立面相关的配准图像序列，产生立面的语义分割。

10.如权利要求9的系统，进一步包括：

分区组件，将已重建图像数据进行区块分区，以确定至少一个与立面的语义分割有关的对象区块。

11.如权利要求9的系统，进一步包括：

图像重建组件，其配准代表立面的图像序列以产生配准图像序列和计算已重建图像数据，已重建图像数据包括关于立面的三维(3D)点、线、和相机的位置。

12.如权利要求9的系统，进一步包括：

逆正投影组合组件，其从至少一个对象区块的已重建图像数据来组合一个正投影深度图和纹理。

13.如权利要求12的系统，进一步包括：

结构分析和正规化组件，其从至少一个对象区块的正投影深度图和纹理确定不同立面深度的结构要素。

14.如权利要求13的系统，进一步包括：

建模组件，从已确定的不同立面深度的结构要素为至少一个对象区块产生区块几何。

15.如权利要求14的系统，建模组件进一步配置为：

为至少一个对象区块加上纹理，以创建一个与立面相关的对象区块模型。

16.如权利要求14的系统，建模组件进一步配置为：

合并至少两个与立面相关的对象区块模型，以组合一个复合立面模型。

17.如权利要求11的系统，进一步包括：

接口组件，其接收代表立面的图像序列。

18.如权利要求17的系统，接口组件进一步配置为：

接收指令，当指令被图像建模系统执行时，指令进行以下两个操作中的至少一个：互动方式细化多视点语义分割，或互动方式编辑与立面关联的深度图或纹理中的至少一个。

19.一种图像建模方法，包括：

对至少一个代表立面的已重建输入图像数据的子集执行多视点语义分割，以辨认立面结构和分割立面；

对至少一个已重建输入图像数据的子集进行区块分区，以产生至少一个与分割立面相关的对象区块；

对与至少一个对象区块关联的至少一个已重建输入图像数据的子集执行逆正投影组合，以针对至少一个对象区块产生一个组合正投影深度图和一个组合正投影纹理；以及

对组合正投影深度图和组合正投影纹理，进行结构分析和正规化，从而为至少一个对象区块识别多个立面深度的结构要素。

20.如权利要求20的方法，进一步包括：

通过从识别的多个立面深度的结构要素为至少一个对象区块产生几何并且为至少一个对象区块加上纹理来产生对象模型。