[发明专利]用于3D模型变形的方法和装置

权利要求书

1.用于基于2D图像数据输入对标准3D模型进行变形的方法，所述方法包括以下步骤：

-利用检测模型和变形模型对所述标准3D模型执行初始变形(100)，从而获得经过变形的标准3D模型

-确定(200)该2D图像数据输入与该经过变形的标准3D模型之间的光流，

-将所述光流应用(300)于所述经过变形的标准3D模型，从而提供经过微调变形的3D标准模型。

2.根据权利要求1的方法，其中，该2D图像数据输入与该经过变形的标准3D模型之间的所述光流是基于在先前的2D图像帧上所确定的先前的经过微调变形的3D标准模型而确定的。

3.根据权利要求2的方法，其中，该2D图像数据输入与该经过变形的标准3D模型之间的所述光流的确定(200)包括：

-确定(250)该经过变形的标准3D模型的2D投影与该先前的经过微调变形的3D标准模型的2D投影之间的第一光流，

-确定(290)实际2D帧与该先前的经过微调变形的3D标准模型的2D投影之间的第二光流，

-组合(270)所述第一和第二光流以获得实际2D帧与该经过变形的标准3D模型的2D投影之间的第三光流，

-基于在所述经过变形的标准3D模型的2D投影期间所获得的深度信息对所述第三光流进行适配(280)，以获得该2D图像数据输入与该经过变形的标准3D模型之间的所述光流。

4.根据在前权利要求1-3中任一项的方法，其还包括基于该2D图像数据输入与该经过变形的标准3D模型之间的所述光流对用于所述初始变形步骤(1000)中的变形模型进行适配(140)的步骤。

5.根据在前权利要求1-4中任一项的方法，其还包括基于在该2D图像帧与先前的2D图像帧之间所确定的光流信息对用于所述初始变形步骤中的该检测模型进行适配的步骤。

6.根据在前权利要求1-3中任一项的方法，其中，所述应用所述光流的步骤包括能量最小化过程(400)。

7.用于基于2D图像数据输入对标准3D模型进行变形的装置，所述装置适用于：

-利用检测模型和变形模型对所述标准3D模型执行初始变形(100)，从而获得经过变形的标准3D模型，

-确定(200)该2D图像数据输入与该经过变形的标准3D模型之间的光流，

-将所述光流应用(300)于所述经过变形的标准3D模型，从而将经过微调变形的3D标准模型提供至所述装置的输出。

8.根据权利要求7的装置，其还适用于基于由先前的2D图像帧上所确定的先前的经过微调变形的3D标准模型来确定该2D图像数据输入与该经过变形的标准3D模型之间的所述光流。

9.根据权利要求8的装置，其还适用于通过以下步骤确定该2D图像数据输入与该经过变形的标准3D模型之间的所述光流：

-确定(250)该经过变形的标准3D模型的该2D投影与该先前的经过微调变形的3D标准模型的2D投影之间的第一光流，

-确定(290)该实际2D帧与该先前的经过微调变形的3D标准模型的2D投影之间的第二光流，

-组合(270)所述第一和第二光流以获得实际2D帧与该经过变形的标准3D模型的2D投影之间的第三光流，

-基于在所述经过变形的标准3D模型的2D投影期间所获得的深度信息对所述第三光流进行适配(280)，以获得该2D图像数据输入与该经过变形的标准3D模型之间的所述光流。

10.根据在前权利要求7-9中任一项的装置，其还能够基于该2D图像数据输入与该经过变形的标准3D模型之间的所述光流对用于所述初始变形步骤(1000)中的该变形模型进行适配(140)。

11.根据在前权利要求7-10中任一项的装置，其还能够基于在该2D图像帧与先前的2D图像帧之间所确定的光流信息对于在所述初始变形步骤中的该检测模型进行适配。

12.图像处理装置，其包括在前权利要求7到11当中的任一项所述的装置。

13.一种计算机程序产品，其包括适用于当在数据处理装置上被执行时，执行根据权利要求1到6当中的任一项的方法步骤的软件。