[发明专利]基于多模态捕捉的快速动画成片方法和系统

权利要求书

1.一种基于多模态捕捉的快速动画成片方法，其特征在于，包括以下步骤：

101.对演员进行多模态捕捉；

102.将多模数据融合处理；

103.传输捕捉数据至动画制作端；

104.在动画制作端将动作与表情数据复现至虚拟模型上实时录制成片。

2.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，在所述步骤101对演员进行多模态捕捉之前，进一步包括：对多模态捕捉模块（21）进行标定和校准，以减小捕捉误差。

3.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，所述步骤101对演员进行多模态捕捉，包括通过光学式与惯性式捕捉单元对演员进行混合动作捕捉，对视野清晰的较大部位采用光学动捕，对易遮挡或者分辨率不够的小部位使用惯性捕捉，并通过对无线相机对脸部进行表情捕捉。

4.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，所述步骤102将多模数据融合处理，包括将步骤101取得的光学式动捕数据、惯性式动捕数据、表情捕捉数据整合为统一的捕捉数据，计算表征演员特定身形、面部的特征参数。

5.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，在所述步骤103传输捕捉数据至动画制作端之前，进一步包括：记录所传输数据为离线数据，供之后重复利用。

6.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，所述步骤103传输捕捉数据至动画制作段，传输接口采用C/S，即客户机/服务器结构，实现两端的网络透明传输。

7.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，所述步骤104动画制作端将动作与表情数据复现至虚拟模型上实时录制成片的步骤或包括：

a.在动画制作端获取目标模型的运动与表情控制对象；

b.将捕捉数据直接通过控制对象传递控制目标模型的动作与表情；

c.通过虚拟摄像机组件录制场景成片。

8.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，所述步骤104动画制作端将动作与表情数据复现至虚拟模型上实时录制成片的步骤或包括：

a.在动画制作端计算目标模型的身形、面部的特征参数；

b.根据捕捉演员与目标模型的特征参数完成对捕捉数据的非线性映射处理；

c.用非线性映射处理后的捕捉数据控制目标模型的动作与表情；

d.通过虚拟摄像机组件录制场景成片。

9.如权利要求1所述的基于多模态捕捉的快速动画成片方法，其特征在于，所述步骤104动画制作端使用3D游戏制作引擎，在游戏场景中进行内容制作，固定与移动机位的虚拟摄像机对虚拟场景进行平面拍摄与全景拍摄，形成平面动画或全景动画。

10.一种基于多模态捕捉的快速动画成片系统，其特征在于，包括依次连接的多模态捕捉模块（21）、数据融合处理模块（22）、数据传输模块（23）、内容制作模块（24），其中：

多模态捕捉模块（21），用于多模态捕捉演员表演数据；

数据融合处理模块（22），用于对捕捉数据进行融合处理；

数据传输模块（23），用于数据传输至内容制作模块（24）；

内容制作模块（24），用于处理使用捕捉数据，将运动与表情复现至目标模型上并录制成片。

11.如权利要求10所述的基于多模态捕捉的快速动画成片系统，其特征在于，在多模态捕捉模块（21）前还包括标定校准模块（20）用以对多模态捕捉模块（21）标定校准，降低捕捉误差。