[发明专利]一种基于视频换脸的产品展示方法及系统

权利要求书

1.一种基于视频换脸的产品展示方法，其特征在于：包括以下步骤：

存入产品图像视频和产品相关信息，并播放产品图像视频；

根据采集到的体验者的身体图像和人脸图像，对产品图像视频进行合成处理；

播放处理好的合成图像视频。

2.根据权利要求1所述的一种基于视频换脸的产品展示方法，其特征在于：产品相关信息包括产品的尺码数据。

3.根据权利要求2所述的一种基于视频换脸的产品展示方法，其特征在于：对产品图像视频合成处理的内容包括：将产品图像视频中的模特面部替换成体验者的面部；将模特的身体图像根据体验者的身体图像进行适应性调整。

4.根据权利要求3所述的一种基于视频换脸的产品展示方法，其特征在于：在对产品图像视频合成时，首先对体验者的身体图像的身体尺码数据和产品相关信息进行匹配，匹配成功再进行合成处理。

5.根据权利要求4所述的一种基于视频换脸的产品展示方法，其特征在于：将模特面部替换成体验者面部包括如下子步骤：

对采集到的体验者的人脸图像F1使用人脸3D重建模型进行3D重建，得到体验者的3D人脸模型M1；

对产品图像视频中的模特人脸进行检测，将检测到的模特人脸图像记为F2；

对模特人脸图像F2使用人脸3D重建模型进行3D重建，生成模特的3D头部模型M2，提取M2的口型和表情参数α、尺寸S、头部位置P和姿态矢量A，把三元组（S,P,A）记为变换参数β；

对模特人脸图像F2提取光照参数；

对体验者的3D人脸模型M1按照变换参数β作缩放、平移和旋转变换；对体验者的3D人脸模型按照口型和表情参数α作口型和表情的变换；

把变换以后的体验者的3D人脸模型M1按照体验者的人脸图像F1的光照参数进行渲染，得到新的人脸图像F3。

6.根据权利要求4所述的一种基于视频换脸的产品展示方法，其特征在于：根据体验者的身体图像进行适应性调整包括如下子步骤：

对产品图像视频中的模特身体进行检测，将检测到的模特身体图像记为F4；

对F4用3D重建模型进行3D重建，生成模特的3D身体模型M3，并提取身体尺码数据ξ；

根据采集到的体验者的身体图像，对模特的3D身体模型M3的身体尺码数据ξ进行适应性调整，得到新的身体图像F5；

把新的人脸图像F3和新的身体图像F5通过无缝克隆技术融合到产品图像视频中，得到合成图像视频。

7.一种基于视频换脸的产品展示系统，其特征在于：包括：

视频展示模块：用于展示产品图像视频和合成图像视频；

视觉采集模块：用于采集体验者的身体图像和人脸图像；

视频合成模块：根据采集到的体验者的身体图像和人脸图像，对产品图像视频进行合成处理得到合成图像视频。

8.根据权利要求7所述的一种基于视频换脸的产品展示系统，其特征在于：所述视觉采集模块包括摄像头、视觉测量子模块、数据输入子模块；所述摄像头对体验者的图像进行收集，所述视觉测量子模块用对摄像头采集的体验者图像进行数据化分析，所述数据输入子模块用于输入体验者的身体尺码数据。

9.根据权利要求7所述的一种基于视频换脸的产品展示系统，其特征在于：产品展示系统还包括处理器模块和存储模块，所述存储模块内存有可执行程序，所述处理器模块运行所述可执行程序执行权利要求1-6所述的方法的步骤。