[发明专利]表情驱动方法、装置、电子设备及存储介质

说明书

本申请公开了表情驱动方法、装置、电子设备及存储介质，涉及人工智能领域，其中方法可包括：对第一图像中的被驱动人物进行人脸关键点检测，得到第一人脸关键点序列；针对依次获取到的各第二图像，分别进行以下处理：对其中的驱动人物进行人脸关键点检测，得到第二人脸关键点序列；若当前未确定出无表情帧图像，则对第二人脸关键点序列进行分析，若基于分析结果确定出第二图像为无表情帧图像，则将第二人脸关键点序列作为无表情关键点序列；否则，获取第二人脸关键点序列与无表情关键点序列的偏差量，并基于所述偏差量及第一人脸关键点序列对被驱动人物进行表情驱动渲染。应用本申请所述方案，可提升灵活性、互动性及准确性等。

技术领域

本申请涉及计算机应用领域，特别涉及人工智能领域的表情驱动方法、装置、电子设备及存储介质。

背景技术

在短视频、视频直播和影视特效等应用中，可使用人脸特效技术，如美妆、换脸、塑形及表情驱动等。

目前的表情驱动主要采用以下方式：针对用户上传的包含被驱动人物的图片，按照几个预先设定的模板表情进行映射驱动，灵活性、互动性和趣味性均较差。

发明内容

有鉴于此，本申请提供了表情驱动方法、装置、电子设备及存储介质。

一种表情驱动方法，包括：

对第一图像中的被驱动人物进行人脸关键点检测，得到第一人脸关键点序列；

针对依次获取到的各第二图像，分别进行以下处理：

对所述第二图像中的驱动人物进行人脸关键点检测，得到第二人脸关键点序列；

若当前未确定出无表情帧图像，则对所述第二人脸关键点序列进行分析，若基于分析结果确定出所述第二图像为无表情帧图像，则将所述第二人脸关键点序列作为无表情关键点序列；

若当前已确定出无表情帧图像，则获取所述第二人脸关键点序列与所述无表情关键点序列的偏差量，并基于所述偏差量以及所述第一人脸关键点序列对所述被驱动人物进行表情驱动渲染。

根据本申请一优选实施例，所述得到第一人脸关键点序列之后，进一步包括：对所述第一人脸关键点序列进行对齐操作；

所述将所述第二人脸关键点序列作为无表情关键点序列之后，进一步包括：对所述无表情关键点序列进行对齐操作；

所述获取所述第二人脸关键点序列与所述无表情关键点序列的偏差量之前，进一步包括：对所述第二人脸关键点序列进行对齐操作。

根据本申请一优选实施例，该方法进一步包括：针对当前处理的第二图像，结合与所述当前处理的第二图像相邻的前N帧第二图像分别对应的第二人脸关键点序列，对所述当前处理的第二图像对应的第二人脸关键点序列进行帧间平滑处理，N为正整数。

根据本申请一优选实施例，所述基于所述偏差量以及所述第一人脸关键点序列对所述被驱动人物进行表情驱动渲染包括：

将所述偏差量叠加到所述第一人脸关键点序列上，得到渲染关键点序列；

根据所述渲染关键点序列对所述被驱动人物进行表情驱动渲染。

根据本申请一优选实施例，该方法进一步包括：按照同样的人脸关键点检测方式对所述被驱动人物及所述驱动人物进行人脸关键点检测；

各序列中分别包括：分别对应于检测到的各人脸关键点的位置坐标。

根据本申请一优选实施例，所述获取所述第二人脸关键点序列与所述无表情关键点序列的偏差量包括：针对所述第二人脸关键点序列中的各位置坐标，分别将所述位置坐标与所述无表情关键点序列中的对应于相同人脸关键点的位置坐标作差，得到分别对应于各人脸关键点的偏差量；