[发明专利]一种人脸特征点的编解码方法、设备及系统

说明书

技术领域

本发明涉及视频编解码领域，特别涉及一种人脸特征点的编解码方法、设备及系统。

背景技术

近年来，随着视频行业及智能手机的高速发展，例如Facetime、Tango等的应用使多媒体通信在移动终端上普及，通过视频通话实现与他人之间的交互将会越来越普及。但是视频电话使得多媒体数据急剧增长，并且在传输过程中占用大量带宽，所以需要能够一种降低视频通话过程中的数据量，减少码流对传输带宽的占用的编解码方法。

现有技术中，为了提高对视频帧中人脸的压缩效率，有研究人员针对人脸视频的特征，提出了一系列基于模型的视频编码方法。这类方法通过对人脸建模，实现对视频中人脸的参数化表征，使得在传输视频时只需要传输模型的一些参数就可以在接收端利用人脸模型重建出目标。与一般通用视频编码方法相比，这种方法通过利用模型的先验信息降低了视频传输数据量，节省了带宽资源。

但是，使用这种压缩方法压缩得出的模型参数向量在时域变化缓慢，视频中前后帧的人脸模型参数仍然具有很大的冗余度和压缩空间，仍不能满足用户对视频通话降低数据量以及减少码流对传输带宽的占用的要求。

发明内容

为了降低人脸特征点编解码的空间冗余，降低视频编码数据，提高编码效 率，本发明实施例提供了一种人脸特征点的编解码方法、设备及系统。所述技术方案如下：

第一方面，提供了一种人脸特征点的编解码方法，所述方法包括：

发送方获取当前视频帧中整个人脸的特征点信息；

计算半部分人脸的特征点信息与另外半部分人脸的特征点信息之间的差值，所述半部分人脸包括人脸的左半部分或右半部分；

所述发送方对所述半部分人脸的特征点信息及所述差值进行编码；

所述发送方将编码后的所述半部分人脸的特征点信息及所述差值发送至接收方；

所述接收方解码所述编码后的所述半部分人脸的特征点信息及所述差值；以及

所述接收方根据所述解码后的所述半部分人脸的特征点信息及所述差值，生成对应的人脸。

结合第一方面，在第一种可能的实现方式中，所述特征点信息用于描述所述人脸的轮廓、眉毛、眼睛、鼻子及嘴巴中的至少一个。

结合第一方面的第一种可能的实现方式，在第二种可能的实现方式中，所述计算半部分人脸的特征点信息与另外半部分人脸的特征点信息之间的差值包括：

计算所述半部分人脸的每个特征点信息与另外半部分人脸的对应特征点信息之间的差值。

结合第一方面，在第三种可能的实现方式中，所述接收方根据所述解码后的所述半部分人脸的特征点信息及所述差值，生成对应的人脸包括：

所述接收方根据所述解码后的所述半部分人脸的特征点信息以及所述差值，预测所述另外半部分人脸的特征点信息；

所述接收方根据所述解码后的所述半部分人脸的特征点信息，以及预测的所述另外半部分人脸的特征点信息，生成所述对应的人脸。

第二方面，提供了一种人脸特征点的编码方法，所述方法包括：

获取当前视频帧中整个人脸的特征点信息；

计算半部分人脸的特征点信息与另外半部分人脸的特征点信息之间的差值，所述半部分人脸包括人脸的左半部分或右半部分；

对所述半部分人脸的特征点信息及所述差值进行编码；

将编码后的所述半部分人脸的特征点信息及所述差值发送至其他设备。

结合第二方面，在第一种可能的实现方式中，所述特征点信息用于描述所述人脸的轮廓、眉毛、眼睛、鼻子及嘴巴中的至少一个。

结合第二方面的第一种可能的实现方式，在第二种可能的实现方式中，所述计算半部分人脸的特征点信息与另外半部分人脸的特征点信息之间的差值包括：

计算所述半部分人脸的每个特征点信息与另外半部分人脸的对应特征点信息之间的差值。

第三方面，提供了一种人脸特征点的解码方法，所述方法包括：

接收其他设备发送的编码后的半部分人脸的特征点信息及差值，所述半部分人脸包括人脸的左半部分或右半部分；

解码所述编码后的半部分人脸的特征点信息及差值；以及

根据所述解码后的所述半部分人脸的特征点信息及所述差值，生成对应的人脸。

结合第三方面，在第一种可能的实现方式中，所述特征点信息用于描述所述人脸的轮廓、眉毛、眼睛、鼻子及嘴巴中的至少一个。