[发明专利]一种实现化妆品多维动态展示的视频直播方法及装置

说明书

本发明公开了一种实现化妆品多维动态展示的视频直播方法，首先从主播上传的上妆前面部图像中提取出妆前面部特征，将其与面部模型的面部特征进行匹配得到面部特征匹配关系，然后从主播上传的上妆后面部图像中提取出妆后面部特征，依据妆前面部特征和妆后面部特征算出反映上妆效果的面部特征变化量，然后依据面部特征匹配关系和面部特征变化量生成面部模型的妆后面部特征变化量，依据妆后面部特征变化量对相应的面部模型进行渲染生成面部模型的妆后虚拟面部图像或视频，之后将妆后虚拟面部图像或视频显示于主播实时上传直播的上妆后面部图像或视频中。该方法能在直播过程中直观地播放不同面部模型应用了化妆品的效果，利于用户选到合适的化妆品。

技术领域

本发明涉及一种视频直播技术领域，特别涉及一种实现化妆品多维动态展示的视频直播方法及装置。

背景技术

目前，通过网络短视频直播的社交方式越来越火爆，随着互联网建设的逐渐发达，越来越多的人类活动都借助互联网实现，通过抖音、快手等短视频软件进行网络直播来实现课程分享、物品展示。这其中，利用直播展示的方式进行化妆品带货销售非常热门，直播过程中主播一般会实际使用化妆品进行化妆，以展示出该化妆品对面部容貌提升的效果，包括使眼睛显得更大，使嘴唇的形态更为丰满、使面部轮廓更有紧致等等。

然而，利用直播展示的方式进行化妆品带货销售仍存在一个问题：直播画面上只有主播自己的化妆效果展示，而没有任何关于具有其他面容类型人脸的上妆效果展示图，观看直播的用户只能得知化妆品在主播面部所产生的上妆效果，而无法得知化妆品在不同用户自身的面部所产生的化妆效果，这使得上妆效果的展示维度很单一，也使得用户在决定是否购买化妆品时参考示例较少，增加了用户选到合适自己的化妆品的难度。

发明内容

(一)发明目的

为克服上述现有技术存在的缺陷，实现在主播进行化妆品试妆直播时，直播画面上还能显示具有其他面容形貌的面部模型的上妆效果，从而给客户带来直观的上妆效果感受，方便用户决断是否买商品，本申请提供了以下技术方案。

(二)技术方案

作为本发明的第一方面，本发明公开了一种实现化妆品多维动态展示的视频直播方法，包括：

从主播上传的上妆前的面部图像或视频中提取出妆前面部特征，将所述妆前面部特征与预先建立的至少一种面部模型的面部特征进行匹配，得到主播与所述面部模型的面部特征匹配关系；

从主播上传的上妆后的面部图像或视频中提取出妆后面部特征，依据所述妆前面部特征和所述妆后面部特征算出反映上妆效果的面部特征变化量；

依据所述面部特征匹配关系和所述面部特征变化量生成所述面部模型的妆后面部特征变化量；

依据所述妆后面部特征变化量对相应的面部模型进行渲染，生成所述面部模型的妆后虚拟面部图像或视频；

将所述妆后虚拟面部图像或视频显示于主播实时上传直播的上妆后面部图像或视频中。

在一种可能的实施方式中，所述提取出妆前面部特征和/或所述提取出妆后面部特征，包括：

利用积分图对主播上传的面部图像进行矩形区域遍历，计算出各个矩形区域的Haar-like特征值；

将所述各个矩形区域的Haar-like特征值输入预先训练好的AdaBoost级联分类器，筛选出面部区域图像；其中，

所述AdaBoost级联分类器包括多个串联的弱分类器，所述弱分类器的训练样本包括面部具有一定偏转角度的图像、面部被部分遮挡的图像以及面部具有表情的正样本图像。

在一种可能的实施方式中，所述提取出妆前面部特征和/或所述提取出妆后面部特征，还包括：

利用可变形部件模型对面部关键点进行粗定位，得到粗定位坐标信息；