[发明专利]一种基于人脸AI彩妆替换的多屏显示的装置及方法

说明书

本发明提供了一种基于人脸AI彩妆替换的多屏显示的装置及方法。该方法包括：识别检测区内是否有顾客；确认检测区内有顾客时，确认顾客的性别信息；获取顾客第一面部三维特征与第一面部纹理特征；将顾客第一面部三维特征与第一纹理特征输入现有的公共面部三维模型中，进而获取第一面部三维模型；获取顾客所选择的彩妆的第一搭配信息；获取与第一搭配信息相匹配的第一彩妆使用特征信息，进而将其输入第一面部三维模型中来获取第二面部三维模型；将第一面部三维模型与第二面部三维模型以多屏图像显示的方式向顾客展现。本发明有着可根据顾客性别、面部特征、所选妆容来快速建立彩妆效果三维模型，并能多屏显示彩妆使用前后效果的优点。

技术领域

本发明涉及图像处理领域，具体涉及一种基于人脸AI彩妆替换的多屏显示的装置及方法。

背景技术

随着人们生活水平的提高与对外貌的热烈追求，各种各样的化妆品被制造了出来，而为了提高彩妆的销量与顾客的满意度，同时减小顾客购买化妆品时对产品的损耗。一些AR投影技术与AI图像识别技术被使用到了彩妆的智能体验设备上了，进而可以快速模拟出使用化妆品的效果。使得消费者可以快速、直观的体验到化妆品的实际使用效果，优化用户的体验。

目前，如专利申请号为CN201810898285.3的“一种智能试妆梳妆镜及方法”这类专利，根据人脸的特征点来检测试妆人员的面部图像，选取合适的包含人脸的图像作为试妆图像，然后根据实际操作基于虚拟化妆的处理参数对试妆图像进行图像处理来实现虚拟着妆。这种方式获取的试妆图像精度较低，往往会丢失大量如眉毛、眼影、睫毛、美瞳等细节细节信息，造成映射后细节纹理的真实感较低，只是起到简单的图片美颜效果，会与顾客使用彩妆后的效果存在较大偏差。同时这种试妆图像立体感较差，顾客难以从多角度立体观测美妆后的面部效果。

而如专利申请号为CN201410689673.2的“三维虚拟试妆方法和装置”可以解决二维试妆图像的清晰度与立体观测效果的问题，但这类方法在同时应对多种彩妆模拟时，该类专利的各面部细节之间的贴图更换和效果的调整都是独立进行的，难以处理彩妆之间颜色效果相互叠加的问题。

因此，一种使用AI图像识别技术、可根据顾客性别、面部特征、所选妆容来快速建立彩妆效果三维模型，并能多屏显示彩妆使用前后的效果的一种基于人脸AI彩妆替换的多屏显示的装置及方法变得十分必要。

发明内容

为了解决上述技术问题，本发明提供了一种基于人脸AI彩妆替换的多屏显示的装置及方法，用于多屏同时显示不同彩妆在同一个脸型上效果。

本发明提供了一种基于人脸AI彩妆替换的多屏显示的方法，包括以下步骤：识别检测区内是否有顾客；确认检测区内有顾客时，确认顾客的性别信息；获取顾客第一面部三维特征与第一面部纹理特征；将顾客第一面部三维特征与第一纹理特征输入现有的公共面部三维模型中，进而获取第一面部三维模型；获取顾客所选择的彩妆的第一搭配信息，所述第一搭配信息包括所选彩妆的种类、剂量、使用区域信息；获取与第一搭配信息相匹配的第一彩妆使用特征信息，进而将其输入第一面部三维模型中来获取第二面部三维模型；将第一面部三维模型与第二面部三维模型以多屏图像显示的方式向顾客展现。

进一步，“识别检测区内是否有顾客”具体为：通过热成像仪对识别区域的热源进行识别；确定检测到热源后，对热源的轮廓进行判断，进而确定是否为人形；当确定热源大体为人形后，开始后续工作。

进一步，“确认顾客的性别信息”具体为：通过获取的顾客的热成像的热源形状结合男女性别造成的形体特征，从而确定顾客的性别，并生成性别信息。

进一步，“获取顾客第一面部三维特征与第一面部纹理特征”具体为：从多个角度分别拍摄顾客的面部图像；从面部图像中定位顾客的面部特征点，并确定各个特征点的三维位置关系，进而生成第一面部三维特征；对各个相邻的特征点之间形成的滑块的颜色与纹理进行识别，进而生成第一面部纹理特征。