[发明专利]双眼皮配对数据获取方法及双眼皮效果生成模型训练系统在审

专利信息
申请号: 202310179896.3 申请日: 2023-02-28
公开(公告)号: CN116402941A 公开(公告)日: 2023-07-07
发明(设计)人: 江玥;李少辉;余清洲;刘洛麒 申请(专利权)人: 厦门美图之家科技有限公司
主分类号: G06T17/00 分类号: G06T17/00;G06N3/08;G06V10/764;G06V10/42;G06V10/80
代理公司: 厦门仕诚联合知识产权代理事务所(普通合伙) 35227 代理人: 陈蓓蓓
地址: 361000 福建省厦门市*** 国省代码: 福建;35
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 双眼皮 配对 数据 获取 方法 效果 生成 模型 训练 系统
【说明书】:

发明公开了一种双眼皮配对数据获取方法及双眼皮效果生成模型训练系统,其方法包括:基于预训练的stylegan模型,得到单‑双眼皮方向向量,并对输入图进行属性编辑,生成对应的单眼皮编辑图像;对单眼皮编辑图像进行人脸检测处理,得到上眼皮范围与多个眼睛点坐标,并根据预设参数模板,在上眼皮范围对眼睛点坐标进行调整与处理,生成双眼皮形状;在单眼皮编辑图像上生成双眼皮线条,得到双眼皮图像;进行特征融合,得到双眼皮目标图。通过生成双眼皮形状结合双眼皮形状与预设维度的对应参数范围,在单眼皮编辑图像上生成具有随机性的双眼皮线条,使得通过控制预设维度的参数调整,实现双眼皮精细的控制与调整,提高了用户使用体验感。

技术领域

本发明涉及图像处理技术领域,特别是一种双眼皮配对数据获取方法及利用双眼皮配对数据训练双眼皮效果生成模型的训练系统。

背景技术

人们常称眼睛为心灵的窗口,它是容貌美的中心,所以一双漂亮而完美的眼睛,在人体美中常常起到锦上添花的作用;而双眼皮通常会使眼睛显得大、更加有神,因此在日常拍照时,双眼皮美颜特效也成为了众多爱美者们最常用的美颜特效之一。

目前市面上已有的双眼皮效果,大部分是采用了传统的贴素材的方式,预先在标准人脸上绘制双眼皮素材,然后基于美颜用户的人脸点、通过网格映射的方式将素材贴上去。但是,由于真实场景的丰富性和用户的差异性,这种贴素材的方式很难实现真实自然的双眼皮效果。并且,对于本身就是双眼皮的用户,这种方式也无法抹除用户原本的双眼皮,导致用户体验不佳。

另一方面,已有的一些通过深度学习技术实现的双眼皮效果,则存在生成画质不够、双眼皮线条不够清晰流畅等问题,并且往往只有一款或几款固定的双眼皮效果(如开扇、平扇等),用户无法对双眼皮位置、形状、深浅等维度进一步实现精细的控制与调整,极大地影响了用户体验。

即,现有技术中存在双眼皮生成效果不佳,而用户又无法自主对双眼皮进一步实现精细的控制与调整,导致用户使用体验感不佳的问题。

发明内容

本发明的主要目的在于提供了一种双眼皮配对数据获取方法、系统及存储介质,旨在解决现有的双眼皮配对数据获取方法存在双眼皮效果不佳,而用户又无法自主对双眼皮进一步实现精细的控制与调整,导致用户使用体验感不佳的技术问题。

为实现上述目的,本发明提供了一种双眼皮配对数据获取方法,其包括以下步骤:步骤a.基于预训练的stylegan模型,得到单-双眼皮方向向量;步骤b.利用单-双眼皮方向向量对输入图进行属性编辑,生成对应的单眼皮编辑图像;步骤c.对单眼皮编辑图像进行人脸检测处理,得到上眼皮范围与多个眼睛点坐标,并根据预设参数模板,在上眼皮范围对眼睛点坐标进行调整与处理,生成双眼皮形状;步骤d.基于双眼皮形状与预设维度的对应参数范围,在单眼皮编辑图像上生成双眼皮线条,得到双眼皮图像;步骤e.基于双眼皮图像与输入图在上眼皮范围的掩膜区域进行特征融合,得到双眼皮目标图。

可选的,步骤a具体包括如下步骤:基于预训练的stylegan模型,随机输入隐向量,生成多张随机采样图,并同时保存采样图和对应的隐向量;将采样图输入至预训练的单双眼皮分类模型,得到对应的分类结果;基于分类结果,对隐向量进行分组,得到单眼皮、双眼皮两组;通过SVM方式得出两组向量之间的分类超平面,并将该超平面的法向量作为单-双眼皮方向向量。

可选的,步骤b具体为对每个隐向量加上方向向量,得到编辑后的隐向量,再通过stylegan网络生成对应的单眼皮编辑图像。

可选的,步骤c具体包括如下步骤:基于人脸检测模型对单眼皮编辑图像进行人脸检测处理,得到多个眼睛点坐标与上眼皮范围;根据预设参数模板,在上眼皮范围对眼睛点坐标进行随机增减,并通过贝塞尔曲线拟合得到双眼皮形状;预设参数模板至少包括根据双眼皮类型定义的双眼皮宽度预设参数范围、双眼皮角度预设参数范围、双眼皮长度预设参数范围,以及不同参数范围与眼睛点坐标之间的预设计算公式。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门美图之家科技有限公司,未经厦门美图之家科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202310179896.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top