[发明专利]一种基于人脸特征的汉语文本描述人脸图像生成方法有效
申请号: | 201910499411.2 | 申请日: | 2019-06-11 |
公开(公告)号: | CN110287484B | 公开(公告)日: | 2022-12-06 |
发明(设计)人: | 杨静;付志超 | 申请(专利权)人: | 华东师范大学 |
主分类号: | G06F40/289 | 分类号: | G06F40/289;G06F40/211;G06F40/242;G06F40/30;G06V40/16;G06V10/75;G06V10/80;G06V30/19 |
代理公司: | 上海蓝迪专利商标事务所(普通合伙) 31215 | 代理人: | 徐筱梅;张翔 |
地址: | 200241 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于人脸特征的汉语文本描述人脸图像生成方法,其特点是该方法对描述人脸特征的中文文本经分句、分词、词性分析、过滤和字典映射,从文本的句子、词语中抽取特征向量,实现中文文本序列到数学表示的转换,将抽取的特征表示与面部图像模版结合,并输入到深度神经网络模型中,生成与文本描述相匹配的人脸图像。本发明与现有技术相比生成符合相应汉语文本所描述特征的人脸图像具有较强的针对性,在处理描述文本的过程中应用了词性过滤操作,并通过自动编码器进行语义过滤以及融合,有效消除了描述文本中与任务无关以及无意义文本的干扰,方法简单、易行,较好的解决了自然语言描述的随意性。 | ||
搜索关键词: | 一种 基于 特征 汉语 文本 描述 图像 生成 方法 | ||
【主权项】:
1.一种基于人脸特征的汉语文本描述人脸图像生成方法,其特征在于该方法对描述人脸特征的中文文本经分句、分词、词性分析、过滤和字典映射,从文本的句子、词语中抽取特征向量,实现中文文本序列到数学表示的转换,将抽取的特征表示与面部图像模版结合,并输入到深度神经网络模型中,生成与文本描述相匹配的人脸图像,其具体实现过程包括以下步骤:包括以下具体步骤:a、获取描述面部特征的汉语言文本输入;b、提取文本中可以切分短句的分隔符位置,选择定位短句的分隔符;c、使用上述选择的分隔符,将描述面部特征的汉语言文本分割成描述短句列表S,且分割后的短句中不包含上述分隔符;d、对短句列表S中的每个短句Si进行中文分词以及词性标注,并过滤部分词性词语,保留具备特征描述能力的词或短语,得到对应的分词结果S(e)i,对应短句列表S得到分词结果列表S(e);所述短句Si为短句列表S中的第i个短句;e、利用word2vec词向量工具对每个S(e)i中的每个单词S(e)ij进行向量化,得到短句S(e)i对应的向量化结果为Vi;单词S(e)ij对应的向量化结果为Vij;短句列表S对应的向量化结果为V;所述单词S(e)ij为短句Si分词列表S(e)i中的第j个单词;f、将每个短句S(e)i对应的向量化结果Vi输入第一个递归自动编码器(Recursive AutoEncoder),将输出的单一向量VSi作为句子的表示向量,得到短句列表S所对应的向量列表VS;g、将向量列表VS输入第二个递归自动编码器(Recursive AutoEncoder),并将中间层输出的单一向量VF作为整个面部特征描述文本的最终向量表示;h、将上述步骤获取的向量VF与面部图像模版组合后输入系统中的面部图像生成模型中,得到与输入文本描述相符的人脸图像,所述生成模型基于深度神经网络。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华东师范大学,未经华东师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910499411.2/,转载请声明来源钻瓜专利网。