[发明专利]一种基于语义一致性的双向文本生成图像方法及系统在审
| 申请号： | 202110516474.1 | 申请日： | 2021-05-12 |
| 公开（公告）号： | CN113361250A | 公开（公告）日： | 2021-09-07 |
| 发明（设计）人： | 刘丽;崔怀磊;王泽康;马跃;张化祥 | 申请（专利权）人： | 山东师范大学 |
| 主分类号： | G06F40/205 | 分类号： | G06F40/205;G06F40/126;G06F40/30;G06K9/46;G06N3/04;G06T11/00 |
| 代理公司： | 济南圣达知识产权代理有限公司 37221 | 代理人： | 祖之强 |
| 地址： | 250014 山*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供了一种基于语义一致性的双向文本生成图像方法及系统，包括：获取自然语言，将自然语言输入文本编码器，提取单词向量和句子向量；分别将句子向量输入到图像生成网络，单词向量输入到词级空间注意力机制模块，并将生成网络中每个阶段产生的图像特征与经过注意力机制调整后的单词向量进行串联，作为生成网络的下一个阶段的输入，经过多个阶段细化，最终生成图像；再将生成的图像输入图像编码器，提取图像特征；将图像特征输入带有哨兵机制的长短期记忆网络，输出重描述的文本；采用两个对抗损失函数对图像和重描述文本进行优化后，引入基于交叉熵的语义文本重建损失进一步对图像进行优化，直到图像重描述的文本与自然语言一致，输出图像。 | ||
| 搜索关键词： | 一种 基于 语义 一致性 双向 文本 生成 图像 方法 系统 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于山东师范大学，未经山东师范大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110516474.1/，转载请声明来源钻瓜专利网。
