[发明专利]基于对抗生成网络的多模态影像生成方法和装置有效
| 申请号： | 202310699766.2 | 申请日： | 2023-06-14 |
| 公开（公告）号： | CN116433795B | 公开（公告）日： | 2023-08-29 |
| 发明（设计）人： | 李劲松;张楚杰;陈延伟;童若锋;林兰芬 | 申请（专利权）人： | 之江实验室 |
| 主分类号： | G06T11/00 | 分类号： | G06T11/00;G06T7/33;G06N3/0464;G06N3/0475;G06N3/048;G06N3/084 |
| 代理公司： | 杭州天勤知识产权代理有限公司 33224 | 代理人： | 曹兆霞 |
| 地址： | 311121 浙江省杭*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于对抗生成网络的多模态影像生成方法和装置，包括：获取同一目标的第一模态影像和第二模态影像，对第一模态影像进行增强得到两幅增强后模态影像；构建包括生成器和判别器的对抗生成网络，其中，生成器基于第一模态影像及其两幅增强后模态影像生成三幅预测第二模态影像，判别器对第二模态影像和第一模态影像对应的预测第二模态影像进行真伪区分判别，判别器还计算输出两幅增强后模态影像对应的两幅预测第二模态影像在判别器中间层的两幅中间特征图；基于两幅中间特征图构建特征之间的对比损失，将对比损失结合对抗生成网络的原有损失对对抗生成网络进行参数优化，提取参数优化的生成器用于多模态影像生成，以提高影像精度。 | ||
| 搜索关键词： | 基于 对抗 生成 网络 多模态 影像 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于之江实验室，未经之江实验室许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202310699766.2/，转载请声明来源钻瓜专利网。
