[发明专利]一种构建基于ViT模型的密集预测任务适配器的方法在审
| 申请号： | 202210365639.4 | 申请日： | 2022-04-08 |
| 公开（公告）号： | CN114781499A | 公开（公告）日： | 2022-07-22 |
| 发明（设计）人： | 陈喆;段雨辰;王文海;何军军;路通;代季峰;乔宇 | 申请（专利权）人： | 上海人工智能创新中心 |
| 主分类号： | G06K9/62 | 分类号： | G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 北京市诚辉律师事务所 11430 | 代理人： | 耿慧敏;朱伟军 |
| 地址： | 200000 上海市*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种构建基于ViT模型的密集预测任务适配器的方法。该方法包括：获取预训练ViT模型，该ViT模型包含用于将图像切分为不重叠的图像块的多个ViT分块；在ViT模型外部增设适配器，该适配器包含先验模块以及多个交替串联的注入器和特征提取器，所述先验模块用于获得输入图像的空间先验特征，所述注入器和特征提取器成对出现，将ViT模型按照层数分为层数相同的N块，每一个ViT分块配备一对注入器和特征提取器；加载ViT模型的预训练权重，并在密集预测任务上利用所述适配器微调该ViT模型的参数。本发明通过在ViT模型之外额外增加一个适配器网络，使其能够快速适配下游的密集预测任务。 | ||
| 搜索关键词： | 一种 构建 基于 vit 模型 密集 预测 任务 适配器 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于上海人工智能创新中心，未经上海人工智能创新中心许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210365639.4/，转载请声明来源钻瓜专利网。
- 上一篇：一种农作物风选分拣装置
- 下一篇：一种海上可移动发电厂
