[发明专利]一种基于量化的长文本问答推理方法、设备及介质在审
申请号: | 202210446660.7 | 申请日: | 2022-04-26 |
公开(公告)号: | CN114817500A | 公开(公告)日: | 2022-07-29 |
发明(设计)人: | 陈其宾;李锐;张晖 | 申请(专利权)人: | 山东浪潮科学研究院有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06N3/04;G06N3/08;G06N5/04 |
代理公司: | 北京君慧知识产权代理事务所(普通合伙) 11716 | 代理人: | 王彬 |
地址: | 250101 山东省济*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种基于量化的长文本问答推理方法、设备及介质。方法包括:获取训练数据,根据训练数据训练得到Longformer模型;确定Longformer模型的模型结构,并根据模型结构确定Longformer模型的量化粒度,根据量化粒度对Longformer模型进行量化;确定Longformer模型的量化裁减范围,并对量化裁减范围进行优化,从而将Longformer模型量化至INT8数据类型,得到整型模型;将整型模型部署到服务器上,以通过整型模型对长文本问答任务进行推理。本申请基于Longformer提出的滑动窗口注意力机制对Longformer模型进行针对性的量化,提高了模型在长文本问答任务上的推理效率,具有较强的实用性。 | ||
搜索关键词: | 一种 基于 量化 文本 问答 推理 方法 设备 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东浪潮科学研究院有限公司,未经山东浪潮科学研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210446660.7/,转载请声明来源钻瓜专利网。
- 上一篇:一种水处理用卷式膜清洗方法
- 下一篇:一种配电柜门板强度形变检测装置