[发明专利]一种基于数据增强的阅读理解选择题答题方法有效
申请号: | 202011630675.6 | 申请日: | 2020-12-31 |
公开(公告)号: | CN112784579B | 公开(公告)日: | 2022-05-27 |
发明(设计)人: | 张虎;张颖;雷登斌;潘邦泽;杨陟卓;李茹 | 申请(专利权)人: | 山西大学 |
主分类号: | G06F40/216 | 分类号: | G06F40/216;G06F40/279;G06F40/289 |
代理公司: | 太原申立德知识产权代理事务所(特殊普通合伙) 14115 | 代理人: | 郭海燕 |
地址: | 030006*** | 国省代码: | 山西;14 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 增强 阅读 理解 选择题 答题 方法 | ||
1.一种基于数据增强的阅读理解选择题答题方法,其特征在于,包括以下步骤:
S1、利用滑动窗口方法裁剪阅读理解选择题的背景材料;
S2、规范阅读理解选择题的背景材料、题干和选项数据格式,具体步骤为:
将每条阅读理解多项选择题数据中的背景材料做句子切分,并把每一个切分下的子句表示为{S1,S2,…,Sk},同时将题干Q分别和四个选项A、B、C、D逐一组合并表示成{Qa,Qb,Qc,Qd}作为待比较文档,然后分别对两部分做分词、停用词预处理;
S3、利用TF-IDF方法从词频角度提取答题候选句,得到答题材料句子集X,具体步骤为:
S301、将每条数据中的每个背景材料子句Si分别与题干Q和四个选项A、B、C、D逐一组合并表示成的{Qa,Qb,Qc,Qd}做TF-IDF相似度计算,计算公式如下所示:
式(4)中,表示每个背景材料子句Si的词频向量,表示{Qa,Qb,Qc,Qd}中每个题干选项句Qj的词频向量;
S302、将背景材料中相似度在前四的句子组合到一起,得到答题材料句子集X;
S4、利用Bi-Attention从高维句向量角度提取答题候选句,得到答题材料句子集Y,具体步骤为:
S401、将每个背景材料子句Si和题干Q与四个选项A、B、C、D逐一组合并表示成的{Qa,Qb,Qc,Qd}这两部分输入到BERT模型中,利用BERT模型表示每个背景材料子句Si的句向量和{Qa,Qb,Qc,Qd}中每个题干选项句Qj的句向量
S402、背景材料子句Si的句向量和题干选项句Qj的句向量做双向Attention计算,计算出背景材料子句对题干选项句子的注意权重α,和题干选项句子对背景材料子句的注意权重β,之后相加得到双向权重γ,计算公式如下所示:
γ=α+β (7)
S403、最终选取双向权重γ最高的前四句背景材料句并组合到一起,得到答题材料句子集Y;
S5、合并去重S3、S4所得的句子集X、Y,得到候选句集Z;
S6、利用适应于阅读理解选择题的EDA策略扩充候选句集Z,得到最终数据增强候选句集;
S7、将最终数据增强候选句集输入到BERT模型做阅读理解选择题答案预测。
2.根据权利要求1所述的一种基于数据增强的阅读理解选择题答题方法,其特征在于,所述步骤S1中利用滑动窗口方法裁剪阅读理解选择题的背景材料,具体步骤为:
S101、定义一篇文章P的字数为n,裁剪后的文章子片段为{p1,p2,…,pm},其中m为裁剪后的子片段个数,每个子片段的字符数不超过512;
S102、要求前一个子片段的结尾与后一个子片段的开头有衔接性,采用一个完整的句子sj作为衔接,具体表示如以下公式所示:
P=p1∪p2∪...∪pm (1)
s1=p1∩p2,...,sm-1=pm-1∩pm (2)
3.根据权利要求1所述的一种基于数据增强的阅读理解选择题答题方法,其特征在于,所述步骤S6中利用适应于阅读理解选择题的EDA策略扩充候选句集Z,得到最终数据增强候选句集,具体步骤为:
S601、依据阅读理解选择题试题中不同词的重要性重构一个适应于阅读理解选择题的EDA停用词表;
S602、针对阅读理解选择题答题的实验数据规模小、背景材料句子长的特性,对传统EDA方法参数策略进行改进;
S603、选用百分比参数δ=0.1且naug=2对答题候选句集Z部分做同义词替换、随机插入、随机交换和随机删除方法操作,扩充得到最终数据增强候选句集,其中,δ是句子中单词变化的百分比参数,naug表示每篇材料或每个选项所生成的增强数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山西大学,未经山西大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011630675.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种高压灭蚊电路及灭蚊器
- 下一篇:嵌入式控制系统及便携式危险物品检测仪
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置