[发明专利]一种基于对抗训练和BiLSTM-CRF的医学领域命名实体识别方法在审
申请号: | 202211305761.9 | 申请日: | 2022-10-24 |
公开(公告)号: | CN115659976A | 公开(公告)日: | 2023-01-31 |
发明(设计)人: | 张丽;马春澎 | 申请(专利权)人: | 北京工业大学 |
主分类号: | G06F40/295 | 分类号: | G06F40/295;G06F40/30;G06N3/0442;G06N3/045;G06N3/094 |
代理公司: | 北京汇信合知识产权代理有限公司 11335 | 代理人: | 林聪源 |
地址: | 100124 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 对抗 训练 bilstm crf 医学 领域 命名 实体 识别 方法 | ||
1.一种基于对抗训练和BiLSTM-CRF的医学领域命名实体识别方法,其特征在于,包括:
获取医学领域的医疗文本数据集;
将医疗文本数据集切分成文字和词组作为训练样本,并通过Word2Vec方法将训练样本转化为词向量矩阵;
计算词向量矩阵中每个词向量的梯度,并使用FGM对抗训练方法对词向量梯度进行标准化处理得到扰动值,将扰动值加入到原有词向量中;
将原有词向量与添加了扰动值后的词向量同时送往BiLSTM模型,BiLSTM模型通过门机制获取到词向量上下文中的信息,提取相关特征,得到医疗领域字词信息间的关联性特征;
将提取到的关联性特征输入到条件随机场CRF中,对样本进行预测,得到最终的预测值。
2.如权利要求1所述的医学领域命名实体识别方法,其特征在于,医学领域的医疗文本数据集包括中文医学NER公开数据集,所述训练样本包括训练集、测试集和验证集。
3.如权利要求1所述的医学领域命名实体识别方法,其特征在于,所述通过Word2Vec方法将训练样本转化为词向量矩阵,包括:
将训练样本输入Word2Vec中的skip-gram模型,通过输入中心词预测指定大小窗口内的上下文的词,训练完成可获得词向量表;
基于词向量表获取训练样本中每个文字或词组的词向量,得到词向量矩阵。
4.如权利要求1所述的医学领域命名实体识别方法,其特征在于,词向量的梯度的计算公式为:
式中,g为对词向量x求梯度,y为预测值,θ为分类器当前参数的常数集;
扰动值的计算公式为:
r=-εg/||g||2
式中,r为扰动值,ε为扰动系数。
5.如权利要求1或4所述的医学领域命名实体识别方法,其特征在于,还包括:
计算添加扰动值后的词向量的梯度A,并将梯度A累加到原有词向量的梯度上,得到梯度B;基于梯度B对模型参数进行更新。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京工业大学,未经北京工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211305761.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种星地一体化跨域信关站切换控制系统
- 下一篇:一种电驱动系统的装配方法