[发明专利]一种基于对抗训练和BiLSTM-CRF的医学领域命名实体识别方法在审

专利信息
申请号: 202211305761.9 申请日: 2022-10-24
公开(公告)号: CN115659976A 公开(公告)日: 2023-01-31
发明(设计)人: 张丽;马春澎 申请(专利权)人: 北京工业大学
主分类号: G06F40/295 分类号: G06F40/295;G06F40/30;G06N3/0442;G06N3/045;G06N3/094
代理公司: 北京汇信合知识产权代理有限公司 11335 代理人: 林聪源
地址: 100124 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 对抗 训练 bilstm crf 医学 领域 命名 实体 识别 方法
【权利要求书】:

1.一种基于对抗训练和BiLSTM-CRF的医学领域命名实体识别方法,其特征在于,包括:

获取医学领域的医疗文本数据集;

将医疗文本数据集切分成文字和词组作为训练样本,并通过Word2Vec方法将训练样本转化为词向量矩阵;

计算词向量矩阵中每个词向量的梯度,并使用FGM对抗训练方法对词向量梯度进行标准化处理得到扰动值,将扰动值加入到原有词向量中;

将原有词向量与添加了扰动值后的词向量同时送往BiLSTM模型,BiLSTM模型通过门机制获取到词向量上下文中的信息,提取相关特征,得到医疗领域字词信息间的关联性特征;

将提取到的关联性特征输入到条件随机场CRF中,对样本进行预测,得到最终的预测值。

2.如权利要求1所述的医学领域命名实体识别方法,其特征在于,医学领域的医疗文本数据集包括中文医学NER公开数据集,所述训练样本包括训练集、测试集和验证集。

3.如权利要求1所述的医学领域命名实体识别方法,其特征在于,所述通过Word2Vec方法将训练样本转化为词向量矩阵,包括:

将训练样本输入Word2Vec中的skip-gram模型,通过输入中心词预测指定大小窗口内的上下文的词,训练完成可获得词向量表;

基于词向量表获取训练样本中每个文字或词组的词向量,得到词向量矩阵。

4.如权利要求1所述的医学领域命名实体识别方法,其特征在于,词向量的梯度的计算公式为:

式中,g为对词向量x求梯度,y为预测值,θ为分类器当前参数的常数集;

扰动值的计算公式为:

r=-εg/||g||2

式中,r为扰动值,ε为扰动系数。

5.如权利要求1或4所述的医学领域命名实体识别方法,其特征在于,还包括:

计算添加扰动值后的词向量的梯度A,并将梯度A累加到原有词向量的梯度上,得到梯度B;基于梯度B对模型参数进行更新。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京工业大学,未经北京工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202211305761.9/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top