[发明专利]笔录数据的实体识别方法、装置、介质及设备在审

专利信息
申请号: 202210301456.6 申请日: 2022-03-25
公开(公告)号: CN114638229A 公开(公告)日: 2022-06-17
发明(设计)人: 何宁秋;潘谷;李阳光;李世云;刘双广 申请(专利权)人: 高新兴科技集团股份有限公司
主分类号: G06F40/295 分类号: G06F40/295;G06F40/216;G06F40/242;G06F16/33;G06F16/35;G06F16/36;G06K9/62;G06N3/04;G06N3/08
代理公司: 广州国鹏知识产权代理事务所(普通合伙) 44511 代理人: 葛红
地址: 510530 广东省广州*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 笔录 数据 实体 识别 方法 装置 介质 设备
【权利要求书】:

1.一种笔录数据的实体识别方法,其特征在于,包括:

构建命名实体识别模型,所述命名实体识别模型由膨胀卷积模块IDCNN、双向长短时记忆网络Bilstm、多头注意力机制模块构成,通过所述膨胀卷积模块对输入数据提取特征信息,通过所述双向长短时记忆网络对输入数据提取序列信息,通过所述多头注意力机制模块根据所述特征信息和序列信息计算权值;

获取若干条原始笔录数据,对所述原始笔录数据进行预处理;

将所述预处理后的原始笔录数据划分为训练集、测试集以及验证集,采用训练集对所述命名实体识别模型进行训练;训练好的命名实体识别模型可用于识别笔录案件的实体信息。

2.如权利要求1所述的笔录数据的实体识别方法,其特征在于,所述获取若干条原始笔录数据,对所述原始笔录数据进行预处理包括:

获取若干条原始笔录数据,对每一条原始笔录数据采用BIOES规则进行标注,得到已标注的笔录数据;

根据已标注的笔录数据进行字频统计生成字符ID字典,以及根据已标注的笔录数据进行标签频率统计,生成标签ID字典;

采用JIEBA工具对每条笔录数据进行分词,生成每条笔录数据的分词和分词特征;

根据所述分词和分词特征训练每条笔录数据的词向量和分词特征向量;

将每条笔录数据中的每一个字符的词向量和分词特征向量拼接在一起。

3.如权利要求2所述的笔录数据的实体识别方法,其特征在于,所述根据所述分词和分词特征训练每条笔录数据的词向量和分词特征向量包括:

对每一个分词,从第一个字符开始进行标记,第一个字符标记为0,中间的字符标记为2,最后一个字符标记为3;

采用Skip-Gram模型根据标记后的分词训练词向量,得到词向量文件,向量的维度为100;

采用TensorFlow框架中的emdedding层根据标记后的分词及分词特征训练分词特征向量,得到20维的分词特征向量。

4.如权利要求1所述的笔录数据的实体识别方法,其特征在于,所述对所述采用训练集对所述命名实体识别模型进行训练包括:

将训练集中的笔录数据划分为大小为32batch的批处理文件,按照批处理文件的数据长度的最大值对每一个批处理文件进行补零操作,使得每个批处理文件的数据长度一致;

对所述批处理文件进行丢弃处理,其中丢弃率为0.5;

将丢弃处理后的批处理文件输入至膨胀卷积模块IDCNN,得到每个笔录数据的特征信息;

将丢弃处理后的批处理文件输入至双向长短时记忆网络Bilstm,得到每个笔录数据的序列信息;

组合所述特征信息和序列信息,生成空间序列信息;

将所述空间序列信息输入至所述多头注意力机制模块,得到每个笔录数据的权重信息;

将所述权重信息输入至全连接层,获取每个字符对应各个标签的打分值;

将每个字符对应各个标签的打分值输入至条件随机场层CRF,得到所述命名实体识别模型的损失函数Loss以及预测标签;

重复以上步骤迭代训练若干次。

5.如权利要求4所述的笔录数据的实体识别方法,其特征在于,所述将丢弃处理后的批处理文件输入至膨胀卷积模块IDCNN,得到每个笔录数据的特征信息包括:

通过所述膨胀卷积模块IDCNN中的膨胀卷积块对所述批处理文件提取特征信息;

使用relu激活函数进行激活,将四次迭代提取的特征信息拼接在一起,对拼接后的特征信息进行丢弃处理,其中丢弃率为0.5。

6.如权利要求4所述的笔录数据的实体识别方法,其特征在于,所述将丢弃处理后的批处理文件输入至双向长短时记忆网络Bilstm,得到每个笔录数据的序列信息包括:

将丢弃处理后的批处理文件输入至双向长短时记忆网络Bilstm获取序列信息;

将双向长短时记忆网络Bilstm输出的前向输出和后向输出拼接起来,连接全连接层进行分类,获取序列信息。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于高新兴科技集团股份有限公司,未经高新兴科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210301456.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top