[发明专利]一种结构化信息提取方法和电子设备在审
申请号: | 202211527592.3 | 申请日: | 2022-11-30 |
公开(公告)号: | CN116245078A | 公开(公告)日: | 2023-06-09 |
发明(设计)人: | 胡创奇 | 申请(专利权)人: | 荣耀终端有限公司 |
主分类号: | G06F40/126 | 分类号: | G06F40/126;G06N3/08;G06N20/00;G06N3/0455 |
代理公司: | 北京中博世达专利商标代理有限公司 11274 | 代理人: | 申健 |
地址: | 518040 广东省深圳市福田区香蜜湖街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 结构 信息 提取 方法 电子设备 | ||
1.一种结构化信息提取方法,其特征在于,所述结构化信息包括多种类型的信息,所述方法包括:
获取用户输入的第一文本,所述第一文本包括多个字段;
所述第一文本和第一引导信息输入机器学习模型,所述机器学习模型输出第一信息;所述第一引导信息用于指示第一类型,所述第一信息包括所述第一类型对应的第一字段,所述第一字段为所述第一文本的多个字段中的一个;
所述第一文本和第二引导信息输入机器学习模型,所述机器学习模型输出第二信息;所述第二引导信息用于指示第二类型,所述第二信息包括所述第二类型对应的第二字段,所述第二字段为所述第一文本的多个字段中的一个;
所述第一信息和所述第二信息具有相同的编码结构。
2.一种结构化信息提取方法,其特征在于,所述结构化信息包括多种类型的信息,所述方法包括:
获取用户输入的第一文本;所述第一文本包括多个字段;
所述第一文本、第一引导信息和第二引导信息输入机器学习模型,所述机器学习模型输出第一信息和第二信息;
所述第一引导信息用于指示第一类型,所述第一信息包括所述第一类型对应的第一字段,所述第一字段为所述第一文本的多个字段中的一个;
所述第二引导信息用于指示第二类型,所述第二信息包括所述第二类型对应的第二字段,所述第二字段为所述第一文本的多个字段中的一个;
所述第一信息和所述第二信息具有相同的编码结构。
3.根据权利要求1或2所述的方法,其特征在于,所述类型包括:姓名,电话号码,邮编和地址中至少一项。
4.根据权利要求1-3中任一项所述的方法,其特征在于,
所述相同的编码结构包括:类型,字段内容,字段起始位置和字段结束位置。
5.根据权利要求1-3中任一项所述的方法,其特征在于,
所述机器学习模型包括编码器和解码器,所述编码器和解码器为Transformer自注意力神经网络。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
获取多组数据对Dpair,将多组数据对Dpair作为训练数据,对所述机器学习模型进行训练;所述数据对Dpair包括:用户输入的非结构化文本的分词序列x,和所述分词序列x对应的输出信息y;
获取基于预设编码结构的信息y的数据集合Drecord,将数据集合Drecord作为训练数据,对所述机器学习模型的解码器进行训练。
7.根据权利要求6所述的方法,其特征在于,所述机器学习模型的损失函数包括第一对数似然损失函数和第二对数似然损失函数,
所述第一对数似然损失函数为:
其中,Losspair为对所述机器学习模型进行训练的损失,θe为所述机器学习模型中编码器的网络参数;θd为所述机器学习模型中解码器的网络参数;
所述第二对数似然损失函数为:
其中,Lossrecord为对所述机器学习模型的解码器进行训练的损失,θd为所述机器学习模型中解码器的网络参数。
8.根据权利要求3所述的方法,其特征在于,所述第一类型为地址,所述方法还包括:
对所述第一信息中的第一字段进行分词;
利用编辑距离,将分词后的结果与全国行政区划数据进行模糊匹配,获取所述第一字段中对应各级行政区的信息。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
如果将分词后的结果与全国行政区划数据进行模糊匹配,未获取到第n级行政区的信息,根据获取到的第n-1级行政区的信息和第n+1级行政区的信息补齐所述第n级行政区的信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于荣耀终端有限公司,未经荣耀终端有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211527592.3/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置