[发明专利]用于实体分类的方法和装置有效
申请号: | 202010295261.6 | 申请日: | 2020-04-15 |
公开(公告)号: | CN111539209B | 公开(公告)日: | 2023-09-15 |
发明(设计)人: | 程健一;赵岷;秦华鹏 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/36;G06F40/295;G06F40/30;G06F40/289;G06N3/0464;G06N3/0455;G06N3/0442;G06N3/047;G06N3/084 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 实体 分类 方法 装置 | ||
1.一种用于实体分类的方法,包括:
获取待分类实体;
将所述待分类实体划分成词片段,并对词片段进行概念标注,其中,所述词片段为预设粒度的语义单元,所述词片段的粒度大于词粒度;
将已标注词片段概念的所述待分类实体输入预先训练的实体分类模型,得到所述待分类实体的实体分类结果,其中,所述实体分类模型用于表征已标注词片段概念的实体与实体分类之间的对应关系;
其中,所述实体分类模型通过如下步骤训练得到:
获取第二训练样本集合,其中,第二样本集合包括已标注词片段概念且未设分类标签的实体和已设分类标签的实体;
将所述第二训练样本中的已标注词片段概念且未设分类标签的实体作为输入,将所述第二训练样本中的已设分类标签的实体作为输出,训练预先构建的第二初始模型,得到所述实体分类模型。
2.根据权利要求1所述的方法,其中,所述将所述待分类实体划分成词片段,并对词片段进行概念标注,包括:
将所述待分类实体输入预先训练的词片段标注模型,得到所述待分类实体的词片段概念标注,其中,所述词片段标注模型用于为实体中的词片段进行概念标注。
3.根据权利要求2所述的方法,其中,所述词片段标注模型通过如下方式训练得到:
获取第一训练样本集合,其中,第一训练样本包括未标注实体和已标注词片段概念的实体;
将所述第一训练样本中未标注实体作为输入,将所述第一训练样本中已标注词片段概念的实体作为输出,训练预先构建的第一初始模型,得到所述词片段标注模型。
4.根据权利要求3所述的方法,其中,所述第一训练样本通过如下方式得到:
获取实体样本;
对所述实体样本进行基础粒度切分,得到所述实体样本的基本元素,并对各所述基本元素进行概念标注;
按照预设粒度对概念标注后的基本元素进行组合或拆分,生成已标注词片段概念的实体样本;
将未标注实体样本和已标注词片段概念的实体样本确定为所述第一训练样本。
5.根据权利要求1所述的方法,其中,所述实体分类模型还用于对实体中的词片段进行概念标注;
所述将所述待分类实体划分成词片段,并对词片段进行概念标注,包括:
将所述待分类实体输入所述实体分类模型,得到所述待分类实体的词片段概念标注。
6.根据权利要求5所述的方法,其中,所述实体分类模型还可以通过如下步骤训练得到:
获取第三训练样本集合,其中,所述第三训练样本包括为未标注实体和已标注词片段概念且已设分类标签的实体;
将所述第三训练样本中未标注实体作为输入,将所述第三训练样本中已标注词片段概念且已设分类标签的实体作为输出,训练第三初始模型,得到所述实体分类模型。
7.一种用于实体分类的装置,包括:
获取单元,被配置成获取待分类实体;
标注单元,被配置成将所述待分类实体划分成词片段,并对词片段进行概念标注,其中,所述词片段为预设粒度的语义单元,所述词片段的粒度大于词粒度;
输入单元,被配置成将已标注词片段概念的所述待分类实体输入预先训练的实体分类模型,得到所述待分类实体的实体分类结果,其中,所述实体分类模型用于表征已标注词片段概念的实体与实体分类之间的对应关系;
其中,所述实体分类模型通过如下步骤训练得到:
获取第二训练样本集合,其中,第二样本集合包括已标注词片段概念且未设分类标签的实体和已设分类标签的实体;
将所述第二训练样本中的已标注词片段概念且未设分类标签的实体作为输入,将所述第二训练样本中的已设分类标签的实体作为输出,训练预先构建的第二初始模型,得到所述实体分类模型。
8.根据权利要求7所述的装置,其中,所述标注单元进一步被配置成:
将所述待分类实体输入预先训练的词片段标注模型,得到所述待分类实体的词片段概念标注,其中,所述词片段标注模型用于为实体中的词片段进行概念标注。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010295261.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:开关型鞍座
- 下一篇:一种市政路基施工方法