[发明专利]一种电子装置、多标签分类方法及存储介质有效
申请号: | 201811529912.2 | 申请日: | 2018-12-14 |
公开(公告)号: | CN109783801B | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 刘俊;肖龙源;蔡振华;李稀敏;刘晓葳;谭玉坤 | 申请(专利权)人: | 厦门快商通信息技术有限公司 |
主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F16/33;G06F16/35 |
代理公司: | 厦门仕诚联合知识产权代理事务所(普通合伙) 35227 | 代理人: | 乐珠秀 |
地址: | 361007 福建省厦门*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 电子 装置 标签 分类 方法 存储 介质 | ||
本发明公开了一种电子装置、多标签分类方法及存储介质,该方法包括:零代词的识别与消解步骤:将待分类语句进行零代词的识别与消解以获得扩充语句;语句拆分步骤:将所述扩充语句进行句法分析,提取所述扩充语句中的并列关系项;通过替换或者标记训练将所述扩充语句进行拆分形成若干个拆句;或者针对性地设计语料标注,人工标记指代消解后的扩充语句中的并列关系项以及其他项,训练一个句子拆分的Bi‑LSTM‑CRF模型,使用训练后的分Bi‑LSTM‑CRF模型对所述扩充语句进行分类拆分形成若干个拆句。本发明可以有效拆分复杂多标签语句为多个简单的单标签语句。
技术领域
本发明涉及多标签分类技术领域,具体涉及一种电子装置、多标签分类方法及存储介质。
背景技术
现有深度学习语句多标签分类技术有两大方向:一是采用多标签分类指标,如:hamming loss直接预测标签集合;二是将语句转变为多个单标签二分类问题,分别预测每个标签符合的概率。这二者深度学习语句多标签分类技术均有其缺点,前者标签集合自由度高,训练难度大,需要大量独立训练样本,无法共享单标签训练样本等缺点;后者预测结果会受到非当次预测标签信息的干扰,或者说因为单标签的训练样本与多标签的测试样本分布不一致,其预测结果会存在可预见的偏差。
发明内容
本发明的目的在于,克服针对现有技术的不足之处,提出一种电子装置、多标签分类方法及存储介质。
为了实现上述目的,本发明提供了一种电子装置,包括存储器及与所述存储器连接的处理器,所述存储器中存储有可在所述处理器上运行的处理系统,所述处理系统被所述处理器执行时实现如下步骤:
零代词的识别与消解步骤:
将待分类语句进行零代词的识别与消解以获得扩充语句,所述零代词是待分类语句中可识别的短语或词的空位;
语句拆分步骤:
将所述扩充语句进行句法分析,提取所述扩充语句中的并列关系项;通过替换或者标记训练将所述扩充语句进行拆分形成若干个拆句;
或者针对性地设计语料标注,人工标记指代消解后的扩充语句中的并列关系项以及其他项,训练一个句子拆分的Bi-LSTM-CRF模型,使用训练后的分Bi-LSTM-CRF模型对所述扩充语句进行分类拆分形成若干个拆句;所述其他项包含共享项与删除项。
进一步的,上述电子装置的所述处理系统被所述处理器执行时还实现意图识别步骤,所述意图识别步骤:将语句拆分步骤获得的若干个拆句分别作为单意图识别的模型输入,获得多个意图。
上述电子装置,优选地,所述零代词的识别与消解步骤,具体包括:
采用全模式的结巴分词将待分类语句切分获得候选先行语集合;
利用第一循环神经网络,根据零代词的上文进行特征学习,得到零代词上文向量表示,同时利用通用的注意力模型计算其对每个候选先行语中的每个字进行注意力计算,根据注意力将每个字的向量加权平均得到候选先行语的表示,将候选先行语的表示与零代词的上文向量表示拼接在一起,通过第一前馈神经网络来计算该候选先行语是否是该零代词先行语的概率;
利用第二循环神经网络,根据零代词的下文进行特征学习,得到零代词下文向量表示,同时利用通用的注意力模型计算其对每个候选先行语中的每个字进行注意力计算,根据注意力将每个字的向量加权平均得到候选先行语的表示,将候选先行语的表示与零代词的下文向量表示拼接在一起,通过第二前馈神经网络来计算该候选先行语是否是该零代词先行语的概率。
所述处理系统被所述处理器执行时实现步骤中,所述扩充语句进行句法分析是采用Stanford NLP工具中的句法分析功能,对零代词消解后得到的扩充语句进行句法分析得到句法结构树,提取所述扩充语句中的并列关系项。
相应的,本发明还提供了一种多标签分类方法,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门快商通信息技术有限公司,未经厦门快商通信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811529912.2/2.html,转载请声明来源钻瓜专利网。