[发明专利]对话文本的处理方法、装置、电子设备及存储介质在审
申请号: | 202010832715.9 | 申请日: | 2020-08-18 |
公开(公告)号: | CN111967224A | 公开(公告)日: | 2020-11-20 |
发明(设计)人: | 陶健 | 申请(专利权)人: | 深圳市欢太科技有限公司;OPPO广东移动通信有限公司 |
主分类号: | G06F40/126 | 分类号: | G06F40/126;G06F40/30;G06F16/332;G06F16/33;G06K9/62 |
代理公司: | 广州德科知识产权代理有限公司 44381 | 代理人: | 万振雄;林翠 |
地址: | 518057 广东省深圳市南山区粤*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 对话 文本 处理 方法 装置 电子设备 存储 介质 | ||
本申请实施例公开了一种对话文本的处理方法、装置、电子设备及存储介质,该方法包括:获取第一文本序列;通过文本处理模型获取所述第一文本序列的文本特征,并根据所述文本特征得到第二文本序列,第二文本序列为最近一轮对话的对话文本对应的指代消解文本,文本处理模型包括编码器及解码器,编码器用于获取第一文本序列的第一自注意力特征,解码器用于根据第一自注意力特征获取第二自注意力特征,所述编码器及解码器均为通过基于自注意力机制的自然语言处理模型进行预训练得到的。本申请实施例公开的对话文本的处理方法、装置、电子设备及存储介质,能够准确识别对话文本中代词所实际指代的对象,提高了对于对话文本的处理能力。
技术领域
本申请涉及人工智能技术领域,具体涉及一种对话文本的处理方法、装置、电子设备及存储介质。
背景技术
在人工智能技术领域中,自然语言处理(Natural Language Processing,NLP)一直是重点研究的方向之一。在过去几年,随着NLP领域中技术的快速发展,由电子设备(例如智能手机、智能穿戴设备等)进行简单的单轮对话的自动回复已经取得长足的进步。但是在较为复杂的会话场景中,由于对话内容中会频繁地出现代词,使得电子设备很难像人类一样有效的理解用户的真实意图。如何使电子设备更加准确地识别对话内容中的代词所表示的真实含义成了亟需解决的问题。
发明内容
本申请实施例公开了一种对话文本的处理方法、装置、电子设备及存储介质,能够准确识别对话文本中代词所实际指代的对象,提高了对于对话文本的处理能力。
本申请实施例还公开了一种文本处理模型的训练方法、装置、电子设备及存储介质,能够训练得到具备准确识别对话文本中代词所实际指代对象的文本处理模块,提高了对于对话文本的处理能力。
本申请实施例公开了一种对话文本的处理方法,包括:
获取第一文本序列,所述第一文本序列至少包括最近一轮对话的对话文本;
通过文本处理模型获取所述第一文本序列的文本特征,并根据所述文本特征得到第二文本序列,所述第二文本序列为所述最近一轮对话的对话文本对应的指代消解文本,
其中,所述文本特征包括第一自注意力特征及第二自注意力特征,所述文本处理模型包括编码器及解码器,所述编码器用于获取所述第一文本序列的所述第一自注意力特征,所述解码器用于根据所述第一自注意力特征获取所述第二自注意力特征,所述编码器及解码器均为通过基于自注意力机制的自然语言处理模型进行预训练得到的。
本申请实施例公开了一种对话文本的处理装置,包括:
文本序列获取模块,用于获取第一文本序列,所述第一文本序列至少包括最近一轮对话的对话文本;
文本处理模块,用于通过文本处理模型获取所述第一文本序列的文本特征,并根据所述文本特征得到第二文本序列,所述第二文本序列为所述最近一轮对话的对话文本对应的指代消解文本,
其中,所述文本特征包括第一自注意力特征及第二自注意力特征,所述文本处理模型包括编码器及解码器,所述编码器用于获取所述第一文本序列的所述第一自注意力特征,所述解码器用于根据所述第一自注意力特征获取所述第二自注意力特征,所述编码器及解码器均为通过基于自注意力机制的自然语言处理模型进行预训练得到的。
本申请实施例公开了一种电子设备,包括存储器及处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器实现如上所述的对话文本的处理方法。
本申请实施例公开了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上所述的对话文本的处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市欢太科技有限公司;OPPO广东移动通信有限公司,未经深圳市欢太科技有限公司;OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010832715.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种塑料管材扩孔装置
- 下一篇:一种大姿态四元数全角域转换欧拉角方法