[发明专利]一种文本处理方法、装置和计算机可读存储介质在审
申请号: | 201910718851.2 | 申请日: | 2019-08-05 |
公开(公告)号: | CN110472242A | 公开(公告)日: | 2019-11-19 |
发明(设计)人: | 赵瑞辉;朱子宁 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F17/27 | 分类号: | G06F17/27 |
代理公司: | 44300 深圳翼盛智成知识产权事务所(普通合伙) | 代理人: | 黄威<国际申请>=<国际公布>=<进入国 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请实施例公开了一种文本处理方法、装置和计算机可读存储介质,其中,本申请实施例可以基于预设初始模型确定预测正确的第一文本片段和预测错误的第二文本片段,预设初始模型包括上半分支网络和下半分支网络;分别遮盖当前训练文本中的第一文本片段和第二文本片段,得到第一输入文本和第二输入文本;基于上半分支网络对第一输入文本进行特征提取,得到第一特征信息;根据第一特征信息、第二输入文本和下半分支网络,对各位置的文本片段进行预测,得到预测文本;基于预测文本与当前训练文本进行收敛,得到目标语言模型;基于目标语言模型和待处理文本进行文本片段预测,得到目标文本。本发明实施例可以提高文本处理速度。 | ||
搜索关键词: | 文本片段 输入文本 预测 目标语言模型 初始模型 特征信息 文本处理 训练文本 文本 预设 网络 计算机可读存储介质 目标文本 特征提取 申请 遮盖 收敛 | ||
【主权项】:
1.一种文本处理方法,其特征在于,包括:/n基于预设初始模型对预测文本中各个位置上的文本片段进行初始预测,确定预测正确的第一文本片段和预测错误的第二文本片段,预设初始模型包括上半分支网络和下半分支网络;/n对当前训练文本中的第一文本片段进行遮盖,得到第一输入文本;/n对当前训练文本中的第二文本片段进行遮盖,得到第二输入文本;/n基于所述上半分支网络对所述第一输入文本进行特征提取,得到所述第一输入文本的第一特征信息;/n根据所述第一特征信息和所述第二输入文本,以及所述下半分支网络,对预测文本中各个位置的文本片段进行预测,得到预测文本;/n基于所述预测文本与所述当前训练文本进行收敛,得到目标语言模型;/n基于所述目标语言模型和待处理文本进行文本片段预测,得到目标文本。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910718851.2/,转载请声明来源钻瓜专利网。
- 上一篇:生成去冗余信息句向量的方法及相关设备
- 下一篇:一种中文拼写检查方法