[发明专利]同义问句生成模型训练方法及系统、同义问句生成方法在审
申请号: | 202010065631.7 | 申请日: | 2020-01-20 |
公开(公告)号: | CN111241248A | 公开(公告)日: | 2020-06-05 |
发明(设计)人: | 钟丽娟 | 申请(专利权)人: | 苏州思必驰信息科技有限公司 |
主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F16/332;G06F16/35 |
代理公司: | 北京商专永信知识产权代理事务所(普通合伙) 11400 | 代理人: | 黄谦;车江华 |
地址: | 215123 江苏省苏州市苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 同义 问句 生成 模型 训练 方法 系统 | ||
本发明公开一种本发明还提供一种同义问句生成模型训练方法及系统,其中所述方法包括:获取训练样本集,所述训练样本集中包含有多个同义问句集合,所述多个同义问句集合中的每一个同义问句集合分别包含多个问句对;以所述训练样本集中的问句对对所述同义问句生成模型进行训练。通过训练得到同义问句生成模型,可以在进行同义问句的扩展时直接将待扩展问句输入至训练好的同义问句生成模型即可得到多个扩展出的同义问句,节省了人力物力,并且还使得扩展出的句式更加的多种多样。
技术领域
本发明涉及计算机信息技术领域,尤其涉及一种同义问句生成模型训练方法及系统、同义问句生成方法。
背景技术
自然语言处理领域在近些年得到了飞速发展,而问答系统作为自然语言处理领域的重要内容也成为人们关注的热点。现阶段,问答系统广泛应用于智能客服,智能聊天机器人等。目前,常用的问答系统由用户交互模块、知识库、检索与排序模块、答案处理模块组成。
用户问题与知识库内所表示的问题之间越相近,问答系统回答就越准确。否则会出现由于用户问题和存储的问答对表述差异较大,问答系统不能返回正确答案的情况。
此时将用户问题更换为同义问句,问答系统就能返回正确答案。例如,假设问答系统知识库中存在问题“最早的手机是谁发明的?”,对用户问题“移动电话的发明人叫什么名字”,问答系统不能返回正确答案。对同义扩展问题“手机是谁发明的?”,问答系统则能返回正确答案。
目前扩展同义问句的方法主要依靠人工进行近义词替换、主语替换等,具有人工工作量大,而且不能生成新句式等缺点。
发明内容
本发明实施例提供一种同义问句生成模型训练方法及系统、同义问句生成方法,用于至少解决上述技术问题之一。
第一方面,本发明还提供一种同义问句生成模型训练方法,包括:
获取训练样本集,所述训练样本集中包含有多个同义问句集合,所述多个同义问句集合中的每一个同义问句集合分别包含多个问句对;
以所述训练样本集中的问句对对所述同义问句生成模型进行训练。
在一些实施例中,获取训练样本集包括以下步骤:
获取问句集合;
对所述问句集合中的问句进行聚类,得到多个同义问句集合;
将所述多个同义问句集合中的每一个同义问句集合中的问句之间两两构成问句对,以得到相应的多个同义问句对集合。
在一些实施例中,在将所述多个同义问句集合中的每一个同义问句集合中的问句之间两两构成问句对之前,所述方法还包括:根据预设扩展词库,对所述多个同义问句集合中的问句进行同义句扩展。
在一些实施例中,所述根据预设扩展词库,对所述多个同义问句集合中的问句进行同义句扩展包括:
对于所述多个同义问句集合中的每一个问句进行分词处理,得到对应于所述每一个问句的多个分词;
从所述预设扩展词库中查找用于替换所述每一个问句的多个分词的扩展词,以得到扩展同义问句。
在一些实施例中,训练样本集构建方法还包括:对于扩展之后的每一个同义问句集合中的问句进行去重。
在一些实施例中,在将所述多个同义问句集合中的每一个同义问句集合中的问句之间两两构成问句对之前,所述方法还包括:
对所述多个同义问句集合中的每一个同义问句集合中的多个问句所包含的表示相同含义的分词进行标注。
第二方面,本发明还提供一种同义问句生成方法,包括:
接收待扩展问句;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州思必驰信息科技有限公司,未经苏州思必驰信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010065631.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:快递驿站地址辨别方法、计算机设备和存储介质
- 下一篇:一种储存环磁铁电源