[发明专利]一种系统回复质量的评价方法及装置在审
| 申请号： | 201811333278.5 | 申请日： | 2018-11-09 |
| 公开（公告）号： | CN109472030A | 公开（公告）日： | 2019-03-15 |
| 发明（设计）人： | 陈泽;陈志刚;刘权 | 申请（专利权）人： | 科大讯飞股份有限公司 |
| 主分类号： | G06F17/27 | 分类号： | G06F17/27;G06F16/332;G06F16/35 |
| 代理公司： | 北京集佳知识产权代理有限公司 11227 | 代理人： | 张小娜;王宝筠 |
| 地址： | 230088 安徽*** | 国省代码： | 安徽;34 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请公开了一种系统回复质量的评价方法及装置，该方法包括：首先生成目标对话系统的系统评价指标，包括根据目标对话系统的每一选定回复与对应问题之间的主题相关度生成的第一评价指标、根据目标对话系统的每一选定回复与对应人工回复之间的语义相似度生成的第二评价指标、以及根据目标对话系统的每一选定回复为通用回复的可能性生成的第三评价指标中的至少一个，然后根据生成的系统评价指标，确定出目标对话系统的回复质量，可见，本申请在对目标对话系统的回复质量进行评价时，考虑了系统回复与问题之间的主题相关度、系统回复与人工回复之间的语义相似度以及系统回复为通用回复的可能性，从而能够更准确地评价目标对话系统的回复质量。 | ||
| 搜索关键词： | 回复 对话系统 评价指标 语义相似度 系统评价 相关度 评价目标 通用 申请 | ||
【主权项】：
1.一种系统回复质量的评价方法，其特征在于，包括：生成目标对话系统的系统评价指标，所述系统评价指标包括第一评价指标、第二评价指标以及第三评价指标中的至少一个；其中，所述第一评价指标是根据所述目标对话系统的每一选定回复与对应问题之间的主题相关度生成的；所述第二评价指标是根据所述目标对话系统的每一选定回复与对应人工回复之间的语义相似度生成的；所述第三评价指标是根据所述目标对话系统的每一选定回复为通用回复的可能性生成的；根据所述系统评价指标，确定所述目标对话系统的回复质量。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于科大讯飞股份有限公司，未经科大讯飞股份有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201811333278.5/，转载请声明来源钻瓜专利网。
