[发明专利]一种人机协同的对话系统评测方法及系统有效
| 申请号： | 202110540797.4 | 申请日： | 2021-05-18 |
| 公开（公告）号： | CN113238947B | 公开（公告）日： | 2023-08-08 |
| 发明（设计）人： | 任鹏杰;宋晓萌;田洪涛;张仰君;陈竹敏;任昭春;马军;梁华盛 | 申请（专利权）人： | 山东大学 |
| 主分类号： | G06F11/36 | 分类号： | G06F11/36;G06F3/01 |
| 代理公司： | 济南圣达知识产权代理有限公司 37221 | 代理人： | 闫圣娟 |
| 地址： | 266237 *** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本公开提供了一种人机协同的对话系统评测方法及系统，包括：构建待评测对话系统的对话样本数据集，其中，对所述对话样本数据集中预设数量的样本进行标注；针对评测数据集中的每条样本，利用置信度评测模型计算其机器评测置信度；采用回归随机森林模型计算每条样本的人力消耗，其中，所述人力消耗为每条样本标注花费的时间成本；利用整数线性规划算法，以最大化评测置信度和最小化人力消耗为目标进行优化，根据优化结果将对话样本数据集中的样本分配给人工和机器进行评测，完成对话系统评测。所述方案基于机器和人工的可靠性与消耗，决定任务是分给机器还是人工，能够有效平衡对话系统评测过程中的高效性和可靠性，提高测评效率。 | ||
| 搜索关键词： | 一种 人机 协同 对话 系统 评测 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于山东大学，未经山东大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110540797.4/，转载请声明来源钻瓜专利网。
- 上一篇：一种银行流水智能处理系统
- 下一篇：屏幕亮度调整方法、装置、设备及存储介质
