[发明专利]模型质量评估方法和装置

摘要

本申请公开了一种模型质量评估方法和装置；本申请实施例可以获取预测模型和多个测试数据子集，测试数据子集中包括至少一个标注了真实值的测试数据；向终端集群中相应的预测终端发送携带预测模型和测试数据子集的预测请求；当终端集群中预测终端完成预测时，从预测终端中获取测试数据的预测值，得到每个测试数据子集中测试数据的预测值；根据测试数据的预测值和真实值对测试数据进行分类，得到多个测试数据子集中测试数据所属的类别；根据多个测试数据子集中测试数据所属的类别计算预测模型的模型质量参数。本申请采用集群的方式进行预测，降低了预测值的计算时间，由此，该方案可以提升模型质量评估效率。

主权项

1.一种模型质量评估方法，其特征在于，适用于评估终端，包括：获取预测模型和至少两个测试数据子集，所述测试数据子集中包括至少一个标注了真实值的测试数据；向终端集群中相应的预测终端发送携带所述预测模型和测试数据子集的预测请求，其中，所述预测请求用于指示所述预测终端采用所述预测模型对所述测试数据子集中的测试数据进预测；当终端集群中预测终端完成预测时，从预测终端中获取所述测试数据的预测值，得到每个测试数据子集中测试数据的预测值；根据测试数据的预测值和真实值对所述测试数据进行分类，得到所述测试数据子集中测试数据所属的类别；根据所述测试数据子集中测试数据所属的类别计算所述预测模型的模型质量参数。