[发明专利]一种模型效果检测方法、装置、存储介质及设备

说明书

本申请实施例提供一种模型效果检测方法、装置、存储介质及设备，该方法借助半同态加密算法，生成公私钥对的数据源方将公钥以及利用公钥对标注值队列进行加密而得到的第二密文发送给模型方，而模型方利用公钥对预测值队列进行加密得到第一密文，并对第一密文和第二密文进行同态减运算以得到第三密文，这样，数据源方基于私钥对第三密文进行解密后，解密结果表征标注值队列和标注值队列之间的匹配程度，因而，数据源方可以根据解密结果确定出模型方的模型效果。如此，实现在不泄露双方数据的情况下，确定出模型方建立的模型的效果。

技术领域

本申请涉及互联网技术领域，具体而言，涉及一种模型效果检测方法、装置、存储介质及设备。

背景技术

算法模型是为了求解给定的问题而经过充分设计的计算过程和数学模型，模型的效果是决定该模型是否能投入应用的关键指标。在一些场景中，两个不同的建模团队对同一问题进行建模，得到不同的模型，出于竞争关系、数据隐私保护等原因，两个建模团队互相不知道对方的模型预测结果，在这种情况下，难以比较两个模型的效果。

发明内容

本申请实施例的目的在于提供一种模型效果检测方法、装置、存储介质及设备，旨在解决相关技术中因无法获取对方的模型预测结果而难以确定其模型效果的问题。

第一方面，本申请实施例提供的一种模型效果检测方法，应用于数据源方，包括：基于半同态加密算法生成公钥及私钥，并将所述公钥发送给模型方，以使所述模型方利用所述公钥对预测值队列进行加密以得到第一密文，所述预测值队列是由所述模型方针对一组测试数据计算得到的模型预测结果组成的队列；利用所述公钥对标注值队列进行加密以得到第二密文，并将所述第二密文发送给所述模型方，以使所述模型方对所述第一密文和所述第二密文进行同态减运算，得到第三密文；获取所述模型方发送的第三密文，并利用所述私钥对所述第三密文进行解密，根据解密结果确定所述模型方的模型效果。

在上述实现过程中，借助半同态加密算法，生成公私钥对的数据源方将公钥以及利用公钥对标注值队列进行加密而得到的第二密文发送给模型方，而模型方利用公钥对预测值队列进行加密得到第一密文，并对第一密文和第二密文进行同态减运算以得到第三密文，这样，数据源方基于私钥对第三密文进行解密后，解密结果表征标注值队列和标注值队列之间的匹配程度，因而，数据源方可以根据解密结果确定出模型方的模型效果。如此，实现在不泄露双方数据的情况下，确定出模型方建立的模型的效果。

进一步地，在一些实施例中，所述标注值队列是所述数据源方针对所述测试数据计算得到的模型预测结果组成的队列；或，所述标注值队列是所述测试数据对应的真实结果组成的队列。

在上述实现过程中，利用数据源方针对测试数据计算得到的模型预测结果组成标注值队列，实现以数据方的模型效果为基准来确定模型方的模型效果；利用测试数据对应的真实结果组成标注值队列，实现以真实结果为基准来确定模型方的模型效果。

进一步地，在一些实施例中，若所述标注值队列是所述数据源方针对所述测试数据计算得到的模型预测结果组成的队列，所述根据解密结果确定所述模型方的模型效果包括：

根据解密得到的明文中0的占比率，确定所述模型方的模型效果和所述数据源方的模型效果之间的匹配度。

在上述实现过程中，提供以数据方的模型效果为基准来确定模型方的模型效果的解决手段。

进一步地，在一些实施例中，若所述标注值队列是所述测试数据对应的真实结果组成的队列，所述根据解密结果确定所述模型方的模型效果包括：根据解密得到的明文中0的占比率，确定所述模型方的模型预测结果的准确率。

在上述实现过程中，提供以真实结果为基准来确定模型方的模型效果的解决手段。