[发明专利]一种评估智能算法等级的方法

说明书

本发明公开了一种评估智能算法等级的方法，其通过针对待评算法设计一组等级化的测试场景，并由低至高逐级仿真运行各测试场景；依据任务指标实现情况判断算法能否通过某一场景的测试；依据该等级下通过测试的场景数量判断算法能否通过某一级别的测试；取通过的最高等级为智能算法等级。本发明能够定量计算智能算法的等级，从而更直观展现算法的优劣程度。

技术领域

本发明涉及一种系统评估方法，尤其涉及一种评估智能算法等级的方法。

背景技术

随着智能技术的深入应用，各级各类智能算法也层出不穷，即便是针对同一问题也可能有多个算法，如何判断算法的“优劣程度”是使用者选择必须解决的问题，而进行等级评估显然能够可以更直观、综合地体现其“优劣程度”。但目前缺乏对智能算法等级进行评估的方法。

发明内容

有鉴于此，本发明提供了一种评估智能算法等级的方法。具体的说，本发明提供了一种能够通过评估算法等级来直观展现智能算法优劣程度的方法。

本发明提供了一种评估智能算法等级的方法。所述方法包括下列步骤：

步骤1，针对待评智能算法设计一组等级化的测试场景，并由低至高逐级仿真运行各测试场景；

步骤2，依据任务指标实现情况判断算法能否通过某一场景的测试；

步骤3，依据该等级下通过测试的场景数量判断算法能否通过某一级别的测试；

步骤4，取通过的最高等级为智能算法等级。

优选地，所述步骤一中，设测试场景分为若干级，每一级均包含一定数量的测试场景。

优选地，所述步骤二中，判断算法能否通过某一场景的测试如下式：

式中， ——第i级第j个测试场景下运行值达到或超过基准值的任务指标数量；

——第i级第j个测试场景下的任务指标数量；

——第i级第j个测试场景的任务指标数量达标比率，由用户事先设定；

——第i级的第j个测试场景。

优选地，所述步骤三中，判断算法能否通过某一级别的测试如下式：

式中， ——通过测试的第i级场景数量；

——第i级的场景数量；

——第i级场景的通过比率，由用户事先设定。

优选地，所述步骤四中，在所有通过测试场景等级中取最高等级，该等级即可视为智能算法的等级。

本发明的积极效果在于能够定量计算智能算法的等级，从而更直观展现算法的优劣程度。

附图说明

图1为评估智能算法等级的方法流程图。

具体实施方式

下面结合附图给出本发明较佳实施例，以详细说明本发明的技术方案。

步骤1，针对待评智能算法设计一组等级化的测试场景，并由低至高逐级仿真运行各测试场景；

设测试场景分为N级，由低到高排序并记为{1,…,N}，每一级均包含一定数量的测试场景数量，第i级的场景数量记为N_i。

步骤2，依据任务指标实现情况判断算法能否通过某一场景的测试；

判断算法能否通过某一场景的测试如下式：

——第i级第j个测试场景的任务指标的运行值；

——第i级第j个测试场景的任务指标的的基准值，由用户事先设定；

——第i级第j个测试场景的一个综合性指标；

——第i级第j个测试场景。