[发明专利]评估方法及装置、电子设备和计算机可读存储介质

权利要求书

1.一种评估方法，包括：

获取目标算法的评分结果和运行所述目标算法的物理硬件信息；

采用至少一个预置的算法负载根据所述评分结果和所述物理硬件信息对所述目标算法进行迭代测试；

根据所述测试的测试数据获得所述目标算法的性能评估结果，其中所述性能评估结果指示目标算法的特征与物理硬件性能之间的关系。

2.根据权利要求1所述的评估方法，其中，所述物理硬件信息包括：硬件性能规格、硬件拓扑结构和硬件组网形态。

3.根据权利要求1所述的评估方法，其中，所述获取目标算法的评分结果包括：

使用人工智能测试平台计算所述目标算法的评分结果。

4.根据权利要求1所述的评估方法，其中，所述物理硬件为芯片，并且所述获取运行所述目标算法的物理硬件信息包括：

对所述芯片规格按照芯片的型号和芯片的算力进行建模。

5.根据权利要求2所述的评估方法，其中，所述硬件组网形态包括物理计算单元之间的通信带宽。

6.根据权利要求1所述的评估方法，其中，所述根据所述测试的测试数据获得所述目标算法的性能评估结果包括：

使用所述迭代测试的单次测试的时间、所述目标算法的神经网络的层数、进出运行所述目标算法的计算单元的数据来计算所述计算单元执行所述目标算法的算力。

7.根据权利要求6所述的评估方法，其中，所述性能评估结果进一步包括下述中的至少一个：

所述单次测试内执行的核心函数数量、用来进行计算的核心与操作内存的核心相对于全部核心的占比；

所述单次测试内执行所述目标算法的执行时长、所述迭代测试的总执行时长、所述单次测试内的计算时长和数据传输时长；

所述单次测试内每个操作队列的计算和传输消耗。

8.根据权利要求1所述的评估方法，其中，所述根据所述测试的测试数据获得所述目标算法的性能评估结果包括：

对所述单次测试按预定时间单元进行时间分片；

计算每个时间分片中所述物理硬件的计算单元的计算时间作为所述性能评估结果。

9.根据权利要求1所述的评估方法，其中，所述根据所述测试的测试数据获得所述目标算法的性能评估结果包括：

对所述单次测试按预定时间单元进行时间分片；

计算每个时间分片中所述物理硬件的算力消耗作为所述性能评估结果。

10.一种评估装置，包括：

获取模块，用于获取目标算法的评分结果和运行所述目标算法的物理硬件信息；

采集模块，用于采用至少一个预置的算法负载根据所述评分结果和所述物理硬件信息对所述目标算法进行迭代测试；

分析模块，用于根据所述测试的测试数据获得所述目标算法的性能评估结果，其中所述性能评估结果指示目标算法的特征与物理硬件性能之间的关系。

11.一种电子设备，其中，包括：

存储器，用于存储程序；

处理器，用于运行所述存储器中存储的所述程序，所述程序运行时执行如权利要求1至12中任一所述的评估方法。

12.一种计算机可读存储介质，其上存储有可被处理器执行的计算机程序，其中，该程序被处理器执行时实现如权利要求1至12中任一所述的评估方法。