[发明专利]人工智能引擎优化方法和装置

权利要求书

1.一种人工智能引擎优化方法，其特征在于，包括：

将待测智能引擎的日志文件中的输入状态量输入测试智能引擎，其中，所述测试智能引擎是用于测试待测智能引擎的日志文件的人工智能引擎，所述测试智能引擎基于标准样例数据建立；所述待测智能引擎基于预设的人工编写模板建立，所述人工编写模板由人工基于所述标准样例数据建立；所述标准样例数据包括标准问、与所述标准问对应的标准答案以及与所述标准问对应的扩展问；其中，所述人工编写模板为所述标准问的抽象语义表达式和所述扩展问的抽象语义表达式的集合；所述待测智能引擎的日志文件是指所述待测智能引擎在工作过程中的记录文件，日志文件中应包括待测智能引擎在工作过程中的所有输入和输出数据；

将所述日志文件中的与所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对；

当比对结果不一致时，获取第三方审核机制对于所述输出结果是否正确的判断结果；

当所述第三方审核机制的判断结果为所述输出结果不正确时，获取所述第三方审核机制确定的与所述输入状态量对应的正确结果；以及

将所述输入状态量以及所述正确结果输入至所述待测智能引擎进行训练。

2.根据权利要求1所述的方法，其特征在于，进一步包括：

当所述第三方审核机制的判断结果为所述输出结果正确时，将所述输入状态量以及所述输出结果输入所述测试智能引擎进行训练。

3.根据权利要求1所述的方法，其特征在于，在获取所述第三方审核机制确定的与所述输入状态量对应的正确结果之后，所述方法进一步包括：

判断所述正确结果与所述测试智能引擎输出的所述测试结果是否一致；

当判断为所述正确结果与所述测试结果不一致时，将所述输入状态量以及所述正确结果输入至所述测试智能引擎进行训练。

4.根据权利要求1所述的方法，其特征在于，所述将待测智能引擎的日志文件中的输入状态量输入测试智能引擎包括：

将所述输入状态量输入多个测试智能引擎；

其中，所述将所述日志文件中的所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对包括：

将所述输出结果与所述多个测试智能引擎各自输出的测试结果进行比对。

5.根据权利要求1所述的方法，其特征在于，所述第三方审核机制包括多个第三方审核小组，其中，所述获取第三方审核机制对于所述输出结果是否正确的判断结果包括：

获取多个第三方审核小组对于所述输出结果是否正确的判断结果；以及

判断所述多个第三方审核小组的审核结果是否一致；

其中，所述当所述第三方审核机制的判断结果为所述输出结果不正确时，获取所述第三方审核机制确定的与所述输入状态量对应的正确结果包括：

当所述多个第三方审核小组的审核结果一致认为所述输出结果不正确时，获取所述第三方审核机制确定的与所述输入状态量对应的正确结果。

6.根据权利要求5述的方法，其特征在于，所述获取第三方审核机制对于所述输出结果是否正确的判断结果进一步包括：

当判断所述多个第三方审核小组的审核结果不一致时，获取另一种第三方审核机制对于所述输出结果是否正确的判断结果。

7.根据权利要求5述的方法，其特征在于，所述将待测智能引擎的日志文件中的输入状态量输入测试智能引擎包括：

将所述输入状态量输入多个测试智能引擎；

其中，所述将所述日志文件中的所述输入状态量对应的输出结果与所述测试智能引擎输出的测试结果进行比对包括：

将所述输出结果与所述多个测试智能引擎各自输出的测试结果进行比对；

其中，所述方法进一步包括：

向所述第三方审核小组隐藏所述测试结果与所述测试智能引擎之间的对应关系。

8.根据权利要求1所述的方法，其特征在于，进一步包括：

所述待测智能引擎为实际生产环境使用的人工智能引擎的克隆引擎。