[发明专利]交互式机器学习模型开发

权利要求书

1.一种用于交互式机器学习模型开发的装置(900)，所述装置包括：

存储器(904)，其存储系统的数据的多个观察，所述数据的多个观察中的每个观察包括多个独立变量的值和因变量的值；以及

处理电路(902)，其被配置为访问所述存储器，并执行(702)应用程序以根据迭代过程生成可视环境(104)，所述可视环境包括用于机器学习模型(118)的交互式开发的图形用户界面即GUI(106)，所述迭代过程的至少一个迭代包括使所述装置至少：

访问(704)包括所述数据的多个观察的所述存储器；

针对来自所述数据的多个观察的观察集合对来自所述多个独立变量的独立变量集合的值执行交互式探索性数据分析(706)，其中，在所述GUI中自动生成信息图以直观地汇总所述独立变量集合的值，所述独立变量集合中的一个或更多个独立变量或所述观察集合中的一个或更多个观察基于经由所述GUI的用户输入来选择；

基于所述交互式探索性数据分析执行(708)交互式特征构造和选择，并且其中，来自所述多个独立变量的选择独立变量被选择为或变换为特征集合以用于构建所述机器学习模型以预测所述因变量，基于经由所述GUI的用户输入和在所述GUI中自动生成的信息图，一个或更多个所述选择独立变量被选择为或变换为所述特征集合；以及

使用机器学习算法、所述特征集合以及根据所述特征集合和所述数据的多个观察产生的训练集构建(710)所述机器学习模型，所述训练集包括所述选择独立变量的值和所述因变量的值，

其中，所述机器学习模型的交互式开发还包括使所述装置输出(714)所述机器学习模型进行部署以预测并从而产生针对所述数据的附加观察的因变量的预测，所述数据的附加观察不包括所述因变量的值，由所述机器学习模型产生的预测比由在没有所述交互式探索性数据分析以及包括经由GUI的用户输入的交互式特征构造和选择的情况下构建的相应机器学习模型所产生的预测准确。

2.根据权利要求1所述的装置(900)，其中，所述系统为飞机，并且所述数据的多个观察为针对所述飞机的多个飞行的飞行数据，针对每个飞行，所述多个独立变量的值为在飞行期间由机载飞行记录仪从多个传感器或航空电子系统记录的多个特性的测量值，并且所述因变量的值为所述飞行期间所述飞机的状态的指示。

3.根据前述权利要求中的任一项所述的装置(900)，其中所述迭代过程的至少一个后续迭代包括使所述装置至少：

执行(706)所述交互式探索性数据分析，其中基于经由所述GUI(106)的用户输入来修改所述独立变量集合或所述观察集合，并且在所述GUI中自动生成经修改的信息图；

基于经由所述GUI的用户输入和在所述GUI中自动生成的经修改的信息图，修改所述特征集合中的一个或更多个特征以产生用于所述后续迭代的经修改的特征集合；以及

使用所述机器学习算法、所述经修改的特征集合以及从所述经修改的特征集合和所述数据的多个观察产生的经修改的训练集来构建所述机器学习模型(118)的版本。

4.根据前述权利要求中的任一项所述的装置(900)，其中所述迭代过程的至少一个后续迭代包括使所述装置至少：

基于经由所述GUI(106)的用户输入，修改所述特征集合中的一个或更多个特征以产生用于所述后续迭代的经修改的特征集合；以及

使用所述机器学习算法、所述经修改的特征集合以及从所述经修改的特征集合和所述数据的多个观察产生的经修改的训练集来构建所述机器学习模型(118)的版本。

5.根据前述权利要求中的任一项所述的装置(900)，其中使所述装置执行(708)所述交互式特征构造和选择包括使所述装置将所述选择独立变量中的一个或更多个应用于变换以产生所述特征集合的特征，所述选择独立变量中的一个或更多个或所述变换基于经由所述GUI(106)的用户输入来选择。