[发明专利]车辆用控制系统、装置、控制方法以及存储介质

权利要求书

1.一种车辆用控制系统，具备存储装置、第1执行装置以及第2执行装置，所述存储装置存储关系规定数据，所述关系规定数据对车辆的状态与行动变量的关系进行规定，所述行动变量是与所述车辆内的电子设备的操作有关的变量，所述第1执行装置搭载于所述车辆，所述第2执行装置有别于车载装置，

所述第1执行装置和所述第2执行装置构成为以协作的方式执行以下的处理，该处理包括：

状态取得处理，取得对所述车辆的状态进行检测的传感器的检测值；

操作处理，操作所述电子设备；

奖励算出处理，基于通过所述状态取得处理取得的所述检测值，在所述车辆的特性满足基准的情况下，与所述车辆的特性不满足基准的情况相比，给予较大的奖励；

更新处理，将基于通过所述状态取得处理取得的所述检测值的所述车辆的状态、在所述电子设备的操作中使用了的所述行动变量的值以及与该操作对应的所述奖励作为向预先确定的更新映射的输入，从而对所述关系规定数据进行更新；

车辆信息取得处理，取得与所述车辆有关的信息；以及

分类处理，基于与所述车辆有关的信息，将多个所述车辆分类为多个组群，

所述第1执行装置构成为至少执行所述状态取得处理和所述操作处理，

所述第2执行装置构成为至少执行所述更新处理、所述车辆信息取得处理以及所述分类处理，

所述操作处理包括根据通过所述更新处理进行了更新的所述关系规定数据和所述车辆的状态来操作所述电子设备的处理，

所述更新映射构成为输出以使按照所述关系规定数据来操作所述电子设备的情况下的关于所述奖励的期待收益增加的方式进行了更新的所述关系规定数据，

对于所述更新处理，为了按被分类后的所述组群对所述关系规定数据进行更新，将属于同一组群的多个所述车辆的状态、在属于该同一组群的多个所述车辆的所述电子设备的操作中使用了的行动变量的值以及与该操作对应的所述奖励作为向所述更新映射的输入，从而由所述第2执行装置来执行。

2.根据权利要求1所述的车辆用控制系统，

所述车辆信息取得处理包括取得表示所述车辆的消耗程度的消耗程度变量来作为与所述车辆有关的信息的处理。

3.根据权利要求1所述的车辆用控制系统，

所述车辆信息取得处理包括取得与加速器操作量的每单位时间的变化量的平均值有关的信息来作为与所述车辆有关的信息的处理。

4.根据权利要求2所述的车辆用控制系统，

所述车辆信息取得处理包括取得与加速器操作量的每单位时间的变化量的平均值有关的信息来作为与所述车辆有关的信息的处理。

5.根据权利要求1所述的车辆用控制系统，

所述车辆信息取得处理包括取得所述车辆的位置信息来作为与所述车辆有关的信息的处理。

6.根据权利要求2所述的车辆用控制系统，

所述车辆信息取得处理包括取得所述车辆的位置信息来作为与所述车辆有关的信息的处理。

7.根据权利要求3所述的车辆用控制系统，

所述车辆信息取得处理包括取得所述车辆的位置信息来作为与所述车辆有关的信息的处理。

8.根据权利要求4所述的车辆用控制系统，

所述车辆信息取得处理包括取得所述车辆的位置信息来作为与所述车辆有关的信息的处理。

9.根据权利要求1～8中任一项所述的车辆用控制系统，

所述第1执行装置被包括在车辆用控制装置中。

10.根据权利要求1～8中任一项所述的车辆用控制系统，

所述第2执行装置被包括在车辆用学习装置中。