[发明专利]车辆用控制装置、系统、方法、学习装置、以及存储介质

权利要求书

1.一种车辆用控制装置，具备执行装置和存储装置，

所述存储装置存储有关系规定数据，所述关系规定数据对车辆的状态与行动变量的关系进行规定，所述行动变量是与所述车辆内的电子设备的操作有关的变量，

所述执行装置构成为执行：

取得处理，取得对所述车辆的状态进行检测的传感器的检测值；

操作处理，基于所述行动变量的值来对所述电子设备进行操作，所述行动变量的值是根据通过所述取得处理取得的所述检测值和所述关系规定数据而确定的值；

奖励算出处理，基于通过所述取得处理取得的所述检测值，在所述车辆的特性满足基准的情况下，与所述车辆的特性不满足该基准的情况相比，给予较大的奖励；

更新处理，将基于通过所述取得处理取得的所述检测值的所述车辆的状态、在所述电子设备的操作中使用了的所述行动变量的值以及与该操作对应的所述奖励作为向预先确定的更新映射的输入，从而对所述关系规定数据进行更新；

检测处理，对进行了功能恢复处置这一情况进行检测，所述功能恢复处置是所述车辆内的部件中的、因基于所述操作处理的操作产生的对所述车辆的状态带来影响的部件的功能恢复处置；以及

切换处理，在通过所述检测处理检测到进行了所述功能恢复处置的情况下，将在所述操作处理中要利用的所述关系规定数据切换为处置后用数据，

所述更新映射输出以使按照所述关系规定数据操作所述电子设备的情况下的关于所述奖励的期待收益增加的方式进行了更新的所述关系规定数据，

所述切换处理包括如下处理：使用初始数据来作为所述处置后用数据，所述初始数据是执行伴随着所述车辆行驶的所述更新处理之前的所述关系规定数据。

2.根据权利要求1所述的车辆用控制装置，

所述执行装置构成为执行过去数据维持处理，所述过去数据维持处理为如下处理：有别于通过所述更新处理进行更新的所述关系规定数据，使在到预定条件成立为止通过所述更新处理进行更新并且在所述预定条件成立之后避免通过所述更新处理进行的更新的所述关系规定数据成为存储于所述存储装置的状态，

所述切换处理包括如下处理：选择是使所述处置后用数据为通过所述过去数据维持处理只限于在所述预定条件成立之前被进行了基于所述更新处理的更新的所述关系规定数据、还是使所述处置后用数据为所述初始数据。

3.根据权利要求1或者2所述的车辆用控制装置，

所述执行装置构成为在通过所述检测处理检测为进行了所述功能恢复处置的情况下执行：

处置后用数据请求处理，发送对所述处置后用数据进行请求的信号；和

处置后用数据接收处理，接收作为所述处置后用数据请求处理的结果而被发送来的所述处置后用数据，

所述切换处理包括如下处理：将在所述操作处理中要利用的所述关系规定数据切换为所接收到的所述处置后用数据。

4.一种车辆用控制系统，具备权利要求1或者2所述的所述车辆用控制装置中的所述执行装置和所述存储装置，

所述执行装置包括搭载于所述车辆的第1执行装置和有别于车载装置的第2执行装置，

所述第2执行装置构成为在通过所述检测处理检测到进行了功能恢复处置的情况下，至少执行发送所述处置后用数据的处置后用数据发送处理，

所述第1执行装置构成为至少执行所述取得处理、所述操作处理以及处置后用数据接收处理，所述处置后用数据接收处理接收通过所述处置后用数据发送处理发送的数据。

5.根据权利要求4所述的车辆用控制系统，

所述第1执行装置构成为执行所述检测处理和处置后用数据请求处理，

所述处置后用数据请求处理在通过所述检测处理检测为进行了所述功能恢复处置的情况下，发送对所述处置后用数据进行请求的信号。

6.根据权利要求4或者5所述的车辆用控制系统，

所述更新处理由所述第1执行装置执行。