[发明专利]内燃机的控制装置以及控制方法

说明书

提供一种内燃机的控制装置以及控制方法。控制装置具备存储装置和执行内燃机的操作部的操作的执行装置。执行装置执行：第1运算处理，使用已适配数据，基于状态变量的检测值来运算操作量；第2运算处理，运算由关系规定数据和状态变量确定的值来作为操作量；强化学习处理，对关系规定数据进行更新；第1操作处理和第2操作处理，根据操作量的运算值来对操作部进行操作；切换处理，根据车辆的状态将对操作部进行操作的处理在第1操作处理与第2操作处理之间进行切换。

技术领域

本公开涉及搭载于车辆的内燃机的控制装置以及控制方法。

背景技术

日本特开2016-006327号公报公开了基于对加速踏板的操作量进行滤波器处理后的值来对作为搭载于车辆的内燃机的操作部的节气门进行操作的控制装置。

上述滤波器被要求将同时满足内燃机的效率、排气性状、乘员的舒适性等的大量要求的值设定为节气门的操作量。因此，其适配需要熟练人员花费许多工时来进行。那样的实际情况对于节气门以外的发动机的操作部的操作量的适配也是同样的。

发明内容

一个技术方案的内燃机的控制装置构成为通过对搭载于车辆的内燃机的操作部进行操作来使该内燃机的控制量进行变化。另外，该控制装置具备：存储装置，其构成为预先存储关系规定数据和已适配数据，该关系规定数据是对状态变量与操作部的操作量的关系进行规定的数据，在车辆的行驶期间中被进行更新，该状态变量是表示包括内燃机的状态的车辆的状态的变量，该已适配数据是在基于状态变量的检测值的操作量的运算中使用的数据，在车辆的行驶期间中不被进行更新；和执行装置，其构成为执行操作部的操作。并且，该控制装置中的执行装置构成为执行：第1运算处理，使用已适配数据，基于状态变量的检测值来运算所述操作量；第2运算处理，运算由关系规定数据和状态变量确定的值来作为操作量；强化学习处理，基于利用通过第2运算处理运算出的操作量操作操作部时的状态变量的检测值来算出奖励，并且，基于状态变量、操作量以及奖励来对关系规定数据进行更新以使奖励的期待收益增加；第1操作处理，执行第1运算处理，并且，根据基于该第1运算处理的操作量的运算值来对操作部进行操作；第2操作处理，执行第1运算处理和第2运算处理这两方，并且，根据基于第2运算处理的操作量的运算值来对操作部进行操作；以及切换处理，根据车辆的状态将操作操作部的处理在第1操作处理与第2操作处理之间进行切换。

关于利用通过第1运算处理运算出的操作量对操作部进行操作的第1操作处理，需要车辆出厂前的操作量的适配，该第1运算处理运算是使用预先存储于存储装置的已适配数据的运算。与此相对，关于利用通过第2运算处理运算出的操作量对操作部进行操作的第2操作处理，在车辆的行驶期间中自动地进行操作量的适配，因此，能够减少车辆出厂前的熟练人员的操作量的适配所花费的工时，该第2运算处理是使用通过车辆行驶期间中的强化学习处理进行更新的关系规定数据的处理。但是，有时那样的强化学习需要根据车辆的各种各样的状态分别花费时间来进行，根据车辆的运用，适配的完成需要时间。因此，根据车辆的运用，与通过车辆行驶期间中的强化学习对操作量进行适配相比，有时车辆出厂前完成适配时能得到所希望的结果。对此，上述内燃机的控制装置中的执行装置在切换处理中在第1操作处理与第2操作处理之间切换根据车辆的状态来对操作部进行操作的处理。因此，根据上述内燃机的控制装置，能够适当地减少内燃机的操作部的操作量的适配涉及的熟练人员的工时。

在此，有时在第1操作处理下的操作量的运算中所使用的值包含每当运算操作量时与根据状态变量的值算出的更新量相应地被进行更新的值。该情况下的上述值的更新基于那时的状态变量的瞬时值来进行，但被更新后的值成为对基于到那为止的操作量的各运算的状态变量的值所算出的更新量进行累计而得到的值。这样，即使是在基于状态变量的瞬时值进行第1操作处理下的操作量的运算的情况下，有时操作量也被作为反映了到那为止的状态变量的值的推移的值来进行运算。在那样的情况下，第2操作处理中的状态变量的值的推移不反映于刚从第2操作处理向第1操作处理切换之后的操作量的运算值，因此，与从以前起持续进行了第1操作处理的情况不同的值会被设定为操作量。