车辆用控制数据的生成方法、车辆用控制装置、车辆用控制系统以及车辆用学习装置制造方法及图纸

提供一种车辆用控制数据的生成方法、车辆用控制装置、车辆用控制系统以及车辆用学习装置。所述生成方法包括使执行装置执行：取得处理，取得车辆的状态和确定变量；操作处理，操作电子设备；奖励算出处理，在车辆特性满足基准时给与比车辆特性不满足基准时大的奖励；以及更新处理，将车辆的状态、行动变量的值及奖励作为向预先确定的更新映射的输入，对关系规定数据进行更新。更新映射输出以使按照关系规定数据操作电子设备时的关于奖励的期待收益增加的方式进行了更新的关系规定数据。奖励算出处理包括如下变更处理：在内燃机产生的转矩未被利用于车辆推力的生成时，相对于被利用于所述生成时，使车辆特性为预定特性时所给与的奖励进行变更。

【技术实现步骤摘要】
车辆用控制数据的生成方法、车辆用控制装置、车辆用控制系统以及车辆用学习装置
本公开涉及车辆用控制数据的生成方法、车辆用控制装置、车辆用控制系统以及车辆用学习装置。
技术介绍
例如日本特开2016－6327号公报记载了一种控制装置，其基于通过用滤波器对加速踏板的操作量进行处理而得到的值来对节气门进行操作。节气门是搭载于车辆的内燃机的操作部的一个例子。
技术实现思路
专利技术要解决的技术问题上述滤波器需要构成为根据加速踏板的操作量来将搭载于车辆的内燃机的节气门的操作量设定为适当的操作量。因此，滤波器的设定需要熟练人员花费大量工时。这样，以往对于与车辆的状态相应的车辆内的电子设备的操作量等的设定，熟练人员花费了大量工时。用于解决问题的技术方案以下，对本公开的例子进行记载。例1.一种车辆用控制数据的生成方法，在存储装置存储有对具备旋转电机和内燃机的车辆的状态与行动变量的关系进行规定的关系规定数据，所述行动变量是与所述车辆内的电子设备的操作有关的变量，所述生成方法包括使执行装置执行：取得处理，取本文档来自技高网...

【技术保护点】
1.一种车辆用控制数据的生成方法，在存储装置存储有对车辆的状态与行动变量的关系进行规定的关系规定数据，所述车辆具备旋转电机和内燃机，所述行动变量是与所述车辆内的电子设备的操作有关的变量，/n所述生成方法包括使执行装置执行：/n取得处理，取得确定变量和基于传感器的检测值得到的所述车辆的状态，所述确定变量是对在所述内燃机的工作状态下所述内燃机产生的转矩是否被利用于所述车辆的推力的生成进行确定的变量；/n操作处理，对所述电子设备进行操作；/n奖励算出处理，基于通过所述取得处理取得的所述车辆的状态，在所述车辆的特性满足基准的情况下给与比所述车辆的特性不满足基准的情况下大的奖励；以及/n更新处理，将通过...

【技术特征摘要】
20200217 JP 2020-0242221.一种车辆用控制数据的生成方法，在存储装置存储有对车辆的状态与行动变量的关系进行规定的关系规定数据，所述车辆具备旋转电机和内燃机，所述行动变量是与所述车辆内的电子设备的操作有关的变量，
所述生成方法包括使执行装置执行：
取得处理，取得确定变量和基于传感器的检测值得到的所述车辆的状态，所述确定变量是对在所述内燃机的工作状态下所述内燃机产生的转矩是否被利用于所述车辆的推力的生成进行确定的变量；
操作处理，对所述电子设备进行操作；
奖励算出处理，基于通过所述取得处理取得的所述车辆的状态，在所述车辆的特性满足基准的情况下给与比所述车辆的特性不满足基准的情况下大的奖励；以及
更新处理，将通过所述取得处理取得的所述车辆的状态、在所述电子设备的操作中所使用的所述行动变量的值以及与该操作对应的所述奖励作为向预先确定的更新映射的输入，对所述关系规定数据进行更新，
所述更新映射输出以使按照所述关系规定数据操作所述电子设备的情况下的关于所述奖励的期待收益增加的方式进行了更新的所述关系规定数据，
所述奖励算出处理包括如下的变更处理：在所述内燃机的工作状态下所述内燃机产生的转矩不被利用于所述车辆的推力的生成的情况下，使所述车辆的特性为预定特性时所给与的所述奖励相对于在所述内燃机的工作状态下所述内燃机产生的转矩被利用于所述车辆的推力的生成的情况下的该奖励进行变更。


2.根据权利要求1所述的车辆用控制数据的生成方法，
所述奖励算出处理包括在能量利用效率高的情况下给与比能量利用效率低的情况下大的奖励的处理，
所述变更处理包括如下处理：在所述内燃机的工作状态下所述内燃机产生的转矩不被利用于所述车辆的推力的生成的情况下，与在所述内燃机的工作状态下所述内燃机产生的转矩被利用于所述车辆的推力的生成的情况相比，对所述奖励进行变更以使得提高所述能量利用效率在获得更大奖励这一方面有利。


3.根据权利要求1或者2所述的车辆用控制数据的生成方法，
还包括使所述执行装置执行如下处理：基于通过所述更新处理更新后的所述关系规定数据，对所述车辆的状态和使所述期待收益最大化的所述行动变量的值进行关联，由此生成将所述车辆的状态作为输入、输出使所述期待收益最大化的所述行动变量的值的控制用映射数据。


4.一种车辆用控制装置，所述车辆具备旋转电机和内燃机，所述车辆用控制装置具备：
存储装置，其构成为存储关系规定数据，所述关系规定数据对所述车辆的状态与行动变量的关系进行规定，所述行动变量是与所述车辆内的电子设备的操作有关的变量；和
执行装置，
所述执行装置构成为执行：
取得处理，取得确定变量和基于传感器的检测值得到的所述车辆的状态，所述确定变量是对在所述内燃机的工作状态下所述内燃机产生的转矩是否被利用于所述车辆的推力的生成进行确定的变量；
操作处理，基于所述关系规定数据...

【专利技术属性】
技术研发人员：桥本洋介，片山章弘，大城裕太，杉江和纪，冈尚哉，
申请(专利权)人：丰田自动车株式会社，
类型：发明
国别省市：日本;JP