用于操控用来观察车辆驾驶员的驾驶员观察系统的方法和设备技术方案

本发明专利技术涉及用于操控用来观察车辆驾驶员的驾驶员观察系统的方法。在第一方法步骤中接收图像分析数据和/或运行状态数据。在第二方法步骤中使用图像分析数据和/或运行状态数据，以便激活驾驶员观察系统的第一状态和/或第二状态。在第一拍摄模式中：在激活的第一状态下，第一传感器装置和第二照明装置接通，第二传感器装置和第一照明装置切断；在激活的第二状态下，第一传感器装置和第一照明装置接通，第二传感器装置和第二照明装置切断。在第二拍摄模式中：在激活的第一状态下，第二传感器装置和第一照明装置接通，第一传感器装置和第二照明装置切断；在激活的第二状态下，第二传感器装置和第二照明装置接通，第一传感器装置和第一照明装置切断。

【技术实现步骤摘要】
用于操控用来观察车辆驾驶员的驾驶员观察系统的方法和设备
本专利技术涉及根据独立权利要求的类型的设备或方法。本专利技术的主题也是计算机程序。
技术介绍
驾驶员观察照相机可以例如与软件功能或算法相组合而使用，所述算法用于识别头部和眼部运动、用于脸部识别、用于通过探测疲劳或缺乏注意力对驾驶员行为进行建模或者用于视线方向识别。在此，驾驶员脸部例如可以通过有源的（aktiv）红外线照明机构来照亮，以便在所有条件下都得到脸部区域的反差明显的均质的和明亮的图像。在使用双照相机系统和两个亮瞳模块的情况下，通过方向盘或驾驶员的手引起的照相机视野遮蔽应该被考虑到。此外，例如在可能损害探测的眼镜镜片上会通过有源的照明形成反射。
技术实现思路
基于该背景，利用在此提出的手段根据独立权利要求提出用于操控用来观察车辆驾驶员的驾驶员观察系统的方法，此外提出使用该方法的设备以及最后提出相应的计算机程序。通过在从属权利要求中提及的措施，在独立权利要求中说明的设备的有利的改型和改进方案是可行的。提出了用于操控用来观察车辆驾驶员的驾驶员观察系统的方法，其中驾驶员观察系统具有至少一个第一模块和第二模块，用于从不同的视角检测驾驶员，其中第一模块具有第一传感器装置和第一照明装置，并且第二模块具有第二传感器装置和第二照明装置，其中该方法包括如下步骤：接收图像分析数据和/或运行状态数据，所述图像分析数据代表对驾驶员的至少一个由第一传感器装置和/或第二传感器装置拍摄的图像的分析结果，所述运行状态数据代表驾驶员观察系统的运行状态；和在使用图像分析数据和/或运行状态数据的情况下激活驾驶员观察系统的第一状态和/或驾驶员观察系统的第二状态，其中在第一状态中和/或第二状态中，在第一拍摄模式和第二拍摄模式之间进行切换，其中在第一拍摄模式中，在激活的第一状态下，第一传感器装置和第二照明装置接通，而第二传感器装置和第一照明装置切断，并且/或者在激活的第二状态下，第一传感器装置和第一照明装置接通，而第二传感器装置和第二照明装置切断，其中在第二拍摄模式中，在激活的第一状态下，第二传感器装置和第一照明装置接通，而第一传感器装置和第二照明装置切断，并且/或者在激活的第二状态下，第二传感器装置和第二照明装置接通，而第一传感器装置和第一照明装置切断。模块例如可以理解为带有作为传感器装置的照相机的照相机模块。传感器装置可以通常理解为用于拍摄驾驶员的图像的光学传感器。照明装置例如可以理解为至少一个发光二极管，尤其也可以理解为由多个发光二极管构成的阵列。发光二极管例如可以构造为红外线发光二极管。根据实施方式，两个照明装置中的至少一个照明装置可以实现为用于从更大的距离对驾驶员进行照明的所谓的暗瞳模块，或者实现为用于从更小的距离对驾驶员进行照明的亮瞳模块。两个模块例如可以集成到车辆的组合仪表中。图像分析数据例如可以代表：通过方向盘或驾驶员的手对两个传感器装置中的至少一个传感器装置的遮蔽、驾驶员的被拍摄的图像中的亮度或对比度、尤其是例如驾驶员的虹膜或瞳孔的亮度或对比度。此外，图像分析数据可以代表至少一个在驾驶员的图像中识别出的例如在眼镜镜片上的光反射，或者代表对驾驶员的头部或眼部运动（也被称为头部或眼动追踪）识别的精确度。图像分析数据例如可以在使用适当的图像处理算法的情况下获知，所述图像处理算法例如用于脸部识别、用于头部或眼动追踪或者用于抑制眼镜镜片反射。图像分析数据例如也可以代表统计学的图像数据。运行状态例如可以理解为驾驶员观察系统的刚好有源的识别模式，例如脸部识别模式或者头部或眼动追踪模式。根据实施方式，在第一或第二状态下可以交替地在第一和第二拍摄模式之间切换。在第一和第二拍摄模式之间的切换可以要么无中断地进行，要么在预设的中断间隔期满（Ablauf）之后进行。在第一状态和第二状态之间的切换例如可以延迟地进行。在此提出的手段基于以下认识：匹配于情况的、组合的和整体的照相机和红外线照明机构控制在车辆中可以借助用于对双照相机系统的状态进行控制的状态机来实现，所述双照相机系统具有至少两个红外线照明模块。照相机在此例如可以成对地与两个红外线照明模块中的各一个红外线照明模块一起依次激活。所述情况或状态识别例如借助于图像处理算法，如脸部识别、对头部和眼部运动的跟踪或后续的例如用于减少眼镜镜片上的反射的附加算法来实现。借助识别出的情况，例如眼镜镜片上的干扰性的反射，接着触发相应最佳的操控方案。通过这种用于对带有有源的红外线照明机构的机动车内部空间照相机进行适应性控制的方法，一方面可以实现高的系统可用性；另一方面可以由此在图像拍摄时有效地避免干扰性的眼镜镜片反射。根据一种实施方式，在激活的步骤中可以激活第一状态，或者附加地或替选地激活第二状态，以便交替地在第一拍摄模式和第二拍摄模式之间进行切换。由此，可以提高在识别驾驶员的眼部运动或视线方向时的精确度。根据另一种实施方式，在激活的步骤中可以在延迟间隔期满后激活第一状态或者附加地或替选地激活第二状态。由此，例如可以避免在第一和第二状态之间的太快的来回转换。有利的是，在激活的步骤中，在使用图像分析数据的情况下或者附加地或替选地在使用运行状态数据的情况下激活驾驶员观察系统的另外的状态。在所述另外的状态中，第一传感器装置、第二传感器装置、第一照明装置和第二照明装置接通。由此，即使在很差的光照度的情况下，例如在夜晚也可以很好地照亮驾驶员的脸部。也有利的是，在激活的步骤中，在使用图像分析数据的情况下或者附加地或替选地在使用运行状态数据的情况下激活驾驶员观察系统的附加的状态。在所述附加的状态中，可以在第一拍摄模式和第二拍摄模式之间切换。在激活的附加的状态下，在第一拍摄模式中，第一传感器装置、第二传感器装置和第一照明装置接通，而第二照明装置切断。在第二拍摄模式中，在激活的附加的状态下，第一传感器装置、第二传感器装置和第二照明装置接通，而第一照明装置切断。通过该实施方式，在对驾驶员照明时例如在眼镜镜片上的光反射可以得到避免或减小。同时可以因此而确保高的识别精确度。根据一种实施方式，可以在激活的步骤中激活所述附加的状态，以便在中断间隔期满后，在第一拍摄模式和第二拍摄模式之间进行切换，在所述中断间隔中第一传感器装置、第二传感器装置、第一照明装置和第二照明装置被切断。由此，光反射可以特别有效地得到抑制。此外，当图像分析数据代表至少一个在图像中识别出的光反射时，可以在激活的步骤中激活所述附加的状态。由此，可以根据光反射的实际存在情况而激活所述附加的状态。该方法例如可以在软件或硬件中或者在由软件和硬件构成的混合形式中、例如在控制器中实施。在此提出的手段此外提供了如下设备，该设备构造用于在相应的装置中执行、操控或实现在此提出的方法的变型方案的步骤。通过本专利技术在设备形式中的这种实施变型方案，本专利技术所基于的任务也可以快速且有效地得到解决。为此，所述设备可以具有：至少一个用于处理信号或数据的计算单元；至少一个用于存储信号或数据的存储单元；至少一个通向传感器或执行器的接口，所述接口用于读入传感器的传感器信号或者用于将数据或控制信号输出给执行器；和/或至少一个用于读入或输出被置入到通信协议中的数据的通信接口。计算单元可以例如是信号处理器、微控制器或类似装置，其中存储单元可以是闪存、EPRO本文档来自技高网...

【技术保护点】
1. 用于操控用来观察车辆驾驶员的驾驶员观察系统（100）的方法（800），其中所述驾驶员观察系统（100）具有至少一个第一模块（102）和第二模块（104）用于从不同的视角检测驾驶员，其中所述第一模块（102）具有第一传感器装置（CAM1）和第一照明装置（IR1），并且所述第二模块（104）具有第二传感器装置（CAM2）和第二照明装置（IR2），其中所述方法（800）包括如下步骤：接收（810）图像分析数据（713）和/或运行状态数据，所述图像分析数据代表对驾驶员的至少一个由第一传感器装置（CAM1）和/或第二传感器装置（CAM2）拍摄的图像的分析结果，所述运行状态数据代表驾驶员观察系统（100）的运行状态；并且在使用图像分析数据（713）和/或运行状态数据的情况下激活（820）驾驶员观察系统（100）的第一状态（1）和/或驾驶员观察系统（100）的第二状态（2），其中在第一状态（1）中和/或在第二状态（2）中，在第一拍摄模式和第二拍摄模式之间进行切换，其中在第一拍摄模式中，在激活的第一状态（1）下，第一传感器装置（CAM1）和第二照明装置（IR2）接通，而第二传感器装置（CAM2）和第一照明装置（IR1）切断，并且/或者在激活的第二状态（2）下，第一传感器装置（CAM1）和第一照明装置（IR1）接通，而第二传感器装置（CAM2）和第二照明装置（IR2）切断；其中在第二拍摄模式中，在激活的第一状态（1）下，第二传感器装置（CAM2）和第一照明装置（IR1）接通，而第一传感器装置（CAM1）和第二照明装置（IR2）切断，并且/或者在激活的第二状态（2）下，第二传感器装置（CAM2）和第二照明装置（IR2）接通，而第一传感器装置（CAM1）和第一照明装置（IR1）切断。...

【技术特征摘要】
2017.04.28 DE 102017207206.71.用于操控用来观察车辆驾驶员的驾驶员观察系统（100）的方法（800），其中所述驾驶员观察系统（100）具有至少一个第一模块（102）和第二模块（104）用于从不同的视角检测驾驶员，其中所述第一模块（102）具有第一传感器装置（CAM1）和第一照明装置（IR1），并且所述第二模块（104）具有第二传感器装置（CAM2）和第二照明装置（IR2），其中所述方法（800）包括如下步骤：接收（810）图像分析数据（713）和/或运行状态数据，所述图像分析数据代表对驾驶员的至少一个由第一传感器装置（CAM1）和/或第二传感器装置（CAM2）拍摄的图像的分析结果，所述运行状态数据代表驾驶员观察系统（100）的运行状态；并且在使用图像分析数据（713）和/或运行状态数据的情况下激活（820）驾驶员观察系统（100）的第一状态（1）和/或驾驶员观察系统（100）的第二状态（2），其中在第一状态（1）中和/或在第二状态（2）中，在第一拍摄模式和第二拍摄模式之间进行切换，其中在第一拍摄模式中，在激活的第一状态（1）下，第一传感器装置（CAM1）和第二照明装置（IR2）接通，而第二传感器装置（CAM2）和第一照明装置（IR1）切断，并且/或者在激活的第二状态（2）下，第一传感器装置（CAM1）和第一照明装置（IR1）接通，而第二传感器装置（CAM2）和第二照明装置（IR2）切断；其中在第二拍摄模式中，在激活的第一状态（1）下，第二传感器装置（CAM2）和第一照明装置（IR1）接通，而第一传感器装置（CAM1）和第二照明装置（IR2）切断，并且/或者在激活的第二状态（2）下，第二传感器装置（CAM2）和第二照明装置（IR2）接通，而第一传感器装置（CAM1）和第一照明装置（IR1）切断。2.根据权利要求1所述的方法（800），其中在激活（820）的步骤中，激活第一状态（1）和/或第二状态（2），以便交替地在第一拍摄模式和第二拍摄模式之间进行切换。3.根据前述权利要求中任一项所述...

【专利技术属性】
技术研发人员：H特林，
申请(专利权)人：罗伯特·博世有限公司，
类型：发明
国别省市：德国,DE