基于多模态信息的驾驶危险系数评估方法和装置制造方法及图纸

本发明专利技术公开基于多模态信息的驾驶危险系数评估方法和装置，涉及汽车领域，能够解决评估驾驶危险系数效率和准确率低的问题。方法包括：通过采集并分析车辆在行驶过程中的状态信息，计算基于车辆的机械物理信息的驾驶危险系数；通过采集并分析驾驶员的驾驶行为信息，计算基于驾驶员行为举止的驾驶危险系数；通过采集并分析单位时间内的交通标识以及交通标识对应的驾驶行为信息，计算基于交通规则的驾驶危险系数；通过采集并分析单位时间内车辆与周围对象的相对关系以及相对关系对应的驾驶行为信息，计算基于周围对象的驾驶危险系数；对上述四种驾驶危险系数进行加权处理，获得综合的驾驶危险系数。主要适用于需要获取驾驶员驾驶行为的风险的场景中。

Method and device for evaluating driving risk coefficient based on multimodal information

The invention discloses a driving hazard coefficient evaluation method and device based on multi-modal information, which relates to the field of automobile, and can solve the problem of low driving efficiency and low accuracy. The method includes: through the state information acquisition and analysis of vehicles in the process of calculation, the dangerous driving coefficient of mechanical and physical information of the vehicle based on driving behavior; through information collection and analysis of the driver, the driver of dangerous driving behavior coefficient calculation based on; through the collection and analysis of unit time of traffic signs and traffic markings the driving behavior information, calculation of driving risk coefficient based on traffic rules; the driving behavior information relative to the collection and analysis of per unit time of the vehicle with the surrounding objects and relative relation corresponding to the calculation of the dangerous driving factor around based on object; weighting of the four driving dangerous driving coefficient, comprehensive risk coefficient. It is mainly applicable to the scenario where the driver's driving behavior is required.

【技术实现步骤摘要】
基于多模态信息的驾驶危险系数评估方法和装置
本专利技术涉及汽车
，特别是涉及一种基于多模态信息的驾驶危险系数评估方法和装置。
技术介绍
随着人们生活水平的提高和生活节奏的加快，车辆越来越普及，交通运输的压力也因此空前增大，汽车驾驶的安全问题逐渐成为人们关注的焦点。为了方便交通部门对车辆的监管，保险公司对保险风险的预测以及公司对网约车和出租车的监督，需要对驾驶员的驾驶危险系数进行合理正确地评估。而现有的车内监控系统和车外监控系统是无法自动检测出驾驶员在驾驶汽车过程中的驾驶危险系数的，只能依靠人工查看车内监控录像对驾驶员在车内的行为举止进行分析、人工查看车外监控录像对驾驶员开车过程中的违规行为进行分析，粗略地评估驾驶员的驾驶危险系数，从而导致获取驾驶员危险系数的效率和准确率都很低。
技术实现思路
有鉴于此，本专利技术提供的基于多模态信息的驾驶危险系数评估方法和装置，能够解决现有技术评估驾驶员危险系数效率和准确率低的问题。本专利技术的目的是采用以下技术方案来实现的：第一方面，本专利技术提供了一种基于多模态信息的驾驶危险系数评估方法，该方法包括以下步骤：通过安装于车外的摄像头获取驾驶过程中的路况信息；通过安装于车内的摄像头获取驾驶过程中的驾驶行为信息；通过传感器获取车辆状态信息；通过采集分析驾驶员驾驶过程中车辆的状态信息，来评估驾驶员的第一驾驶危险系数；通过检测驾驶员在驾驶过程中的驾驶行行为信息，来评估驾驶员的第二驾驶危险系数；通过采集单位时间的路况信息，并结合采集到的驾驶员的行为信息。计算单位实际内检测到的各种交通规则违反的数目，得到基于交通规则的危险系数；通过采集单位时间内的路况信息，并结合采集到的驾驶员的行为信息，计算单位时间内检测到的各种危险警报的数目，得到基于行车特征的危险系数；根据上述四个驾驶危险系数，通过加权将四个不同危险系数映射成一个综合的危险系数。第二方面，本专利技术提供了一种基于多模态信息的驾驶危险系数评估装置，该装置包括：路况信息获取模块，用于通过安装于车外的摄像头获取驾驶过程中的路况信息；驾驶行为信息获取模块，用于通过安装于车内的摄像头获取驾驶过程中的驾驶行为信息；车辆状态信息获取模块，用于通过传感器获取车辆状态信息；评估模块，用于通过采集分析驾驶员驾驶过程中车辆的状态信息，来评估驾驶员的第一驾驶危险系数；所述评估模块还用于通过检测驾驶员在驾驶过程中的驾驶行行为信息，来评估驾驶员的第二驾驶危险系数；所述评估模块还用于通过采集单位时间的路况信息，并结合采集到的驾驶员的行为信息；计算单位实际内检测到的各种交通规则违反的数目，得到基于交通规则的危险系数；所述评估模块还用于通过采集单位时间内的路况信息，并结合采集到的驾驶员的行为信息，计算单位时间内检测到的各种危险警报的数目，得到基于行车特征的危险系数；加权处理模块，用于根据上述四个驾驶危险系数，通过加权将四个不同危险系数映射成一个综合的危险系数。第三方面，本专利技术提供了一种基于多模态信息的驾驶危险系数评估方法，所述方法包括：通过采集并分析车辆在行驶过程中的状态信息，计算基于车辆的机械物理信息的驾驶危险系数；通过采集并分析驾驶员在驾驶车辆过程中的驾驶行为信息，计算基于驾驶员行为举止的驾驶危险系数；通过采集并分析单位时间内的交通标识以及所述交通标识对应的驾驶行为信息，计算基于交通规则的驾驶危险系数；通过采集并分析单位时间内所述车辆与周围对象的相对关系以及所述相对关系对应的驾驶行为信息，计算基于周围对象的驾驶危险系数；对所述基于车辆的机械物理信息的驾驶危险系数、所述基于驾驶员行为的驾驶危险系数、所述基于交通规则的驾驶危险系数以及所述基于周围对象的驾驶危险系数进行加权处理，获得综合的驾驶危险系数。第四方面，本专利技术提供了一种基于多模态信息的驾驶危险系数评估装置，所述装置包括：第一计算单元，用于通过采集并分析车辆在行驶过程中的状态信息，计算基于车辆的机械物理信息的驾驶危险系数；第二计算单元，用于通过采集并分析驾驶员在驾驶车辆过程中的驾驶行为信息，计算基于驾驶员行为举止的驾驶危险系数；第三计算单元，用于通过采集并分析单位时间内的交通标识以及所述交通标识对应的驾驶行为信息，计算基于交通规则的驾驶危险系数；第四计算单元，用于通过采集并分析单位时间内所述车辆与周围对象的相对关系以及所述相对关系对应的驾驶行为信息，计算基于周围对象的驾驶危险系数；加权单元，用于对所述基于车辆的机械物理信息的驾驶危险系数、所述基于驾驶员行为的驾驶危险系数、所述基于交通规则的驾驶危险系数以及所述基于周围对象的驾驶危险系数进行加权处理，获得综合的驾驶危险系数。第五方面，本专利技术提供了一种存储介质，所述存储介质存储有多条指令，所述指令适用于由处理器加载并执行如第一方面或第三方面所述的基于多模态信息的驾驶危险系数评估方法。第六方面，本专利技术提供了一种基于多模态信息的驾驶危险系数评估装置，所述装置包括存储介质和处理器；所述处理器，适于实现各指令；所述存储介质，适于存储多条指令；所述指令适于由所述处理器加载并执行如第一方面或第三方面所述的基于多模态信息的驾驶危险系数评估方法。第七方面，本专利技术提供了一种基于多模态信息的驾驶危险系数评估装置，所述装置包括车辆行驶信息传感器、驾驶员监测相机、交通标识检测相机、道路行人车辆检测相机以及嵌入式车机系统；其中，所述嵌入式车机系统，用于通过所述车辆行驶信息传感器采集车辆在行驶过程中的状态信息，并根据所述状态信息计算基于车辆的机械物理信息的驾驶危险系数；通过所述驾驶员监测相机采集驾驶员在驾驶车辆过程中的驾驶行为信息，并根据所述驾驶行为信息计算基于驾驶员行为举止的驾驶危险系数；通过所述交通标识检测相机采集单位时间内的交通标识以及通过所述车辆行驶信息传感器采集所述交通标识对应的驾驶行为信息，并根据所述交通标识和所述交通标识对应的驾驶行为信息，计算基于交通规则的驾驶危险系数；通过所述道路行人车辆检测相机采集单位时间内所述车辆与周围对象的相对关系以及通过所述车辆行驶信息传感器采集所述相对关系对应的驾驶行为信息，并根据所述车辆与周围对象的相对关系以及所述相对关系对应的驾驶行为信息，计算基于周围对象的驾驶危险系数；对所述基于车辆的机械物理信息的驾驶危险系数、所述基于驾驶员行为的驾驶危险系数、所述基于交通规则的驾驶危险系数以及所述基于周围对象的驾驶危险系数进行加权处理，获得综合的驾驶危险系数。借由上述技术方案，本专利技术提供的基于多模态信息的驾驶危险系数评估方法和装置，能够由嵌入式车机系统自动化地分别通过采集并分析车辆在行驶过程中的状态信息，计算得到基于车辆的机械物理信息的驾驶危险系数，通过采集并分析驾驶员在驾驶车辆过程中的驾驶行为信息，计算得到基于驾驶员行为举止的驾驶危险系数，通过采集并分析单位时间内的交通标识以及该交通标识对应的驾驶行为信息，计算得到基于交通规则的驾驶危险系数，通过采集并分析单位时间内所述车辆与周围对象的相对关系以及该相对关系对应的驾驶行为信息，计算得到基于周围对象的驾驶危险系数，然后对这四个驾驶危险系数进行加权处理，从而得到综合的驾驶危险系数，进而不仅不需要人工分析监控录像，而且还可以从驾驶员驾驶车辆过程中的各个方面综合分析该驾驶员的驾驶危险系数，相比于人工分析的准确本文档来自技高网...

【技术保护点】
一种基于多模态信息的驾驶危险系数评估方法，其特征在于，所述方法包括以下步骤：通过安装于车外的摄像头获取驾驶过程中的路况信息；通过安装于车内的摄像头获取驾驶过程中的驾驶行为信息；通过传感器获取车辆状态信息；通过采集分析驾驶员驾驶过程中车辆的状态信息，来评估驾驶员的第一驾驶危险系数；通过检测驾驶员在驾驶过程中的驾驶行行为信息，来评估驾驶员的第二驾驶危险系数；通过采集单位时间的路况信息，并结合采集到的驾驶员的行为信息。计算单位实际内检测到的各种交通规则违反的数目，得到基于交通规则的危险系数；通过采集单位时间内的路况信息，并结合采集到的驾驶员的行为信息，计算单位时间内检测到的各种危险警报的数目，得到基于行车特征的危险系数；根据上述四个驾驶危险系数，通过加权将四个不同危险系数映射成一个综合的危险系数。

【技术特征摘要】
2017.01.25 CN 20171006304041.一种基于多模态信息的驾驶危险系数评估方法，其特征在于，所述方法包括以下步骤：通过安装于车外的摄像头获取驾驶过程中的路况信息；通过安装于车内的摄像头获取驾驶过程中的驾驶行为信息；通过传感器获取车辆状态信息；通过采集分析驾驶员驾驶过程中车辆的状态信息，来评估驾驶员的第一驾驶危险系数；通过检测驾驶员在驾驶过程中的驾驶行行为信息，来评估驾驶员的第二驾驶危险系数；通过采集单位时间的路况信息，并结合采集到的驾驶员的行为信息。计算单位实际内检测到的各种交通规则违反的数目，得到基于交通规则的危险系数；通过采集单位时间内的路况信息，并结合采集到的驾驶员的行为信息，计算单位时间内检测到的各种危险警报的数目，得到基于行车特征的危险系数；根据上述四个驾驶危险系数，通过加权将四个不同危险系数映射成一个综合的危险系数。2.一种基于多模态信息的驾驶危险系数评估装置，其特征在于，所述装置包括：路况信息获取模块，用于通过安装于车外的摄像头获取驾驶过程中的路况信息；驾驶行为信息获取模块，用于通过安装于车内的摄像头获取驾驶过程中的驾驶行为信息；车辆状态信息获取模块，用于通过传感器获取车辆状态信息；评估模块，用于通过采集分析驾驶员驾驶过程中车辆的状态信息，来评估驾驶员的第一驾驶危险系数；所述评估模块还用于通过检测驾驶员在驾驶过程中的驾驶行行为信息，来评估驾驶员的第二驾驶危险系数；所述评估模块还用于通过采集单位时间的路况信息，并结合采集到的驾驶员的行为信息；计算单位实际内检测到的各种交通规则违反的数目，得到基于交通规则的危险系数；所述评估模块还用于通过采集单位时间内的路况信息，并结合采集到的驾驶员的行为信息，计算单位时间内检测到的各种危险警报的数目，得到基于行车特征的危险系数；加权处理模块，用于根据上述四个驾驶危险系数，通过加权将四个不同危险系数映射成一个综合的危险系数。3.一种基于多模态信息的驾驶危险系数评估方法，其特征在于，所述方法包括：通过采集并分析车辆在行驶过程中的状态信息，计算基于车辆的机械物理信息的驾驶危险系数；通过采集并分析驾驶员在驾驶车辆过程中的驾驶行为信息，计算基于驾驶员行为举止的驾驶危险系数；通过采集并分析单位时间内的交通标识以及所述交通标识对应的驾驶行为信息，计算基于交通规则的驾驶危险系数；通过采集并分析单位时间内所述车辆与周围对象的相对关系以及所述相对关系对应的驾驶行为信息，计算基于周围对象的驾驶危险系数；对所述基于车辆的机械物理信息的驾驶危险系数、所述基于驾驶员行为的驾驶危险系数、所述基于交通规则的驾驶危险系数以及所述基于周围对象的驾驶危险系数进行加权处理，获得综合的驾驶危险系数。4.根据权利要求3所述的方法，其特征在于，所述方法还包括：根据不同驾驶员产生不同危险驾驶行为的数量变化，对加权处理中所需的权重进行调整，以使得危险驾驶行为的数量越多，权重越高，所述危险驾驶行为包括与车辆的机械物理信息相关的危险行为、与行为举止相关的危险行为、与交通规则相关的危险行为以及与周围对象相关的危险行为。5.根据权利要求3所述的方法，其特征在于，所述通过采集并分析车辆在行驶过程中的状态信息，计算基于车辆的机械物理信息的驾驶危险系数包括：通过车辆行驶信息传...

【专利技术属性】
技术研发人员：聂藤，李深，
申请(专利权)人：问众智能信息科技北京有限公司，
类型：发明
国别省市：北京,11