【技术实现步骤摘要】
所属的技术人员能够理解，本申请的各个方面可以实现为系统、方法或程序产品。因此，本申请的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。根据本申请的这种实施方式的电子设备。电子设备仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。电子设备以通用计算设备的形式表现。电子设备的组件可以包括但不限于：上述至少一个处理器、上述至少一个储存器、连接不同系统组件(包括储存器和处理器)的总线。其中，所述储存器存储有程序代码，所述程序代码可以被所述处理器执行，使得所述处理器执行本说明书上述“示例性方法”部分中描述的根据本申请各种示例性实施方式的步骤。储存器可以包括易失性储存器形式的可读介质，例如随机存取储存器(ram)和/或高速缓存储存器，还可以进一步包括只读储存器(rom)。储存器还可以包括具有一组(至少一个)程序模块的程序/实用工具，这样的程序模块包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。总线可以为表示几类总线结构中的一种或多种，包括储存器总线或者储存器控制器、外围总线、图形加速端口、处理器或者使用多种总线结构中的任意总线结构的局域总线。电子设备也可以与一个或多个外部设备(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备交互的设备通信，和/或与使得该电子设备能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调
技术介绍
1、随着社会经济的快速发展，汽车已经成为人们日常生活中必不可少的出行工具。然而，在车辆驾驶过程中，车辆座舱内可能发生胁迫或者持刀/枪抢劫等危险情况。在目前的技术方案中，常基于获取到的座舱内图像识别被胁迫者的预设手势或动作从而触发报警。然而，若用户预设的手势或动作过于简单，虽然能够大幅度降低操作繁琐度和行为暴露度，但是与生活中常见手势或动作相同或者相似，容易触发误报，而若用户预设的手势或动作过于复杂，则会大幅度增加操作繁琐度和行为暴露度，容易引起胁迫者的警觉，增大被胁迫者的人身财产安全的风险。由此，如何提高报警结果的准确性，及时应对行车时可能存在的危险情况，进而保证被胁迫者的人身财产安全成为了亟待解决的技术问题。
技术实现思路
1、有鉴于此，本申请提供一种基于多模态信息的行车风险识别方法、系统、设备及介质，以提高报警结果的准确性，及时应对行车时可能存在的危险情况，进而保证被胁迫者的人身财产安全。
2、根据本申请的一个方面，提供了一种基于多模态信息的行车风险识别方法，包括：
3、获取关于目标车辆的图像信息和音频信息，所述图像信息包括车辆内图像和/或车辆外图像；
4、对所述图像信息进行图像识别处理，得到图像处理结果，所述图像处理结果用以描述是否存在影响行车安全的危险行为；
5、对所述音频信本文档来自技高网...
【技术保护点】
1.一种基于多模态信息的行车风险识别方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述图像处理结果包括面部表情识别结果以及行为识别结果；
3.根据权利要求2所述的方法，其特征在于，根据所述图像处理结果和所述音频处理结果，确定所述目标车辆当前的行车风险等级，包括：
4.根据权利要求3所述的方法，其特征在于，根据所述表情类别以及所述目标车辆当前存在的危险行为，确定所述目标车辆当前的行车风险等级，包括：
5.根据权利要求4所述的方法，其特征在于，在根据所述图像处理结果和所述音频处理结果，确定所述目标车辆当前的行车风险等级之后，所述方法还包括：
6.根据权利要求5所述的方法，其特征在于，将针对所述目标车辆获取的图像信息和音频信息实时上传至报警中心平台，包括：
7.根据权利要求1-6中任一项所述的方法，其特征在于，对所述音频信息进行音频识别处理，得到音频处理结果，包括：
8.一种基于多模态信息的行车风险识别系统，其特征在于，包括图像获取和处理模块、音频获取和处理模块以及危险等级
9.一种车辆，其特征在于，包括车载终端，所述车载终端被配置于可执行如权利要求1-7任一项所述的基于多模态信息的行车风险识别方法。
10.一种电子设备，其特征在于，包括处理器和存储器；
11.一种非瞬时性计算机可读存储介质，其特征在于，所述非瞬时性计算机可读存储介质存储程序或指令，所述程序或指令使计算机执行如权利要求1至7任一项所述方法的步骤。
...【技术特征摘要】
1.一种基于多模态信息的行车风险识别方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述图像处理结果包括面部表情识别结果以及行为识别结果；
3.根据权利要求2所述的方法，其特征在于，根据所述图像处理结果和所述音频处理结果，确定所述目标车辆当前的行车风险等级，包括：
4.根据权利要求3所述的方法，其特征在于，根据所述表情类别以及所述目标车辆当前存在的危险行为，确定所述目标车辆当前的行车风险等级，包括：
5.根据权利要求4所述的方法，其特征在于，在根据所述图像处理结果和所述音频处理结果，确定所述目标车辆当前的行车风险等级之后，所述方法还包括：
6.根据权利要求5所述的方法，其特征在于，将针对所述目标车辆获取...
【专利技术属性】
技术研发人员：李响，
申请(专利权)人：大连中科创达软件有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。