一种行为检测方法、装置、车辆、存储介质和电子设备制造方法及图纸

本公开实施例公开了一种行为检测方法、装置、车辆、存储介质和电子设备，其中，该方法包括：从摄像装置采集的视频帧中，分别获取包括有目标对象的目标部位的目标图像帧和第一图像帧序列；基于目标图像帧，确定目标对象的第一行为以及第一行为的第一置信度；分别对第一图像帧序列中的各图像帧进行骨架检测得到第一图像帧序列中的各图像帧的骨架信息，并基于第一图像帧序列中的各图像帧的骨架信息进行行为识别，得到目标对象的第二行为以及第二行为的第二置信度；基于第一行为和第一行为第一置信度，以及第二行为和第二行为第二置信度，确定目标对象的行为检测结果。本公开实施例可以大幅减低行为检测的误判几率。以大幅减低行为检测的误判几率。以大幅减低行为检测的误判几率。

【技术实现步骤摘要】
一种行为检测方法、装置、车辆、存储介质和电子设备


[0001]本公开涉及行为检测
，尤其是一种行为检测方法、装置、车辆、存储介质和电子设备。

技术介绍

[0002]在车辆领域中，由于车辆的驾驶员以及乘客等人员的某些行为，会对车辆的行驶安全产生影响。因此，通过对车内人员进行行为检测，在检测出车内人员的危险行为时，及时采取相应措施，降低危险行为对车辆安全造成的影响，是非常必要的。
[0003]如何准确检测车内人员的行为，是一个亟待解决的问题。

技术实现思路

[0004]本公开的专利技术人经过大量创造性的劳动发现，从车内摄像装置采集的视频帧中获取单帧图像，通过对获取的单帧图像提取感兴趣区域后进行行为识别的方式，有时会出现行为误判，例如将车内人员的手部接触嘴部的行为，或将车内人员咬牙签的行为，误判为车内人员进行了抽烟行为(如图1所示)。
[0005]为了解决上述技术问题，提出了本公开。本公开的实施例提供了一种行为检测方法、装置、车辆、存储介质和电子设备。
[0006]根据本公开实施例的第一方面，提供了一种行本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种行为检测方法，包括：从摄像装置采集的视频帧中，分别获取包括有目标对象的目标部位的目标图像帧和第一图像帧序列；基于所述目标图像帧，确定所述目标对象的第一行为以及所述第一行为的第一置信度；分别对所述第一图像帧序列中的各图像帧进行骨架检测得到所述第一图像帧序列中的各图像帧的骨架信息，并基于所述第一图像帧序列中的各图像帧的骨架信息进行行为识别，得到所述目标对象的第二行为以及所述第二行为的第二置信度；基于所述第一行为和所述第一行为第一置信度，以及所述第二行为和所述第二行为第二置信度，确定所述目标对象的行为检测结果。2.根据权利要求1所述的行为检测方法，其中，所述基于所述目标图像帧，确定所述目标对象的第一行为以及所述第一行为的第一置信度，包括：获取位于所述目标图像帧的采集时间之前、且包括有所述目标对象的目标部位的第二图像帧序列，其中，所述第二图像帧序列的采集时间点与所述目标图像帧的采集时间点在预设时间间隔范围内，所述第一图像帧序列中的各图像帧的采集时间均位于所述目标图像帧的采集时间之前，且所述第二图像帧序列的图像采集时间段长度小于所述第一图像帧序列的图像采集时间段长度；对所述第二图像帧序列中各图像帧提取所述目标对象的目标部位的图像块，得到图像块序列；基于所述图像块序列进行行为识别，确定所述第一行为以及所述第一行为的第一置信度。3.根据权利要求2所述的行为检测方法，其中，所述基于所述图像块序列进行行为识别，确定所述第一行为以及所述第一行为的第一置信度，包括：对所述图像块序列中的各图像块进行骨架检测，得到所述图像块序列中的各图像块的骨架信息；基于所述图像块序列中的各图像块的骨架信息进行行为识别，得到所述图像块序列中的各图像块在多个预设行为分类上的置信度；基于所述图像块序列中的各图像块在多个预设行为分类上的置信度，确定所述图像块序列中的各图像块的行为分类；统计所述图像块序列中的各图像块的行为分类的数量，将行为分类数量最多的行为作为所述第一行为；将所述图像块序列中的各图像块在所述第一行为上的置信度进行均值处理，得到所述第一行为的第一置信度。4.根据权利要求1
‑
3任一项所述的行为检测方法，其中，所述基于所述第一图像帧序列中的各图像帧的骨架信息进行行为识别，得到所述目标对象的第二行为以及所述第二行为的第二置信度，包括：从所述第一图像帧序列中的各图像帧的骨架信息中，去除所述第一图像帧序列中的各图像帧中的预设部位的骨架信息，得到所述第一图像帧序列中的各图像帧的剩...

【专利技术属性】
技术研发人员：杨聪，孔祥斌，
申请(专利权)人：南京人工智能高等研究院有限公司，
类型：发明
国别省市：