一种通过关键点条件网络监控机动车辆驾驶员的方法技术

本发明专利技术公开了一种通过关键点条件网络监控机动车辆驾驶员的方法，显式地提取与动作相关的关键点特征。网络包含全局分支和关键点分支。在全局分支中利用改进的空洞金字塔池化层来捕获多尺度的全局上下文，在关键点分支中提出了一个关键点条件计算模块来增强特征的可分辨性。在分类过程中，每个输入图像并不共享相同的全连接层参数，而是在关键点特征的指导下，通过条件计算生成专家权值，使模型能够适应相应类别的驾驶图像。本发明专利技术通过生成关键点增强注意力以缩放分类特征，提高了分类准确率和鲁棒性，在交通安全领域有重要的应用价值。在交通安全领域有重要的应用价值。在交通安全领域有重要的应用价值。

【技术实现步骤摘要】
一种通过关键点条件网络监控机动车辆驾驶员的方法


[0001]本专利技术属于图像处理和模式识别领域，具体涉及一种通过关键点条件网络监控机动车辆驾驶员的方法。

技术介绍

[0002]分心驾驶引发的交通事故已成为对人们生命财产的威胁。有效识别驾驶行为尤为重要。根据世界卫生组织(WHO)的报告，全世界每年有135万人死于交通事故。每天有将近3700人死于世界道路上。“本报告中最令人心碎的统计数据之一是，道路交通伤害是5至29岁年龄段人群死亡的主要原因”。该报告还显示，死亡人数逐年增加，这些事故背后的最常见原因是驾驶员分心。在年轻驾驶者和新手驾驶者中，驾车时使用手机十分普遍，这进一步增加了这些人群中本已很高的撞车和死亡风险。开车时使用电话会使撞车的可能性增加四倍，而发短信则使撞车的危险增加23倍。同样，使用电话的驾驶员的反应时间也比不使用电话的速度慢了50％。如今，越来越多的现代车辆配备了高级驾驶员辅助系统(ADAS)，例如稳定性控制，牵引力控制，车道偏离警告，自适应巡航控制和防抱死制动系统。开发这些系统是为了通过提供警告驾驶员可能出现的问题并在发生事故本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种通过关键点条件网络监控机动车辆驾驶员的方法，其特征在于，包括以下步骤：步骤1：实验数据采用StateFarm分心驾驶数据集；步骤2：构建关键点条件网络；所设计的模型包含两个分支，一个分支基于ResNet利用改进的空洞金字塔池化层来提取驾驶图像的全局特征；另一个分支首先通过姿态估计模型提取关键点特征，并将这两种特征串联起来，送入关键点条件计算模块，其中生成的注意向量对融合后的特征重新加权；该模块引导模型使用关键点特征信息来强调与驾驶行为分类相关的更具区别性的特征通道，其输出是最终的分类表示；步骤3：训练关键点条件网络；基于深度学习框架Tensorflow，采用softmax作为分类损失函数；步骤4：对关键点条件网络进行测试。2.根据权利要求1所述的一种通过关键点条件网络监控机动车辆驾驶员的方法，其特征在于，步骤2所述的构建关键点条件网络模型，所设计的模型包含两个分支，一个分支基于ResNet利用改进的空洞金字塔池化层来提取驾驶图像的全局特征；另一个分支首先通过姿态估计模型提取关键点特征，并将这两种特征串联起来，送入关键点条件计算模块，其中生成的注意向量对融合后的特征重新加权；该模块引导模型使用关键点特征信息来强调与驾驶行为分类相关的更具区别性的特征通道，其输出是最终的分类表示；具体描述如下：步骤201：网络模型使用ResNet作为骨干，将Conv5_x中的卷积层设置为步幅为1，空洞率为2，并结合改进的空洞空间金字塔池化层以提取驾驶图像的全局特征；对于输入图像，大尺度特征编码长范围上下文，小尺度特征保留细节，而多尺度特征的提取是通过改变空洞率来实现的，因此合并多个空洞卷积分支，即空洞空间金字塔池化ASPP；本发明中对ASPP层进行改进以融合驾驶图像中的上下文，考虑到空洞卷积和池化操作的方式不同，增加了两个最大池化层4
×
4和8
×
8来丰富特征融合的多样性，以增加感受野；然后，添加上采样层以恢复特征尺寸；在第一条并行路径中加入1
×
1卷积以保留原始特征；此外，在所有并行路径中使用1
×
1卷积，将特征通道数减少到128个；最后，将改进的ASPP层中所有并行路径的输出特征串联起来，输出...

【专利技术属性】
技术研发人员：路小波，陆明琦，胡耀聪，
申请(专利权)人：东南大学，
类型：发明
国别省市：