当前位置: 首页 > 专利查询>东南大学专利>正文

基于行人特性和人车交互的行人意图检测方法、装置及存储介质制造方法及图纸

技术编号:41974910 阅读:29 留言:0更新日期:2024-07-10 16:54
本发明专利技术涉及一种基于行人特性和人车交互的行人意图检测方法、装置及存储介质,其中方法包括:获取车载摄像设备的行车记录视频;对行车记录视频进行人物检测,得到行人检测结果;对得到的行人检测结果提取行人关键点,并保存关键点提取过程中的关键点热力图;基于提取的行人关键点分别确定各行人的速度;将提取的行人关键点输入至第一特征提取网络得到用于表征各行人运动状态分类结果的第一行为特征;将关键点热力图输入至第二特征提取网络得到第二行为特征;将第一行为特征和第二行为特征拼接得到行人行为特征;对行车记录视频分别进行场景分割和深度估计,得到场景分割图和深度估计图,并将场景分割图和深度估计图拼接后输入至第三特征提取网络得到行车记录视频每帧的人车交互特征;将行人检测结果、行人的速度、行人行为特征结合对应帧的人车交互特征输入至意图分类网络得到行人横穿马路意图检测结果。与现有技术相比,本发明专利技术具有检测准确性高等优点。

【技术实现步骤摘要】

本专利技术涉及行人横穿马路意图检测领域,尤其是涉及一种基于行人特性和人车交互的行人意图检测方法、装置及存储介质


技术介绍

1、针对行人过街意图的预测是交通运输工程领域尤其是自动驾驶领域提高行人安全性的感知基础,其研究具有重要的现实意义。近年来,基于深度学习的行人过街意图识别模型因涵盖众多环境因素,精度高等优势逐渐成为主流。然而,现有的行人过街意图识别模型更多的考虑了行人周围的环境特征,虽然环境特征也可以反应行人的过街意图,但是它所反应的信息并不具备通用性,个体间的差异较大。在过街中,车辆的状态更能影响行人的过街意图。较少的研究针对人-车交互开展,这也是现存行人过街意图识别准确性并不太高的原因,目前存在大量激光雷达的数据集,也为人-车交互的研究提供了数据基础。

2、例如,论文《pedestrians crossing intention anticipation based on dual-channel action recognition and hierarchical environmental context》提出了一种多因素融合网络本文档来自技高网...

【技术保护点】

1.一种基于行人特性和人车交互的行人意图检测方法,其特征在于,包括:

2.根据权利要求1所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述车载摄像设备包括一个或多个车载摄像装置,每个车载摄像装置至少包括一个摄像头。

3.根据权利要求1所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述对行车记录视频进行人物检测,得到行人检测结果,具体包括:

4.根据权利要求3所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述行人的位置特征具体为行人的外接矩形框。

5.根据权利要求1所述的一种基于行人特性和...

【技术特征摘要】

1.一种基于行人特性和人车交互的行人意图检测方法,其特征在于,包括:

2.根据权利要求1所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述车载摄像设备包括一个或多个车载摄像装置,每个车载摄像装置至少包括一个摄像头。

3.根据权利要求1所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述对行车记录视频进行人物检测,得到行人检测结果,具体包括:

4.根据权利要求3所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述行人的位置特征具体为行人的外接矩形框。

5.根据权利要求1所述的一种基于行人特性和人车交互的行人意图检测方法,其特征在于,所述基于提取的行人关键点分别确定各行人的速度,具体包括:

6.根据权利要求1所述的一种基于行人特性和人车交互的行...

【专利技术属性】
技术研发人员:王晨刘发麒周威
申请(专利权)人:东南大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1