一种实现场景自适应的人群运动路径规划方法及系统技术方案

本公开提出了一种实现场景自适应的人群运动路径规划方法及系统，将获取的场景信息以及人群信息输入至训练好的多智能体深度强化学习框架模型进行人群运动规划路径；所述多智能体深度强化学习框架模型中以每个人作为一个智能体，包括顶层规划模型和底层规划模型；顶层规划模型每个智能体以距离最近的出口作为疏散目标，利用深度确定性策略梯度算法规划，得到全局规划路径；底层规划模型以顶层规划模型的输出为状态值，以避免碰撞为目标进行局部规划，修正全局规划路径得到人群运动规划路径。采用MADDPG算法，将全局路径规划和局部避免碰撞分开处理，并使用多智能体深度强化学习方法以适应于场景的变化，规划出更为合理的人群运动路径。人群运动路径。人群运动路径。

【技术实现步骤摘要】
一种实现场景自适应的人群运动路径规划方法及系统


[0001]本公开涉及人群运动路径规划相关
，具体的说，是涉及一种实现场景自适应的人群运动路径规划方法及系统。

技术介绍

[0002]本部分的陈述仅仅是提供了与本公开相关的
技术介绍
信息，并不必然构成在先技术。
[0003]随着科技和经济的不断发展、公共建筑和设施的不断增多，在地铁站、机场、医院等公共区域内的人流量也更加密集。当发生紧急情况时，如火灾、地震等，由于应急方案存在一定缺陷，导致人群拥挤、踩踏的意外情况时有发生。因此，发生灾难时，规划人群在公共场所内真实的运动路径有助于提前规避风险，保障人民生命财产安全。
[0004]在人群运动路径规划中，通常对规划方法的灵活性和真实性要求较高。专利技术人发现，传统人群路径规划方法往往使用预先定义的场景和规则，降低了人群运动的真实度。基于数据驱动的路径规划方法常被用来增强人群路径规划的真实度。然而，基于数据驱动的方法通常从特定场景中提取人群运动数据，并将训练好的模型应用到同一场景，当场景中障碍物数量或位置发生变化时，基于数据驱动的方法本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种实现场景自适应的人群运动路径规划方法，其特征在于，包括如下步骤：获取场景信息以及人群参数信息；将获取的信息输入至训练好的多智能体深度强化学习框架模型，得到人群运动规划路径；所述多智能体深度强化学习框架模型中以每个人作为一个智能体，包括顶层规划模型和底层规划模型；顶层规划模型以智能体距离最近的出口作为疏散目标，利用深度确定性策略梯度算法规划，得到全局规划路径；底层规划模型以顶层规划模型的输出为状态值，以避免碰撞为目标进行局部规划，修正全局规划路径得到人群运动规划路径。2.如权利要求1所述的一种实现场景自适应的人群运动路径规划方法，其特征在于：将获取的信息输入至训练好的多智能体深度强化学习框架模型，得到人群运动规划路径的方法，包括如下步骤：根据获取的场景信息以及人群参数信息，进行多智能体深度强化学习框架模型内的参数的初始化设置；利用深度确定性策略梯度算法对单个智能体进行路径规划，使得智能体的移动路径指向目标出口，得到全局规划路径；以使智能体避免与其他智能体发生碰撞为目标，采用相对速度障碍算法融合多智能体深度确定性策略梯度算法进行规划，对全局规划路径进行修正，得到最终的人群运动规划路径。3.如权利要求1所述的一种实现场景自适应的人群运动路径规划方法，其特征在于：顶层规划模型的训练过程，包括如下步骤：根据获取的场景信息以及人群参数信息，设定顶层规划模型智能体的状态和动作空间；从获取的真实视频中提取行人的运动属性；设定轨迹匹配器用于提取智能体的状态；设定顶层规划的智能体的奖励函数，激励智能体做出预期动作；每个智能体对应一个Actor网络与一个Critic网络，分别负责策略估计和价值估计，采用深度确定性策略梯度算法训练Critic网络和Actor网络的模型参数，根据设定迭代次数进行迭代训练，以智能体获取的回报值最大为目标，直至训练出每个智能体的奖励值收敛，得到最终的模型参数。4.如权利要求3所述的一种实现场景自适应的人群运动路径规划方法，其特征在于：顶层规划的智能体的奖励函数：当智能体与障碍物碰撞，奖励值为负数；当智能体到达总体目标位置奖励值为正数；智能体下一时刻比当前时刻更接近总体目标位置，奖励为正奖励，否则为负奖励；或者，智能体的状态包括智能体的位置、速度、目标位置、障碍物距离；智能体的动作空间具体为智能体位置坐标变换的二维的连续空间；或者，运动属性包括智能体每一时刻的纵坐标位置、横坐标位置、纵坐标速度和横坐标速度。5.如权利要求1所述的一种实现场景自适应的人群运动路径规划方法，其特征在于：底层规划模型的训练过程，包括如下步骤：
接收顶层规划模型传输的智能体下一时刻的目标位置，并将其作为底层规划智能体的...

【专利技术属性】
技术研发人员：蔡秀花，张政，陆佃杰，张桂娟，
申请(专利权)人：山东师范大学，
类型：发明
国别省市：