一种基于流体运动学的解析人群流动特性的方法及系统技术方案

技术编号:37965267 阅读:10 留言:0更新日期:2023-06-30 09:40
本发明专利技术的技术方案是提供了一种基于流体运动学的解析人群流动特性的方法及系统。本发明专利技术结合人群流动的时间、空间以及分割点信息将人群流动特征进行准确解析,并自动分割为简单的平滑无毛刺的基元动作序列,提高了人群流动特性解析的准确率和鲁棒性,且能够精确地识别人群流动的分割点信息,在部分遮挡情况下也能完成对人群流动特征的解析。完成对人群流动特征的解析。完成对人群流动特征的解析。

【技术实现步骤摘要】
一种基于流体运动学的解析人群流动特性的方法及系统


[0001]本专利技术涉及利用液压流体运动学和自动化等方面的知识进行图像分析的一种方法以及基于该方法实现的系统,属于视频图像分析领域。

技术介绍

[0002]在保障公共安全的过程中,人群的行为模式变化可能意味着突发事件的发生,如何及时识别出引发变化的突发事件,准确地确定人群流动特征就成为相关领域人员的迫切需求。
[0003]传统的观测模式中,是需要人工调查特定区域内人群的变化情况,通过观看特定地点的监控视频,或者在现场实地调研。这种传统方法存在较大的局限,不能较好地保证观测的准确性以及异常状态发现的及时性。
[0004]于2022年03月22日公开的、公开号为CN114219686A的专利技术专利申请公开了一种人群流动特征确定方法、装置、电子设备和存储介质,具体实现方案包括:获取位于目标区域中的多个第一用户在第一时间范围内使用健康码的第一使用数据;将各个时间区间内的第一使用次数信息分别输入至与所述时间区间对应的浮动区间模型,输出在时间区间内健康码使用次数的浮动区间;获取位于所述目标区域中的多个第二用户在第二时间范围内使用健康码的第二使用数据;根据各个时间区间内的健康码使用次数的浮动区间和第二使用数据,确定目标区域在第二时间范围内的人群流动特征。该专利技术专利申请采用了涉及大数据、数据分析与挖掘领域的知识来确定一种人群流动特征,其使用的前提是基于人群手机的健康码,如果人群没有使用健康码时,就需要有其他方案来解决。

技术实现思路

[0005]本专利技术的目的是:提供一种能够准确地确定人群流动特征的方法。本专利技术的另一个目的是:提供一种基于前述方法实现的系统。
[0006]为了达到上述目的,本专利技术的一个技术方案是提供了一种基于流体运动学的解析人群流动特性的方法,其特征在于,包括以下步骤:
[0007]步骤1、采集人群流动的视频特征,包括多帧RGB图像以及多帧深度图像;
[0008]步骤2、提取步骤1获得的视频特征中对象的相对位置关系,构建对象的场景图,并利用图网络模型提取场景图的空间特征;
[0009]步骤3、利用时间卷积网络提取连续的空间特征的全局时间信息,确定人群流动的时空特征F1;
[0010]步骤4、利用描述流体运动学的拉格朗日法或欧拉法基于步骤1采集的视频特征初步识别得到人群流动的运动特征;
[0011]步骤5、利用长短期记忆网络根据步骤4获得的人群流动的特征进行分割点提取,得到准确的分割点信息,确定分割点特征;
[0012]步骤6、将步骤2得到的空间特征以及步骤5获得的分割点特征进行空间

分割点特
征池化,确定空间

分割点特征F2,具体包括以下步骤:
[0013]步骤601、根据分割点特征内的分割点对空间特征进行分割,确定多段分割后的空间特征;
[0014]步骤602、对每段分割后的空间特征进行平均池化,确定空间

分割点特征F2;
[0015]步骤7、输入步骤3得到的时空特征与步骤6获得的空间

分割点特征,对时间、空间和分割点特征进行加权融合,得到基元人群流动分割序列,具体包括以下步骤:
[0016]步骤701、将时空特征F1以及空间

分割点特征F2加权融合后的融合特征F对应的融合矩阵按行分块,如下式所示;
[0017]F=[F1,F2,
……
,F
n
]T
[0018]其中:F的维度为n
×
m,列数m对应m个基元特征动作;F
n
为第n行融合特征;
[0019]步骤702、根据融合矩阵确定每一帧视频的基元人群流动类型,其中,对每一帧视频分类就是根据F1,F2,
……
,F
n
对基元动作进行分类识别,识别方法是第k行融合特征F
k
值最大的列所代表的基元动作即为该帧视频的最后识别结果,k=1,2,3,...,n;
[0020]步骤703、合并基元人群流动类型相同的相邻帧,确定人群流动视频的基元动作序列。
[0021]优选地,所述步骤2包括以下步骤:
[0022]步骤201、识别每一帧RGB图像中的对象,确定对象的类型以及2D边界框位置信息,其中,对象为RGB图像中的人群流动;
[0023]步骤202、根据2D边界框位置信息以及深度图像的深度信息确定对象的3D坐标;
[0024]步骤203、基于对象的3D坐标利用点云滤波确定对象点云信息以及对象的3D边界框信息;
[0025]步骤204、根据3D边界框信息判断对象的相对位置关系,生成人群流动场景图;
[0026]步骤205、利用图网络模型不断更新每帧人群流动场景图的节点、边和全局属性,得到每帧人群流动场景图的空间特征。
[0027]优选地,所述步骤3包括以下步骤:
[0028]步骤301、构建单阶段的时间卷积网络,该单阶段的时间卷积网络中的输入层后连接多个卷积层,卷积层使用卷积核为3的非因果卷积,引入每层加倍膨胀因子的空洞卷积以增大每层所述卷积层的感受野,最后一层隐含层每帧的感受野为完整视频帧数;
[0029]步骤302、重复步骤301以多次构建单阶段的时间卷积网络,生成多阶段时间卷积网络,并将多阶段的时间卷积网络中最后一层隐含层的特征作为人群流动过程中每帧视频的时空特征。
[0030]优选地,所述步骤5中,分割点信息用n
×
1维特征向量表示,特征向量用数字0和数字1进行编码,其中,所述数字0所在行对应的视频帧数不是分割点,所述数字1所在行对应的视频帧数是分割点,n为视频帧数。
[0031]优选地,所述步骤701,采用以下公式将时空特征F1以及空间

分割点特征F2加权融合:
[0032]F=F2×
W+F1[0033]式中,W为参数矩阵。
[0034]本专利技术的另一个技术方案是提供了一种基于流体运动学的解析人群流动特性的
系统,其特征在于,用于实现上述的方法,包括:
[0035]特征采集模块,用于利用深度视觉相机采集人群流动过程中的RGB

D图像,输出人群流动的视频特征,该视频特征包括多帧RGB图像以及多帧深度图像;
[0036]空间特征提取模块,用于根据视频特征构建人群场景图,并利用图网络模型提取所述人群流动场景图的空间特征;
[0037]时空特征提取模块,用于利用时间卷积网络提取连续的空间特征的全局时间信息,确定所述人群流动过程中的时空特征F1;
[0038]分割点特征提取模块,用于在提取时空特征的同时,利用长短期记忆网络模型根据初步确定的人群流动特征确定分割点特征;
[0039]空间

分割点特征池化模块,用于将空间特征以及分割点特征进行空间
...

【技术保护点】

【技术特征摘要】
1.一种基于流体运动学的解析人群流动特性的方法,其特征在于,包括以下步骤:步骤1、采集人群流动的视频特征,包括多帧RGB图像以及多帧深度图像;步骤2、提取步骤1获得的视频特征中对象的相对位置关系,构建对象的场景图,并利用图网络模型提取场景图的空间特征;步骤3、利用时间卷积网络提取连续的空间特征的全局时间信息,确定人群流动的时空特征F1;步骤4、利用描述流体运动学的拉格朗日法或欧拉法基于步骤1采集的视频特征初步识别得到人群流动的运动特征;步骤5、利用长短期记忆网络根据步骤4获得的人群流动的特征进行分割点提取,得到准确的分割点信息,确定分割点特征;步骤6、将步骤2得到的空间特征以及步骤5获得的分割点特征进行空间

分割点特征池化,确定空间

分割点特征F2,具体包括以下步骤:步骤601、根据分割点特征内的分割点对空间特征进行分割,确定多段分割后的空间特征;步骤602、对每段分割后的空间特征进行平均池化,确定空间

分割点特征F2;步骤7、输入步骤3得到的时空特征与步骤6获得的空间

分割点特征,对时间、空间和分割点特征进行加权融合,得到基元人群流动分割序列,具体包括以下步骤:步骤701、将时空特征F1以及空间

分割点特征F2加权融合后的融合特征F对应的融合矩阵按行分块,如下式所示;F=[F1,F2,......,F
n
]
T
其中:F的维度为n
×
m,列数m对应m个基元特征动作;F
n
为第n行融合特征;步骤702、根据融合矩阵确定每一帧视频的基元人群流动类型,其中,对每一帧视频分类就是根据F1,F2,......,F
n
对基元动作进行分类识别,识别方法是第k行融合特征F
k
值最大的列所代表的基元动作即为该帧视频的最后识别结果,k=1,2,3,

,n;步骤703、合并基元人群流动类型相同的相邻帧,确定人群流动视频的基元动作序列。2.如权利要求1所述的一种基于流体运动学的解析人群流动特性的方法,其特征在于,所述步骤2包括以下步骤:步骤201、识别每一帧RGB图像中的对象,确定对象的类型以及2D边界框位置信息,其中,对象为RGB图像中的人群流动;步骤202、根据2D边界框位置信息以及深度图像的深度信息确定对象的3D坐标;步骤203、基于对象的3D坐标利用点云滤波确定对象点云信息以及对象的3D边界框信息;步骤204、根据3D边界框信息判断对象的相对位置关系,生成人群流动场景图;步骤205、利用图网络模型不断更新每帧人群流动场景图的节点、边和全局属性,得到每帧人群流动场景图的空间特征。3.如权利要求1所述的一种基于流体运动学的解析人群流动特性的方法,其特征在于,所述步骤3包括以下步骤:步骤301、构建单阶段的时间卷积网络,该单阶段的时...

【专利技术属性】
技术研发人员:姜锋高长君赵朴戴永亮江峰马骥骏
申请(专利权)人:万达信息股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1