群体检测方法、装置、存储介质和电子设备制造方法及图纸

技术编号:42368265 阅读:17 留言:0更新日期:2024-08-16 14:49
本申请公开了群体检测方法、装置、存储介质和电子设备,包括:确定待测图像中各个目标的个体特征;利用第一语言模型对外部输入的交互提示词进行特征提取,得到交互提示词特征;利用预先训练好的交互特征编码模型,基于所述交互提示词特征,对所述个体特征进行编码处理,得到用于指示所述各个目标中任意两个目标之间交互关系的交互特征;基于所述交互特征进行群体划分和识别。应用本申请,能够有效提高群体检测的准确性。

【技术实现步骤摘要】

本申请涉及神经网络技术,特别涉及一种群体检测方法、装置、存储介质和电子设备


技术介绍

1、在安防监控场景下,异常事件的识别往往依赖于群体检测的输入信息,首先将有同一目的或进行同一事件的目标群体(例如人群)作为群体检出,再利用行为识别方法进行异常检测。目前常见的群体检测方法基于距离等手工特征的聚类方法,受限于场景,调参复杂且准确率较低。近来一些技术聚焦于目标之间的交互关系,但是交互关系的学习没有正确的引导,模糊的关系会引入许多无关目标,使得群体检测失准。


技术实现思路

1、本申请提供一种群体检测方法、装置、存储介质和电子设备,能够有效提高群体检测的准确性。

2、为实现上述目的,本申请采用如下技术方案:

3、一种群体检测方法,包括:

4、确定待测图像中各个目标的个体特征;

5、利用第一语言模型对外部输入的交互提示词进行特征提取,得到交互提示词特征;

6、利用预先训练好的交互特征编码模型,基于所述交互提示词特征,对所述个体特征进行编码处理,得到用于指示所本文档来自技高网...

【技术保护点】

1.一种群体检测方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述交互特征编码模型为Transformer模型;

3.根据权利要求2所述的方法,其特征在于,所述基于所述交互特征进行群体划分和识别,包括:

4.根据权利要求1、2或3所述的方法,其特征在于,在得到交互特征后、基于所述交互特征进行群体划分和识别前,该方法进一步包括:

5.根据权利要求4所述的方法,其特征在于,该方法进一步包括:接收外部输入的个体提示词,并利用第二语言模型对所述个体提示词进行特征提取,得到个体提示词特征;

6.根据权利要求5所述的方...

【技术特征摘要】

1.一种群体检测方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述交互特征编码模型为transformer模型;

3.根据权利要求2所述的方法,其特征在于,所述基于所述交互特征进行群体划分和识别,包括:

4.根据权利要求1、2或3所述的方法,其特征在于,在得到交互特征后、基于所述交互特征进行群体划分和识别前,该方法进一步包括:

5.根据权利要求4所述的方法,其特征在于,该方法进一步包括:接收外部输入的个体提示词,并利用第二语言模型对所述个体提示词进行特征提取,得到个体提示词特征;

6.根据权利要求5所述的方法,其特征在于,该方法进一步包括:

7.根据权利要求4所述的方法,其特征在于,所述图网络模型为因子图模型;

8.根据权利要求7所述的方法,其特征在于,所述基于所述个体特征和所述交互特征确定所述图网络模型中各节点的初始特征,包括:

9.根据权利要求7所述的方法,其特征在于,所述对所述图网络模型中各节点的特征进行迭代更新时,

10.根据权利要求7所述的方法,其特征在于,所述更新后的交互特征为所述交互节点更新后的输出节点特征;

11.根据权利要求4所述的方法,其特征在于,该方法进一步包括:

12.根据权利要求11所述的方法,其特征在于,所述训练过程的损失函数是基于交互...

【专利技术属性】
技术研发人员:孔子豪侯腾飞童超
申请(专利权)人:杭州海康威视数字技术股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1