面向不当行为的跨媒体感知方法、装置、设备及存储介质制造方法及图纸

技术编号:41150809 阅读:19 留言:0更新日期:2024-04-30 18:17
本发明专利技术公开了一种面向不当行为的跨媒体感知方法、装置、设备及存储介质。本发明专利技术通过毫米波雷达人员动态点位跟踪算法计算监视场景中人员的实时坐标位置,以及人员之间距离关系。采用声音定位算法以及雷达探测的人员位置坐标确定最高发声人员位置。针对目标位置人员声音进行复原,并采用基于能量切分算法进行分段,对每个片断识别是否为人的声音。对人声则提取声纹特征进行聚类,并采用情感识别模型识别每个人员声音片断的情绪,结合毫米波雷达探测人员位置关系综合判断监测场景中是否出现不当行为。本发明专利技术通过雷达和声音解决了在特殊场所下的人员隐私保护问题,提高了监视场所覆盖范围以及不当行为的检测能力。

【技术实现步骤摘要】

本专利技术涉及安全检测,具体涉及一种面向不当行为的跨媒体感知方法、装置、设备及存储介质


技术介绍

1、当前大部分场所安装了一些监控摄像机辅助保安进行监管,这种安全监管方式能解决部分安全问题,如翻围墙等行为,但是对一些复杂行为的安全问题无法监管。

2、传统的监控设备存在拍摄死角,自动识别不当行为困难,部署成本高等问题,而且不适合安装于一些隐私性较高的地方。因此,需要采用检测覆盖无死角、无隐私问题以及部署成本低的方案,结合传统视频监控系统完成安全行为监控,预防并降低不当行为的发生。


技术实现思路

1、本专利技术针对现有的技术的不足,提供了一种面向不当行为的跨媒体感知方法、装置、设备及存储介质。

2、本专利技术的第一方面,提供了一种面向不当行为的跨媒体感知方法,具体是:

3、通过毫米波雷达动态点位跟踪算法计算监视场景中人员的实时坐标位置;通过人员之间距离关系判断是否存在聚集;

4、采用声音定位算法以及雷达探测的人员位置坐标确定最高发声人员位置;基于声音传播能量损失方本文档来自技高网...

【技术保护点】

1.一种面向不当行为的跨媒体感知方法,其特征在于包括如下步骤:

2.根据权利要求1所述的一种面向不当行为的跨媒体感知方法,其特征在于:所述毫米波雷达感知器对所检测到的人员距离和方位,采用二维坐标点进行描述;

3.根据权利要求1所述的一种面向不当行为的跨媒体感知方法,其特征在于:根据最高声音分贝值,定位声源方向,结合人员位置坐标,确定发声最高人员的位置。

4.根据权利要求1所述的一种面向不当行为的跨媒体感知方法,其特征在于:采用音频转换图像算法将声音数据转换为频谱包络线图和梅尔频率倒谱系数图,提取融合特征,输入情感识别模型,识别声音数据中情绪信息。...

【技术特征摘要】

1.一种面向不当行为的跨媒体感知方法,其特征在于包括如下步骤:

2.根据权利要求1所述的一种面向不当行为的跨媒体感知方法,其特征在于:所述毫米波雷达感知器对所检测到的人员距离和方位,采用二维坐标点进行描述;

3.根据权利要求1所述的一种面向不当行为的跨媒体感知方法,其特征在于:根据最高声音分贝值,定位声源方向,结合人员位置坐标,确定发声最高人员的位置。

4.根据权利要求1所述的一种面向不当行为的跨媒体感知方法,其特征在于:采用音频转换图像算法将声音数据转换为频谱包络线图和梅尔频率倒谱系数图,提取融合特征,输入情感识别模型,识别声音数据中情绪信息。

5.根据权利要求4所述的一种面向不当行为的跨媒体感知方法,其特征在于:所述的频谱包络线图采用改进的频谱包络线方式获得,该方式是对声音异常部分绘制包络线,对非异常部分采用背景噪音均值替换,并将曲线图减去平均值,得到改进...

【专利技术属性】
技术研发人员:刘燕叶良忠叶利华
申请(专利权)人:杭州海宴科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1