一种音频检测方法及装置制造方法及图纸

技术编号:28298200 阅读:28 留言:0更新日期:2021-04-30 16:24
本申请涉及计算机技术领域,公开了一种音频检测方法及装置,用以解决在检测时长较短或较长的声音事件时,检测准确率低的问题。该方法包括:对音频进行时频转换处理得到声谱图,对声谱图进行特征提取,确定各帧的初始语音特征,并对归属于同一帧的初始语音特征进行聚合处理,得到各帧的聚合语音特征;分别确定各个初始语音特征的第一上下文关联度,和各个聚合语音特征的第二上下文关联度;基于各个第一上下文关联度确定各帧包含的声音事件,以及基于各个第二上下文关联度对各帧包含的声音事件进行分类,并确定各个声音事件的起止时间。基于各个第一上下文关联度和各个第二上下文关联度,检测音频所包含的每类声音事件的起止时间,提高检测准确率。

【技术实现步骤摘要】
一种音频检测方法及装置
本专利技术涉及计算机
,特别涉及一种音频检测方法及装置。
技术介绍
随着人工智能的飞速发展,在物联网、移动导航设备等领域以及视觉信息不明确的情况下,采用深度学习技术检测音频,感知计算音频中包含的声音事件,以及对应的声音事件发生的时间段,为用户提供更好的响应服务。声音事件是时序信号,因此,在检测声音事件时,其上下文的相关性是非常重要的,深度学习模型难以捕获时长较短的声音事件,导致该声音事件被忽略,进而出现删除该声音事件的错误;深度学习模型也难以检测出时长较长的声音事件,会将一个声音事件切割为多个声音事件,进而出现插入错误。有鉴于此,需要设计一种新的音频检测方法,以克服上述缺陷。
技术实现思路
本申请实施例提供一种音频检测方法及装置,用以解决在检测时长较短或较长的声音事件时,检测准确率低的问题。本申请实施例提供的具体技术方案如下:第一方面,本申请实施例提供了一种音频检测方法,包括:对音频进行时频转换处理得到声谱图,所述声谱图上的每一帧对应一个语音信号组,所述一本文档来自技高网...

【技术保护点】
1.一种音频检测方法,其特征在于,包括:/n对音频进行时频转换处理得到声谱图,所述声谱图上的每一帧对应一个语音信号组,所述一个语音信号组中各个语音信号的频率不同;/n对所述声谱图进行特征提取,确定各帧的初始语音特征,并对归属于同一帧的初始语音特征进行聚合处理,确定各帧的聚合语音特征;/n分别确定各个初始语音特征的第一上下文关联度,和各个聚合语音特征的第二上下文关联度,其中,一个第一上下文关联度表征了一个初始语音特征与所述各个初始语音特征之间的相关性,一个第二上下文关联度表征了一个聚合语音特征与所述各个聚合语音特征之间的相关性;/n基于各个第一上下文关联度确定各帧包含的声音事件,以及基于各个第二...

【技术特征摘要】
1.一种音频检测方法,其特征在于,包括:
对音频进行时频转换处理得到声谱图,所述声谱图上的每一帧对应一个语音信号组,所述一个语音信号组中各个语音信号的频率不同;
对所述声谱图进行特征提取,确定各帧的初始语音特征,并对归属于同一帧的初始语音特征进行聚合处理,确定各帧的聚合语音特征;
分别确定各个初始语音特征的第一上下文关联度,和各个聚合语音特征的第二上下文关联度,其中,一个第一上下文关联度表征了一个初始语音特征与所述各个初始语音特征之间的相关性,一个第二上下文关联度表征了一个聚合语音特征与所述各个聚合语音特征之间的相关性;
基于各个第一上下文关联度确定各帧包含的声音事件,以及基于各个第二上下文关联度对各帧包含的声音事件进行分类,并确定各个声音事件的起止时间。


2.如权利要求1所述的方法,其特征在于,对所述声谱图进行特征提取,确定各帧的初始语音特征,包括:
将所述声谱图输入梅尔滤波器中,将各帧所包含的频谱转换为梅尔特征,并将各帧的梅尔特征作为所述各帧的初始语音特征。


3.如权利要求1所述的方法,其特征在于,对归属于同一帧的初始语音特征进行聚合处理,确定各帧的聚合语音特征,包括:
对归属于同一帧中且处于不同频率的初始语音特征进行池化处理,确定所述各帧的聚合语音特征。


4.如权利要求1所述的方法,其特征在于,在确定各帧的初始语音特征和聚合语音特征之后,在确定各个第一上下文关联度和第二上下文关联度之前,进一步包括:
根据设定的单位频率的长度,分别确定所述各帧的初始语音特征的位置编码,以及所述各帧的聚合语音特征的位置编码。


5.如权利要求1~4任一项所述的方法,其特征在于,通过以下方式确定所述各个声音事件的起止时间,包括:
分别将归属于同一声...

【专利技术属性】
技术研发人员:王俊张大威王晓瑞
申请(专利权)人:北京达佳互联信息技术有限公司
类型:发明
国别省市:北京;11

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1