音频信号的视觉展示处理方法、装置、设备和介质制造方法及图纸

本申请提供了一种音频信号的视觉展示处理方法、装置、设备和介质，涉及游戏技术领域，该方法包括：获取包括多个频域信息的原始音频信号，根据预设频域策略，对该原始音频信号进行滤波处理，得到目标音频信号的目标频域信息；其中，目标音频信号为对原始音频信号进行滤波处理后得到的音频信号；将目标频域信息的参数控制信息关联虚拟环境参数，以进行目标音频信号的视觉效果展示。本申请降低了全频段频谱分析的计算消耗，同时提升了全频段音频的计算效率。算效率。算效率。

【技术实现步骤摘要】
音频信号的视觉展示处理方法、装置、设备和介质


[0001]本申请涉及游戏
，尤其是涉及一种音频信号的视觉展示处理方法、装置、设备和介质。

技术介绍

[0002]目前，为实现游戏中音频和视觉效果的联动，首先需要对音频信号进行频域分析。相关技术中，可以通过对音频信息进行频域分析，从而进行音频视觉的展示处理。目前，在进行频域分析时，通常需要人工手动标记整条音频资源的关键时间点与关键(自定义)参数的值，储存该信息与每条音频资源对应，当游戏中调用播放音频时同时开始计时并按找标记触发视效参数的变化。然而，针对音频众多且类别较多的情况，这种方式针对音频信号的全频段频谱分析时，存在计算消耗大且计算效率较低的问题。

技术实现思路

[0003]本申请的目的在于提供一种音频信号的视觉展示处理方法、装置、设备和介质，降低了全频段频谱分析的计算消耗，同时提升了全频段音频的计算效率。
[0004]第一方面，本专利技术提供一种音频信号的视觉展示处理方法，方法包括：
[0005]获取原始音频信号，所述原始音频信号包括多个频域信息；
[0006]根据预设频域策略，对所述原始音频信号进行滤波处理，得到目标音频信号的目标频域信息；其中，所述目标音频信号为对原始音频信号进行滤波处理后得到的音频信号；
[0007]将所述目标频域信息的参数控制信息关联虚拟环境参数，以进行所述目标音频信号的视觉效果展示。
[0008]第二方面，本专利技术提供一种音频信号的视觉展示处理装置，装置包括：
[0009]音频获取模块，用于获取原始音频信号，所述原始音频信号包括多个频域信息；
[0010]滤波处理模块，用于根据预设频域策略，对所述原始音频信号进行滤波处理，得到目标音频信号的目标频域信息；其中，所述目标音频信号为对原始音频信号进行滤波处理后得到的音频信号；
[0011]参数关联模块，用于将所述目标频域信息的参数控制信息关联虚拟环境参数，以进行所述目标音频信号的视觉效果展示。
[0012]第三方面，本专利技术提供一种电子设备，包括处理器和存储器，存储器存储有能够被处理器执行的计算机可执行指令，处理器执行计算机可执行指令以实现前述实施方式任一项的音频信号的视觉展示处理方法。
[0013]第四方面，本专利技术提供一种计算机可读存储介质，计算机可读存储介质存储有计算机可执行指令，计算机可执行指令在被处理器调用和执行时，计算机可执行指令促使处理器实现前述实施方式任一项的音频信号的视觉展示处理方法。
[0014]本申请提供的音频信号的视觉展示处理方法、装置、设备和介质，该音频信号的视觉展示处理方法，通过预设频域策略预先对原始音频信号进行滤波处理，可以提取到目标
频域信息，进一步在进行音频效果展示时，只通过将目标频域信息的参数控制信息关联虚拟环境参数进行关联，即可实现音频与视觉效果的联动，从而降低了全频段频谱分析的计算消耗，同时提升了全频段音频的计算效率。
附图说明
[0015]为了更清楚地说明本申请具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0016]图1为本申请实施例提供的一种音频信号的视觉展示处理方法的流程图；
[0017]图2为本申请实施例提供的一种在音频总线上添加PdBpFreq效果器示例的示意图；
[0018]图3为本申请实施例提供的一种Wwise效果器插件进行音频处理的示意图；
[0019]图4为本申请实施例提供的一种Wwise源插件的示意图；
[0020]图5为本申请实施例提供的一种音乐速度参数生成示意图；
[0021]图6为本申请实施例提供的一种音阶参数生成示意图；
[0022]图7为本申请实施例提供的一种声部开关参数控制示意图；
[0023]图8为本申请实施例提供的一种音频和视觉效果联动的效果图；
[0024]图9为本申请实施例提供的另一种音频和视觉效果联动的效果图；
[0025]图10为本申请实施例提供的一种游戏角色与触发体触发示意图；
[0026]图11为本申请实施例提供的一种音频信号的视觉展示处理装置的结构图；
[0027]图12为本申请实施例提供的一种电子设备的结构图。
具体实施方式
[0028]为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
[0029]因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0030]应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
[0031]首先，对本申请涉及对术语进行介绍：
[0032]FFT：Fast Fourier Transform快速傅里叶变换。
[0033]Wwise：用于互动媒体和电子游戏的音频中间件，由音频创作工具和声音引擎组成。
[0034]Wwise Sound Object：Wwise声音对象，是声音源文件或源插件的容器。
[0035]音频可视化：借助效果变化实时反映音频信号的某些特征。
[0036]Metasound：Epic公司Unreal Engine 5自带的模块化音频信号处理插件。
[0037]RTPC：Wwise GameSync(游戏同步体)的一种，用来将游戏参数映射到音频引擎内部。
[0038]MIDI：Musical Instrument Digital Interface，乐器数字接口，用音符数字控制信号传输，记录音乐旋律内容。
[0039]Bus总线：Wwise工具中组织音频信号流的方式，使用不同bus区分需要进行不同混音或效果处理的信号流。
[0040]Wwise Meter：Wwise自带插件，读取并输出插件所在总线上经过的音频信号振幅。
[0041]PureData：为创造交互的计算机音乐和多媒体作品而开发的模块化音频信号处理语言。
[0042]RMS：Root Mean Square，均方根信号振幅，计算一段时间内的平均信号响度。
[0043]BPM：Beat Per Minute音乐速度单位，指每分钟音乐内包含的小节数目。
[0044]Scale：音阶，指组成音乐旋本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种音频信号的视觉展示处理方法，其特征在于，所述方法包括：获取原始音频信号，所述原始音频信号包括多个频域信息；根据预设频域策略，对所述原始音频信号进行滤波处理，得到目标音频信号的目标频域信息；其中，所述目标音频信号为对原始音频信号进行滤波处理后得到的音频信号；将所述目标频域信息的参数控制信息关联虚拟环境参数，以进行所述目标音频信号的视觉效果展示。2.根据权利要求1所述的音频信号的视觉展示处理方法，其特征在于，所述对所述原始音频信号进行滤波处理，得到目标音频信号的目标频域信息，还包括：对所述目标频域信息进行信号幅值处理，得到所述目标频域信息对应的振幅信息。3.根据权利要求1所述的音频信号与视觉效果联动的方法，其特征在于，所述根据预设频域策略，对所述原始音频信号进行滤波处理，还包括：基于听觉导向的刻度参数确定目标频域的取值范围；根据所述目标频域的取值范围，对所述原始音频信号进行滤波处理。4.根据权利要求1所述的音频信号与视觉效果联动的方法，其特征在于，所述根据预设频域策略，对所述原始音频信号进行滤波处理，还包括：根据所述原始音频信号对应的音乐风格类型，确定与所述音乐风格类型相匹配的目标频域的取值范围；根据所述目标频域的取值范围，对所述原始音频信号进行滤波处理。5.根据权利要求1所述的音频信号的视觉展示处理方法，其特征在于，所述根据预设频域策略，对所述原始音频信号进行滤波处理，还包括：获取所述原始音频信号的历史播放信息；根据所述历史播放信息，确定所述原始音频信号对应的频域记录，其中，所述频域记录包括预设时域内的频域信息和振幅信息；根据所述频域记录，确定目标频域的取值范围；根据所述目标频域的取值范围，对所述原始音频信号进行滤波处理。6.根据权利要求1所述的音频信号与视觉效果联动的方法，其特征在于，所述将所述目标频域信息的参数控制信息关联虚拟环境参数，以进行所述目标音频信号的视觉效果展示，还包括：基于所述参数控制信息确定音乐生成影响参数，其中，所述音乐生成影响参数的变化与所述虚拟环境参数的变化成对应关系；将所述音乐生成影响参数和所述虚拟环境参数进行关联，以进行所述目标音频信号的视觉效果展示。7.根据权利要求6所述的音频信号的视觉展示处理方法，其特征在于，所述音乐生成影响参数包括音乐速度参数；基于所述参数控制信息确定音乐生成影响参数，包括：基于第一参数控制信息确定所述音乐速度参数，并基于所述音乐速度参数确定音频触发周期。8.根据权利要求7所述的音频信号的视觉展示处理方法，其特征在于，所述方法应用于终端设备，所述终端设备提供一图形用户界面，所述图形用户界面显示的内容至少部分包含游戏场景，所述游戏场景包括通过终端设备控制操作的虚拟角色，所述方法还包括：
响应针对于虚拟角色在游戏场景中的位置变化，对应调节所述音乐速度参数。9.根据权利要求6所述的音频信号的视...

【专利技术属性】
技术研发人员：马士杰，李达，
申请(专利权)人：网易杭州网络有限公司，
类型：发明
国别省市：