一种场景渲染项数据映射方法、装置、设备及存储介质制造方法及图纸

本公开涉及一种场景渲染项数据映射方法、装置、设备及存储介质，该方法包括：获取渲染项生成器生成的渲染项；根据渲染项处理器得到使用场景渲染器输出的渲染项，分析音频模型元数据，以确定高阶环境音对象的格式，并检查高阶环境音信号是否进行渲染；音频块格式中的所有高阶环境音通道均包含有相同的归一化信息、近场补偿参考距离和屏幕相关子元素值，再计算扬声器解码矩阵并将音频块格式样本应用于高阶环境音信号，输出音频到所有扬声器配置。能够将音频信号渲染到高级音响系统中规定的所有扬声器配置。扬声器配置。扬声器配置。

【技术实现步骤摘要】
一种场景渲染项数据映射方法、装置、设备及存储介质


[0001]本公开涉及音频处理的
，尤其涉及一种场景渲染项数据映射方法、装置、设备及存储介质。

技术介绍

[0002]随着科技的发展，音频变得越来越复杂。由早期的单声道音频演变成立体声，工作重心也注重左右声道的正确处理方式。但环绕声出现后，处理过程开始变得复杂。而环绕5.1扬声器系统则对多个通道进行排序约束，进而环绕6.1扬声器系统、环绕7.1扬声器系统等使音频处理千变万化，把正确的信号传递给合适的扬声器形成相互牵连的效果。因此，随着声音变得更具沉浸感和交互性，音频处理的复杂性也大大增加。
[0003]音频声道(或声道)，是指声音在录制或播放时在不同空间位置采集或回放的相互独立的音频信号。而声道数也就是声音录制时的音源数量或回放时相应的扬声器数量。例如，在环绕5.1扬声器系统中包括6个不同空间位置的音频信号，每个独立的音频信号被用于驱动对应空间位置的扬声器；在环绕7.1扬声器系统中包括8个不同空间位置的音频信号，每个独立的音频信号被用于驱动对应空间位置的扬声器。
[0004]因此，当前扬声器系统实现的效果依赖于扬声器的数量和空间位置。例如，双声道扬声器系统无法实现环绕5.1扬声器系统的效果。

技术实现思路

[0005]本公开的目的在于提出一种场景渲染项数据映射方法、装置、设备及存储介质，能够将音频信号渲染到高级音响系统中规定的所有扬声器配置。
[0006]本公开第一方面提供了一种场景渲染项数据映射方法，包括：
[0007]获取渲染项生成器生成的渲染项；
[0008]根据渲染项处理器得到使用场景渲染器输出的渲染项，分析音频模型元数据，以确定高阶环境音对象的格式，并检查高阶环境音信号是否进行渲染；
[0009]音频块格式中的所有高阶环境音通道均包含有相同的归一化信息、近场补偿参考距离和屏幕相关子元素值，再计算扬声器解码矩阵并将音频块格式样本应用于所述高阶环境音信号，输出音频到所有扬声器配置。
[0010]本公开第二方面提供了一种场景渲染项数据映射装置，包括：
[0011]获取模块，用于获取渲染项生成器生成的渲染项；
[0012]转换模块，用于根据渲染项处理器得到使用场景渲染器输出的渲染项，分析音频模型元数据，以确定高阶环境音对象的格式，并检查高阶环境音信号是否进行渲染；
[0013]输出模块，用于音频块格式中的所有高阶环境音通道均包含有相同的归一化信息、近场补偿参考距离和屏幕相关子元素值，再计算扬声器解码矩阵并将音频块格式样本应用于所述高阶环境音信号，输出音频到所有扬声器配置。
[0014]本公开第三方面提供了一种电子设备，包括：存储器以及一个或多个处理器；
[0015]所述存储器，用于存储一个或多个程序；
[0016]当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如任意实施例提供的场景渲染项数据映射方法。
[0017]本公开第四方面提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器实现任意实施例提供的场景渲染项数据映射方法。
[0018]由上可见，本公开场景渲染项数据映射方法，以便将渲染器基于所提供的内容元数据呈现给扬声器配置之一的内容；能够将音频信号渲染到高级音响系统中规定的所有扬声器配置。
附图说明
[0019]图1为本公开实施例中提供了一种三维声音频模型的渲染器架构示意图；
[0020]图2为本公开实施例中的场景渲染项数据映射方法的流程图；
[0021]图3为本公开实施例中的场景渲染项数据映射装置的结构示意图；
[0022]图4为本公开实施例中的一种电子设备的结构示意图；
[0023]图5为本公开实施例中的高阶环境音渲染流程图。
具体实施方式
[0024]下面结合附图和实施例对本专利技术作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本专利技术，而非对本专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本专利技术相关的部分而非全部结构。
[0025]实施例
[0026]如图1所示，三维声音频模型由一组元素组成，每个元素用于描述音频的一个阶段，三维声音频模型包括内容制作部分和格式制作部分。
[0027]其中，所述内容部分包括：音频节目元素、音频内容元素、音频对象元素和音轨唯一标识元素；所述格式制作部分包括：音频包格式元素、音频通道格式元素、音频流格式元素和音频轨道格式元素；
[0028]所述音频节目元素引用至少一个所述音频内容元素；所述音频内容元素引用至少一个音频对象元素；所述音频对象元素引用对应的所述音频包格式元素和对应的所述音轨唯一标识元素；所述音轨唯一标识元素引用对应的所述音频轨道格式元素和对应的所述音频包格式元素；
[0029]所述音频包格式元素引用至少一个所述音频通道格式元素；所述音频流格式元素引用对应的所述音频通道格式元素和对应的所述音频包格式元素；所述音频轨道格式元素和对应的所述音频流格式元素相互引用。元素间的引用关系在图1中以箭头表示。
[0030]音频节目可以包括但不限于叙述、声音效果和背景音乐，所述音频节目元素可以用于描述节目，所述节目包括至少一个内容，所述音频内容元素用于描述所述音频节目元素中对应的一个内容。音频节目元素可以引用一个或多个音频内容元素，音频内容元素组合在一起以构建为完整的音频节目元素。
[0031]所述音频内容元素描述音频节目的一个组成部分(例如背景音乐)的内容，并引用一个或多个音频对象元素将内容与其格式联系起来。
[0032]所述音频对象元素用于建立内容、格式和有价值的信息，并确定实际音轨的音轨唯一标识。
[0033]格式制作部分包括：音频包格式元素、音频通道格式元素、音频流格式元素、音频轨道格式元素。
[0034]所述音频包格式元素，可以用于描述所述音频对象元素和原始音频数据依据通道分组打包时采用的格式。
[0035]所述音频通道格式元素可以用于表示单个音频采样序列和对其执行的预设操作，例如，在场景中渲染对象的移动。所述音频通道格式元素可以包含至少一个音频块格式元素。音频块格式元素可以视为音频通道格式元素的子元素，所以，音频通道格式元素和音频块格式元素之间为一种包含关系。
[0036]音频流，是渲染通道、对象、高阶环境音组件或包所需的音轨的组合。所述音频流格式元素用于建立音频轨道格式元素集和音频通道格式元素集之间的关系，或音频轨道格式集和音频包格式之间的关系。
[0037]所述音频轨道格式元素对应于单个音轨中的一组样本或数据，用于描述原始音频数据的格式，及渲染器的解码信号，还用于识别成功解码音轨数据所需的音轨组合。
[0038]通过三维声音频模型对原始音频数据进行制作后生成包含元数据的合成音频数据。
[0039]所述元数据(Metadata)是描述数据特性的信本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种场景渲染项数据映射方法，其特征在于，包括：获取渲染项生成器生成的渲染项；根据渲染项处理器得到使用场景渲染器输出的渲染项，分析音频模型元数据，以确定高阶环境音对象的格式，并检查高阶环境音信号是否进行渲染；音频块格式中的所有高阶环境音通道均包含有相同的归一化信息、近场补偿参考距离和屏幕相关子元素值，再计算扬声器解码矩阵并将音频块格式样本应用于所述高阶环境音信号，输出音频到所有扬声器配置。2.根据权利要求1所述的方法，其特征在于，所述使用场景渲染器输出的渲染项，包括支持场景的渲染项格式、不支持场景的子元素和高阶环境音信号的渲染。3.根据权利要求2所述的方法，其特征在于，所述支持场景的渲染项格式，包括场景等级和信号归一化，所述场景等级表示场景信号渲染到多个阶数，在音频模型中，场景通道通过相应的场景类型子元素以场景组件阶数和场景组件度数分别表示；所述信号归一化，通过归一化高阶环境音类型子元素表示高阶环境音信号，音频模型中，高阶环境音归一化分别单独指定为每个高阶环境音信号。4.根据权利要求3所述的方法，其特征在于，所述场景类型包括：全3D高阶环境音场景、2D高阶环境音场景和混合等级的高阶环境音场景。5.根据权利要求2所述的方法，其特征在于，所述不支持场景的子元素，包括扬声器的参考距离、屏幕相关子元素值和场景组件的方程式。6.根据权利要求1所述的方法，其特征在于，所述解码矩阵所使用的高阶环境音通道分配是在音频块格式的场景...

【专利技术属性】
技术研发人员：吴健，
申请(专利权)人：赛因芯微北京电子科技有限公司，
类型：发明
国别省市：