本技术涉及能够获得更大的真实感的信号处理装置和方法以及程序。该信号处理装置设置有：获取单元，用于获取元数据以及与音频对象有关的音频数据，该元数据包括指示音频对象的位置的位置信息和指示音频对象的方向的方向信息；以及信号生成单元，用于基于指示收听位置的收听位置信息、指示收听位置处的收听者的方向的收听者方向信息、位置信息、方向信息和音频数据生成用于再现收听位置处的音频对象的声音的再现信号。本技术可以应用于传输/再现系统。现系统。现系统。
【技术实现步骤摘要】
【国外来华专利技术】信号处理装置和方法以及程序
[0001]本技术涉及信号处理装置、信号处理方法和程序，并且更具体地涉及能够提供更高的真实感的信号处理装置、信号处理方法和程序。
技术介绍
[0002]例如，为了从诸如鸟瞰图或步行穿越的自由视点再现声场，以尽可能高的信噪比(SNR)记录诸如人的声音、诸如运动中的踢球声音的选手的运动声音或音乐中的乐器声音的目标声音非常重要。
[0003]此外，同时，对于目标声音的每个声源，必须再现具有精确定位的声音，并且使声像定位等跟随视点或声源的移动。
[0004]顺便提及，期望能够在自由视点或固定视点内容中提供更高的真实感的技术，并且已经提出了大量这样的技术。
[0005]例如，作为关于从自由视点再现声场的技术，提出了用于在用户可以自由指定收听位置的情况下，根据从改变的收听位置到音频对象的距离执行增益校正和频率特性校正的技术(例如，参见专利文献1)。
[0006]引用列表
[0007]专利文件
[0008]专利文献1：WO 2015/107926 A。
技术实现思路
[0009]本专利技术要解决的问题
[0010]然而，上述技术在某些情况下不能提供足够高的真实感。
[0011]例如，在现实世界中，声源不是点声源，并且声波从具有尺寸的发声体以包括由发声体引起的反射和衍射的特定方向特性传播。
[0012]然而，目前已经进行了大量尝试记录目标空间中的声场，并且即使在针对每个声源(即，针对每个音频对象)执行记录的情况下，在某些情况下也不能获得足够高的真实感，这是因为在再现侧不考虑每个音频对象的方向。
[0013]本技术是鉴于这种情况而做出的，并且本技术的目的是提供更高的真实感。
[0014]问题的解决方案
[0015]根据本技术的一个方面的信号处理装置包括：获取单元，其获取元数据和音频对象的音频数据，该元数据包括指示音频对象的位置的位置信息和指示音频对象的方向的方向信息；以及信号生成单元，其基于指示收听位置的收听位置信息、指示收听位置处的收听者的方向的收听者方向信息、位置信息、方向信息和音频数据生成用于再现收听位置处的音频对象的声音的再现信号。
[0016]根据本技术的一个方面的信号处理方法或程序包括：获取元数据和音频对象的音频数据的步骤，该元数据包括指示音频对象的位置的位置信息和指示音频对象的方向的方
向信息；以及基于指示收听位置的收听位置信息、指示收听位置处的收听者的方向的收听者方向信息、位置信息、方向信息和音频数据生成用于再现收听位置处的音频对象的声音的再现信号的步骤。
[0017]在本技术的一个方面，获取元数据和音频对象的音频数据，该元数据包括指示音频对象的位置的位置信息和指示音频对象的方向的方向信息；以及基于指示收听位置的收听位置信息、指示收听位置处的收听者的方向的收听者方向信息、位置信息、方向信息和音频数据生成用于再现收听位置处的音频对象的声音的再现信号。
附图说明
[0018]图1是包括在内容中的对象的方向的说明图。
[0019]图2是对象的方向特性的说明图。
[0020]图3示出了元数据的语法示例。
[0021]图4示出了方向特性数据的语法示例。
[0022]图5示出了信号处理装置的配置示例。
[0023]图6是相对方向信息的说明图。
[0024]图7是相对方向信息的说明图。
[0025]图8是相对方向信息的说明图。
[0026]图9是相对方向信息的说明图。
[0027]图10是示出内容再现处理的流程图。
[0028]图11示出了计算机的配置示例。
具体实施方式
[0029]在下文中，将参考附图描述应用本技术的实施例。
[0030]<第一实施例>
[0031]<本技术>
[0032]本技术涉及一种传输再现系统，该系统能够通过适当地发送指示用作声源的音频对象的方向特性的方向特性数据并且基于方向特性数据在内容再现侧的内容再现中反映音频对象的方向特性来提供更高的真实感。
[0033]用于再现用作声源的音频对象(在下文中，也被简称为对象)的声音的内容例如是固定视点内容或自由视点内容。
[0034]在固定视点内容中，收听者的视点位置，即收听位置(收听点)被设置为预定的固定位置，而在自由视点内容中，作为收听者的用户可以实时自由指定收听位置(视点位置)。
[0035]在现实世界中，每个声源都有独特的方向特性。即，即使是从同一声源发出的声音，也根据从声源观察的方向而具有不同的声音传递特性。
[0036]因此，在内容中用作声源的对象或收听位置处的收听者自由移动或旋转的情况下，收听者收听对象的声音的方式也根据对象的方向特性而变化。
[0037]在内容的再现中，通常执行根据从收听位置到对象的距离再现距离衰减的处理。同时，本技术不仅考虑距离衰减而且还考虑对象的方向特性来再现内容，从而提供更高的真实感。
[0038]即，在本技术中收听者或对象自由移动或旋转的情况下，不仅考虑收听者与对象之间的距离，而且例如还考虑收听者与对象之间的相对方向，将根据距离衰减和方向特性的传递特性动态添加到每个对象的内容的声音中。
[0039]例如，通过根据距离衰减和方向特性的增益校正、基于考虑距离衰减和方向特性的波前振幅和相位传播特性的波场合成处理等来添加传递特性。
[0040]本技术使用方向特性数据以添加根据方向特性的传递特性。在与每个目标声源(即对象的每个类型)相对应地准备方向特性数据的情况下，可以提供更高的真实感。
[0041]例如，可以通过预先使用麦克风阵列等记录声音或通过执行模拟并计算从对象发出的声音通过空间传播时每个方向和每个距离的传递特性来获得每种类型的对象的方向特性数据。
[0042]每种类型的对象的方向特性数据与内容的音频数据一起或分开地被预先发送到再现侧的装置。
[0043]然后，当再现内容时，再现侧的装置使用方向特性数据来将根据距对象的距离和方向特性的传递特性添加到对象的音频数据，即添加到用于再现内容的声音的再现信号。
[0044]这使得可以再现具有更高的真实感的内容。
[0045]在本技术中，针对每种类型的声源(对象)，添加根据收听者与对象之间的相对位置关系(即，根据收听者与对象之间的相对距离或方向)的传递特性。因此，即使在对象和收听位置等距的情况下，收听者听到对象的声音的方式也根据收听者从哪个方向听到声音而变化。这使得可以再现更真实的声场。
[0046]本技术适用的内容的示例包括以下内容：
[0047]‑
再现执行团队运动的场地的内容；
[0048]‑
再现存在多个表演者的空间(诸如音乐剧、歌剧或戏剧)的内容；
[0049]‑
在现场表演场地或主题公园中再现任意空间的内容；<本文档来自技高网...
【技术保护点】
【技术特征摘要】
【国外来华专利技术】1.一种信号处理装置，包括：获取单元，获取元数据和音频对象的音频数据，所述元数据包括指示所述音频对象的位置的位置信息和指示所述音频对象的方向的方向信息；以及信号生成单元，基于指示收听位置的收听位置信息、指示所述收听位置处的收听者的方向的收听者方向信息、所述位置信息、所述方向信息和所述音频数据生成用于再现所述收听位置处的所述音频对象的声音的再现信号。2.根据权利要求1所述的信号处理装置，其中，所述获取单元以预定时间间隔获取所述元数据。3.根据权利要求1所述的信号处理装置，其中，所述信号生成单元基于指示所述音频对象的方向特性的方向特性数据、所述收听位置信息、所述收听者方向信息、所述位置信息、所述方向信息和所述音频数据生成所述再现信号。4.根据权利要求3所述的信号处理装置，其中，所述信号生成单元基于针对所述音频对象的类型确定的所述方向特性数据生成所述再现信号。5.根据权利要求3所述的信号处理装置，其中，所述方向信息包括指示所述音频对象的方向的方位角。6.根据权利要求3所述的信号处理装置，其中，所述方向信息包括指示所述音频对象的方向的方位角和仰角。7.根据权利要求3所述的信号处理装置，其中，所述方向信息包括指示所述音频对象的方向的方位角和仰角以及指示所述音频对象的旋转的倾斜角。8.根据权利要求3所述的信号处理装置，其中，所述收听位置信息指示预先确定的且固定的所述收听位置，并且所述收听者方向信息指示预先确定的且固定的所述收听者的方向。9.根据权利要求8所述的信号处理装置，其中，所述位置信息包括指示从所述收听位置观察的所述音频对象的方向的方位角和仰角以及指示从所述收听位置到所述音频对象的距离的半径。10.根据权利要求3所述的信号处理装置，其中，所述收听位置信息指示任意确定的所述收听位置，并且所述收听者方向信息指示任意确定的所述收听者的方向。11.根据权利要求10所述的信号处理装置，其中，所述位置信息是指示所述音频对象的位置的正...
【专利技术属性】
技术研发人员：难波隆一，阿久根诚，青山圭一，及川芳明，
申请(专利权)人：索尼集团公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。