System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 低延迟、低功率的多通道音频处理制造技术_技高网
当前位置: 首页 > 专利查询>斯纳普公司专利>正文

低延迟、低功率的多通道音频处理制造技术

技术编号:40123127 阅读:8 留言:0更新日期:2024-01-23 20:58
一种电子眼镜设备,包括显示屏和扬声器系统,适于在用户观看的场景中呈现增强现实对象和相关联的声音。处理器接收分别与一个或多个增强现实对象相关联的一个或多个音轨,将音轨编码为聚合音轨,该聚合音轨包括音轨、唯一地标识每个相应音轨的每个音轨的报头以及标识聚合音轨中的音轨数量的聚合报头。处理器将聚合音轨传送到音频处理器,音频处理器使用每个音轨的报头和聚合报头来将音轨从聚合音轨中分离。音频处理器并行地独立地处理音轨,并将音轨提供给扬声器系统以用于与增强现实对象一起呈现。

【技术实现步骤摘要】
【国外来华专利技术】

本公开中阐述的示例涉及音频信号处理领域。更具体地,但不限于此,本公开描述了一种低延迟、低功率多通道音频处理以用于有效地处理与虚拟对象相对应的音频信号的系统和方法。


技术介绍

1、头部相关传递函数(hrtf)是一种表征用户的耳朵如何接收来自空间中的点的声音的响应。当声音撞击用户时,头部、耳朵、耳道的大小和形状、头部的密度以及鼻腔和口腔的大小和形状变换声音,并通过提高某些频率和衰减其他频率来影响声音的感知。

2、一对hrtf(每只耳朵一个)能够被用来合成似乎来自空间中特定点的双耳声音。每个传递函数描述来自特定点的声音将如何到达相应的耳朵(例如,在听道的外端)。由于延迟导致的空间音频数据的处理延迟可能对再现声音的质量产生不利影响。


技术实现思路

【技术保护点】

1.一种被配置为向用户呈现增强现实对象的电子眼镜设备,包括:

2.根据权利要求1所述的电子眼镜设备,其中,所述处理器进一步接收与所述一个或多个音轨中的至少一个音轨相关的空间参数元数据,将所述空间参数元数据聚合为聚合空间参数元数据,并且在第二数据传输信道中相对于所述聚合音轨异步地将所述聚合空间参数元数据传送到所述音频处理器。

3.根据权利要求2所述的电子眼镜设备,其中,所述音频处理器包括头部相关传递函数处理模块,所述头部相关传递函数处理模块从聚合空间参数数据中分离与各个音轨相对应的所述空间参数元数据,并处理所述一个或多个音轨以及与所述一个或多个音轨相关联的空间参数元数据以产生左音频信号和右音频信号,其中所述左音频信号与所述右音频信号呈现与所述增强现实对象在场景中的空间定位相关联的声音。

4.根据权利要求1所述的电子眼镜设备,其中,所述处理器使用单个远程过程调用将所述聚合音轨传送到所述音频处理器。

5.根据权利要求1所述的电子眼镜设备,其中,用于相应音轨的所述报头还包括所述报头的版本的指示以及用于所述相应音轨的帧中的样本数量。

<p>6.根据权利要求1所述的电子眼镜设备,其中,用于相应音轨的所述报头还包括用于所述相应音轨的头部相关传递函数参数或每音轨调谐参数中的至少一个。

7.根据权利要求1所述的电子眼镜设备,其中,所述一个或多个音轨中的至少一个音轨是压缩的,并且每个相应的压缩音轨的报头还包括已经被应用于一个或多个压缩音轨的压缩类型的指示。

8.根据权利要求1所述的电子眼镜设备,其中,所述处理器以采样间隔或在调度传递时间处接收分别与一个或多个增强现实对象相关联的一个或多个音轨,并且所述一个或多个音轨的报头还包括采样间隔数据或调度数据。

9.一种用于在场景中呈现与呈现给用户的增强现实对象相关联的声音的方法,包括:

10.根据权利要求9所述的方法,还包括所述处理器接收与所述一个或多个音轨中的至少一个音轨相关的空间参数元数据,将所述空间参数元数据聚合为聚合空间参数元数据,以及在第二数据传输通道中相对于所述聚合音轨异步地将所述聚合空间参数元数据传送到所述音频处理器。

11.根据权利要求10所述的方法,其中,所述音频处理器包括头部相关传递函数处理模块,还包括所述头部相关传递函数模块从聚合空间参数数据中分离对应于各个音轨的所述空间参数元数据,并处理所述一个或多个音轨和与所述一个或多个音轨相关联的空间参数元数据,以产生所述左音频信号和所述右音频信号,其中所述左音频信号和所述右音频信号呈现与所述增强现实对象在所述场景中的空间定位相关联的声音。

12.根据权利要求9所述的方法,还包括所述处理器使用单个远程过程调用将所述聚合音轨传送到所述音频处理器。

13.根据权利要求9所述的方法,还包括在所述相应音轨的报头中为所述相应音频提供所述报头的版本和帧中的样本数目的指示。

14.根据权利要求9所述的方法,还包括在所述相应音轨的报头中为所述相应音频提供与头部相关传递函数参数或每音轨调谐参数中的至少一个。

15.根据权利要求9所述的方法,其中,所述一个或多个音轨中的至少一个音轨是压缩的,还包括在至少一个压缩音轨的报头中提供已被应用于所述至少一个压缩音轨的压缩类型的指示。

16.根据权利要求9所述的方法,还包括所述处理器以采样间隔或在调度传递时间处接收分别与一个或多个增强现实对象相关联的一个或多个音轨,并在所述一个或多个音轨的报头中提供采样间隔数据或调度数据。

17.一种非暂态计算机可读介质,包括用于在场景中呈现与呈现给用户的增强现实对象相关联的声音的指令,其中,当所述指令由处理器和音频处理器执行时,将所述处理器和所述音频处理器配置为:

18.根据权利要求17所述的介质,还包括如下指令,其在由所述处理器执行时,使所述处理器接收与所述一个或多个音轨中的至少一个音轨相关的空间参数元数据,将所述空间参数元数据聚合成聚合空间参数元数据,以及在第二数据传输通道中相对于所述聚合音轨异步地将所述聚合空间参数元数据传送到所述音频处理器。

19.根据权利要求18所述的介质,还包括如下指令,其在由所述音频处理器执行时,使得所述音频处理器的头部相关传递函数处理模块将与相应音轨相对应的空间参数元数据从聚合空间参数数据中分离,并且处理所述一个或多个音轨和与所述一个或多个音轨相关联的空间参数元数据,以产生所述左音频信号和所述右音频信号,其中所述左音频信号和所述右音频信号呈现与所述增强现实对象在所述场景中的空间定位相关联的声音。

20.根据权利要求17所述的介质,还包...

【技术特征摘要】
【国外来华专利技术】

1.一种被配置为向用户呈现增强现实对象的电子眼镜设备,包括:

2.根据权利要求1所述的电子眼镜设备,其中,所述处理器进一步接收与所述一个或多个音轨中的至少一个音轨相关的空间参数元数据,将所述空间参数元数据聚合为聚合空间参数元数据,并且在第二数据传输信道中相对于所述聚合音轨异步地将所述聚合空间参数元数据传送到所述音频处理器。

3.根据权利要求2所述的电子眼镜设备,其中,所述音频处理器包括头部相关传递函数处理模块,所述头部相关传递函数处理模块从聚合空间参数数据中分离与各个音轨相对应的所述空间参数元数据,并处理所述一个或多个音轨以及与所述一个或多个音轨相关联的空间参数元数据以产生左音频信号和右音频信号,其中所述左音频信号与所述右音频信号呈现与所述增强现实对象在场景中的空间定位相关联的声音。

4.根据权利要求1所述的电子眼镜设备,其中,所述处理器使用单个远程过程调用将所述聚合音轨传送到所述音频处理器。

5.根据权利要求1所述的电子眼镜设备,其中,用于相应音轨的所述报头还包括所述报头的版本的指示以及用于所述相应音轨的帧中的样本数量。

6.根据权利要求1所述的电子眼镜设备,其中,用于相应音轨的所述报头还包括用于所述相应音轨的头部相关传递函数参数或每音轨调谐参数中的至少一个。

7.根据权利要求1所述的电子眼镜设备,其中,所述一个或多个音轨中的至少一个音轨是压缩的,并且每个相应的压缩音轨的报头还包括已经被应用于一个或多个压缩音轨的压缩类型的指示。

8.根据权利要求1所述的电子眼镜设备,其中,所述处理器以采样间隔或在调度传递时间处接收分别与一个或多个增强现实对象相关联的一个或多个音轨,并且所述一个或多个音轨的报头还包括采样间隔数据或调度数据。

9.一种用于在场景中呈现与呈现给用户的增强现实对象相关联的声音的方法,包括:

10.根据权利要求9所述的方法,还包括所述处理器接收与所述一个或多个音轨中的至少一个音轨相关的空间参数元数据,将所述空间参数元数据聚合为聚合空间参数元数据,以及在第二数据传输通道中相对于所述聚合音轨异步地将所述聚合空间参数元数据传送到所述音频处理器。

11.根据权利要求10所述的方法,其中,所述音频处理器包括头部相关传递函数处理模块,还包括所述头部相关传递函数模块从聚合空间参数数据中分离对应于各个音...

【专利技术属性】
技术研发人员:阿什瓦尼·阿里亚泰贾斯·巴胡尔加丹尼尔·哈里斯丹尼尔·C·威金斯
申请(专利权)人:斯纳普公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1