生成音频输出信号制造技术

描述了一种装置、方法和计算机程序，包括：在图像捕获过程期间捕获空间音频数据；在所述空间音频数据捕获期间确定图像捕获设备的定向；从所述捕获的空间音频数据生成音频聚焦信号(其中所述音频聚焦信号被聚焦在所述图像捕获设备的图像捕获方向上)；生成经修改的空间音频数据(例如通过修改捕获的空间音频数据以补偿定向空间音频数据捕获期间的变化)；以及从音频聚焦信号和经修改的空间音频数据的组合生成音频输出信号。合生成音频输出信号。合生成音频输出信号。

【技术实现步骤摘要】
【国外来华专利技术】生成音频输出信号


[0001]本说明书涉及与空间音频相关联的音频输出信号。

技术介绍

[0002]用于捕获空间音频的布置是已知的。然而，该领域仍然需要进一步的发展。

技术实现思路

[0003]在第一方面中，本说明书提供了一种装置(例如成像设备，诸如包括摄像头的手机)，包括：用于在图像捕获过程期间捕获空间音频数据的部件；用于在空间音频数据捕获期间确定装置的定向的部件；用于从所述捕获的空间音频数据生成音频聚焦信号(例如单声道音频信号)的部件，其中所述音频聚焦信号被聚焦在所述装置的图像捕获方向上；用于生成经修改的空间音频数据部件，其中生成经修改的空间音频数据包括：修改捕获的空间音频数据以用于补偿装置的定向在空间音频数据捕获期间的一个或多个改变；以及用于从音频聚焦信号和经修改的空间音频数据的组合生成音频输出信号的部件。一些示例包括：用于捕获对象或者场景的视觉图像(例如静止图像或者移动图像)的部件。
[0004]在一些示例中，空间音频数据是从起始时间(例如在照片应用被启动时开始)到结束时间被捕获的，该起始时间在图像捕获过程起始时或者之前，该结束时间在图像捕获过程结束时或者之后。
[0005]在一些示例中，用于生成经修改的空间音频数据的部件可以被配置为：通过旋转所述捕获的空间音频数据来补偿装置的定向的所述一个或多个改变，以抵消在装置的定向上的所确定的改变。
[0006]在一些示例中，空间音频数据可以是参数化音频数据。用于生成经修改的空间音频数据的部件可以被配置为：通过修改所述参数化音频数据的参数来生成所述经修改的空间音频数据。
[0007]在一些示例中，用于生成所述音频聚焦信号的部件可以包括一个或多个波束成形布置。
[0008]在一些示例中，用于生成所述音频聚焦信号的部件可以被配置为：在装置的图像捕获方向上强调音频(例如捕获的空间音频数据)。
[0009]在一些示例中，用于生成所述音频聚焦信号的部件可以被配置为：在装置的图像捕获方向以外的方向上衰减音频(例如捕获的空间音频数据)。
[0010]在一些示例中，用于生成所述音频输出信号的部件可以被配置为：基于音频聚焦信号和经修改的空间音频数据的加权和来生成所述音频输出信号。
[0011]在一些示例中，用于确定装置的定向的部件包括一个或多个传感器(例如一个或多个加速度计和/或一个或多个陀螺仪)。
[0012]部件可以包括：至少一个处理器；以及至少一个存储器，包括计算机程序代码，该至少一个存储器和计算机程序代码被配置为：与该至少一个处理器一起引起装置的执行。
[0013]在第二方面中，本说明书描述了一种方法，包括：在图像捕获过程期间捕获空间音频数据；在空间音频数据捕获期间确定图像捕获设备的定向；从所述捕获的空间音频数据生成音频聚焦信号(例如单声道音频信号)，其中所述音频聚焦信号被聚焦在所述图像捕获设备的图像捕获方向上；生成经修改的空间音频数据，其中生成经修改的空间音频数据包括：修改捕获的空间音频数据以用于补偿图像捕获设备的定向在空间音频数据捕获期间的一个或多个改变；以及从音频聚焦信号和经修改的空间音频数据的组合生成音频输出信号。
[0014]在一些示例中，该方法还可以包括：捕获对象或者场景的视觉图像。
[0015]在一些示例中，空间音频数据是从起始时间(例如在照片应用被启动时开始)到结束时间被捕获的，该起始时间在图像捕获过程起始时或者之前，该结束时间在图像捕获过程结束时或者之后。
[0016]在一些示例中，经修改的空间音频数据可以通过补偿在图像捕获设备的定向上的所述一个或多个改变而生成。补偿在图像捕获设备的定向上的所述变化可以包括：旋转所述捕获的空间音频数据以抵消在装置的定向上的所确定的变化。
[0017]在一些示例中，空间音频数据可以是参数化音频数据。经修改的空间音频数据可以通过修改所述参数化音频数据的参数而被生成。
[0018]在一些示例中，所述音频聚焦信号可以使用一个或多个波束成形布置而被生成。
[0019]在一些示例中，生成所述音频聚焦信号可以包括：在图像捕获设备的图像捕获方向上强调音频(例如捕获的空间音频数据)。
[0020]在一些示例中，生成所述音频聚焦信号可以包括：在图像捕获设备的图像捕获方向以外的方向上衰减音频(例如捕获的空间音频数据)。
[0021]在一些示例中，所述音频输出信号可以基于音频聚焦信号和经修改的空间音频数据的加权和而被生成。
[0022]在一些示例中，图像捕获设备的定向使用一个或多个传感器(例如一个或多个加速度计和/或一个或多个陀螺仪)而被确定。
[0023]在第三方面中，本说明书描述了一种装置，被配置为：执行如参照第二方面所描述的任何方法。
[0024]在第四方面中，本说明书描述了计算机可读指令，这些计算机可读指令在由计算装置执行时所计算装置执行如参照第二方面所描述的任何方法。
[0025]在第五方面中，本说明书描述了一种计算机程序，包括用于使装置至少执行以下操作的指令：在图像捕获过程期间捕获空间音频数据；在空间音频数据捕获期间确定图像捕获设备的定向；从所述捕获的空间音频数据生成音频聚焦信号(例如单声道音频信号)，其中所述音频聚焦信号被聚焦在所述图像捕获设备的图像捕获方向上；生成经修改的空间音频数据，其中生成经修改的空间音频数据包括：修改捕获的空间音频数据以用于补偿图像捕获设备的定向在空间音频数据捕获期间的一个或多个改变；以及从音频聚焦信号和经修改的空间音频数据的组合生成音频输出信号。
[0026]在第六方面中，本说明书描述了一种计算机可读介质(诸如非暂时性计算机可读介质)，包括被存储在其上的程序指令以便至少执行以下操作：在图像捕获过程期间捕获空间音频数据；在空间音频数据捕获期间确定图像捕获设备的定向；从所述捕获的空间音频
数据生成音频聚焦信号(例如单声道音频信号)，其中所述音频聚焦信号被聚焦在所述图像捕获设备的图像捕获方向上；生成经修改的空间音频数据，其中生成经修改的空间音频数据包括：修改捕获的空间音频数据以用于补偿图像捕获设备的定向的在空间音频数据捕获期间一个或多个改变；以及从音频聚焦信号和经修改的空间音频数据的组合生成音频输出信号。
[0027]在第七方面中，本说明书描述了一种装置，包括：至少一个处理器；以及至少一个存储器，包括计算机程序代码，该计算机程序代码在由该至少一个处理器执行时使装置：在图像捕获过程期间捕获空间音频数据；在空间音频数据捕获期间确定图像捕获设备的定向；从所述捕获的空间音频数据生成音频聚焦信号(例如单声道音频信号)，其中所述音频聚焦信号被聚焦在所述图像捕获设备的图像捕获方向上；生成经修改的空间音频数据，其中生成经修改的空间音频数据包括：修改捕获的空间音频数据以用于补偿图像捕获设备的定向在空间音频数据捕获期间的一个或多个改变；以及从音频聚焦信号和经修改的空间音频数据的组合生成音频输出信号。
[0028]在第八方面中，本说明书描述了一种装置，包本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种装置，包括：用于在图像捕获过程期间捕获空间音频数据的部件；用于在所述空间音频数据捕获期间确定所述装置的定向的部件；用于从捕获的所述空间音频数据生成音频聚焦信号的部件，其中所述音频聚焦信号被聚焦在所述装置的图像捕获方向上；用于生成经修改的空间音频数据的部件，其中生成经修改的空间音频数据包括：修改捕获的所述空间音频数据以用于补偿所述装置的定向在所述空间音频数据捕获期间的一个或多个改变；以及用于从所述音频聚焦信号和所述经修改的空间音频数据的组合生成音频输出信号的部件。2.根据权利要求1所述的装置，其中所述空间音频数据是从起始时间到结束时间被捕获的，所述起始时间在所述图像捕获过程起始时或之前，所述结束时间在所述图像捕获过程结束时或之后。3.根据权利要求1或者权利要求2所述的装置，其中用于生成经修改的空间音频数据的所述部件被配置为：通过旋转捕获的所述空间音频数据来补偿所述装置的定向的所述一个或多个改变，以抵消在所述装置的所述定向上的所确定的改变。4.根据权利要求1至3中任一项所述的装置，其中所述空间音频数据是参数化音频数据。5.根据权利要求4所述的装置，其中用于生成经修改的空间音频数据的所述部件被配置为：通过修改所述参数化音频数据的参数来生成所述经修改的空间音频数据。6.根据前述权利要求中任一项所述的装置，其中用于生成所述音频聚焦信号的所述部件包括一个或多个波束成形布置。7.根据前述权利要求中任一项所述的装置，其中用于生成所述音频聚焦信号的所述部件被配置为：在所述装置的所述图像捕获方向上强调音频。8.根据前述权利要求中任一项所述的装置，其中用于生成所述音频聚焦信号的所述部件被配置为：在所述装置...

【专利技术属性】
技术研发人员：J，
申请(专利权)人：诺基亚技术有限公司，
类型：发明
国别省市：