为音频系统生成修改后的音频体验技术方案

一种音频系统被配置为呈现修改后的音频体验，该修改后的音频体验减少了由音频系统呈现给用户的目标音频体验的降级。该音频系统包括声学传感器阵列、控制器和回放装置阵列。为了生成修改后的音频体验，声学传感器阵列从引起降级的一个或更多个非目标音频源接收声波，识别音频源，确定音频源的空间位置，确定音频源的类型并生成音频指令，该音频指令当由回放装置阵列执行时，将修改后的音频体验呈现给用户。修改后的音频体验可以执行主动噪声消除、环境声音掩蔽和/或中性声音掩蔽以补偿从非目标音频源接收到的声波。该音频系统可以是能够产生人工现实环境的头戴式装置的一部分。产生人工现实环境的头戴式装置的一部分。产生人工现实环境的头戴式装置的一部分。

【技术实现步骤摘要】
【国外来华专利技术】为音频系统生成修改后的音频体验
[0001]背景
[0002]本公开总体上涉及生成音频体验，并且具体地涉及生成补偿由突兀(obtrusive)的音频源生成的声波的音频体验。
[0003]常规的音频系统可以使用头戴式耳机(headphone)来呈现包括多个音频内容的目标音频体验。由于常规系统使用头戴式耳机，因此目标音频体验相对不受音频系统的局部区域内其他音频源的影响。然而，包括头戴式耳机在内的音频系统会阻塞耳道，并且对于某些人工现实环境(例如增强现实)来说是不期望的。由于缺乏对远场辐射声音的控制，很难为局部区域内的用户通过空中生成目标音频体验，同时最小化该音频内容对局部区域中的其他人的暴露。常规系统无法动态呈现补偿可被用户感知为降低目标音频体验的声波的音频内容。
[0004]概述
[0005]一种用于生成修改后的音频体验的方法，该修改后的音频体验减少由音频系统呈现给用户的目标音频体验的降级。降级或影响可能是因用户感知到由音频系统的局部区域中的非目标音频源生成的声波引起的。该方法通过呈现补偿由非目标音频源生成的声波的修改后的音频内容来减少降级或影响。在一些实施例中，尽管存在由非目标音频源生成的声波，但修改后的音频体验类似于目标音频体验。
[0006]该方法经由头戴式装置(headset)的声学传感器阵列确定来自头戴式装置的局部区域中的一个或更多个音频源的声波。头戴式装置的控制器确定与声波相关联的阵列传递函数(ATF)，并确定音频源的空间位置和/或类型。控制器生成音频指令，当由回放(playback)装置阵列执行时，该指令将修改后的音频体验呈现给用户。修改后的音频体验可以执行主动噪声消除、环境声音掩蔽和/或中性声音掩蔽以补偿从非目标音频源接收到的声波。
[0007]该方法可以由音频系统执行。例如，作为头戴式装置的一部分的音频系统(例如，近眼显示器、头戴式显示器)。音频系统包括声学传感器阵列、控制器和回放装置阵列。在检测到音频源之后或响应于来自用户的输入，音频系统可以自动呈现修改后的音频。
[0008]根据本专利技术的实施例在涉及方法、存储介质和可穿戴装置的所附权利要求中特别公开，其中，在一个权利要求类别(例如方法)中提及的任何特征也可以在另一个权利要求类别(例如存储介质、可穿戴装置、系统和计算机程序产品)中要求保护。仅出于形式上的原因选择所附权利要求中的从属关系或往回引用。然而，也可以要求保护由有意地往回引用任何先前的权利要求(特别是多项从属关系)所导致的任何主题，使得公开并可要求保护权利要求及其特征的任何组合，而与所附权利要求中选择的从属关系无关。可以要求保护的主题不仅包括所附权利要求中阐述的特征的组合，而且还包括权利要求中特征的任何其他组合，其中，权利要求中提到的每个特征可以与任何其他特征或权利要求中的其他特征的组合进行组合。此外，本文描述或描绘的任何实施例和特征可以在单独的权利要求中和/或与本文描述或描绘的任何实施例或特征或与所附权利要求的任何特征的任何组合中要求保护。
[0009]在实施例中，一种方法可以包括：
[0010]在可穿戴装置的多个声学传感器处接收来自位于空间位置处的非目标音频源的一组声波，该声波影响由可穿戴装置呈现给用户的目标音频体验，该音频体验因用户在用户的听觉场(auditory field)中感知到空间位置处的非目标音频源的声波而受到影响；
[0011]基于接收到的一组声波确定非目标音频源的空间位置；
[0012]基于确定的空间位置和接收到的一组声波来生成一组减少音频(reduction audio)指令，该减少音频指令通过在音频体验被可穿戴装置呈现给用户时补偿用户的听觉场中的非目标音频源来降低对音频体验的影响；
[0013]使用该组减少音频指令呈现修改后的音频体验，该修改后的音频体验当由可穿戴装置呈现给用户时，在用户的听觉场中对空间位置处的非目标音频源的感知被减弱。
[0014]由可穿戴装置向用户呈现音频体验可以包括：
[0015]接收表示多个音频内容元素的多个音频指令；以及
[0016]使用可穿戴装置的音频组件向用户呈现一个或更多个音频内容元素，该音频组件被配置为在用户的听觉场中呈现音频内容元素。
[0017]音频组件可以包括围绕可穿戴装置的框架定位的多个音频回放装置，并且该音频内容元素可以从多个音频回放装置呈现。
[0018]该组减少音频指令可以包括：
[0019]可穿戴装置可呈现的音频指令，该可穿戴装置在呈现音频指令时，进行主动噪声消除，以减弱在用户的听觉场中对空间位置处的非目标音频源的感知。
[0020]基于空间位置和接收到的声波生成一组减少音频指令可以包括：
[0021]分析声波以确定声波的波形；
[0022]基于该波形确定反波形(anti
‑
waveform)，该反波形破坏性地干扰波形；以及
[0023]生成减少音频指令，当由可穿戴装置呈现时，该减少音频指令将反波形呈现给用户，该反波形破坏性地干扰声波，使得用户在用户的听觉场中对在空间位置处的音频源的感知减弱。
[0024]该组减少音频指令可以包括：
[0025]可穿戴装置可呈现的音频指令，该可穿戴装置在呈现音频指令时，进行中性声音掩蔽，以减弱在用户的听觉场中对空间位置处的非目标音频源的感知。
[0026]基于空间位置和接收到的声波生成一组减少音频指令可以包括：
[0027]分析声波以确定声波的一组声学特性；
[0028]确定中性声学信号，该中性声学信号中性声音掩蔽了声波的音频特性；
[0029]生成减少音频指令，当由眼部佩戴物(eyewear)的音频组件执行时，该指令呈现中性声学信号，该中性声学信号对声波进行中性声音掩蔽，使得用户在用户的听觉场中对位于空间位置处的音频源的感知减弱。
[0030]中性声学信号可以是白噪声、粉红噪声、整形白噪声中的任何一种。
[0031]当由可穿戴装置执行时，该组减少音频指令可以呈现音频内容，该音频内容执行环境声音掩蔽以减弱在用户的听觉场中对空间位置处的非目标音频源的感知。
[0032]基于空间位置和接收到的声波生成一组减少音频指令可以包括：
[0033]分析声波以确定声波的一组音频特性；
[0034]确定环境声学信号，该环境声学信号声音掩蔽了一组接收到的声波中的一个或更多个声波的音频特性，该环境声学信号包括从非目标音频源接收到的声波的音频特性；并且
[0035]生成减少音频指令，当由可穿戴装置呈现给用户时，该减少音频指令呈现环境声学信号，该环境声学信号环境声音掩蔽了声波，使得用户在用户的听觉场中对空间位置处的音频源具有减弱的感知。
[0036]在实施例中，一种方法可以包括：
[0037]确定表示用户的听觉场的环境背景的声波的一组音频特性，并且
[0038]其中，所确定的声学信号包括表示用户的听觉场的环境背景的音频特性。
[0039]基于空间位置和接收本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种方法，包括：在可穿戴装置的多个声学传感器处接收来自位于空间位置处的非目标音频源的一组声波，所述声波影响由所述可穿戴装置呈现给用户的目标音频体验，所述音频体验因用户在该用户的听觉场中感知到所述空间位置处的所述非目标音频源的声波而受到影响；基于接收到的所述一组声波来确定所述非目标音频源的所述空间位置；基于所确定的空间位置和接收到的所述一组声波来生成一组减少音频指令，所述减少音频指令通过在所述音频体验由所述可穿戴装置呈现给用户时补偿在用户的所述听觉场中的所述非目标音频源来减少对所述音频体验的影响；使用所述一组减少音频指令来呈现修改后的音频体验，所述修改后的音频体验在由所述可穿戴装置呈现给用户时，在用户的所述听觉场中对所述空间位置处的所述非目标音频源的感知减弱。2.根据权利要求1所述的方法，其中，由所述可穿戴装置向用户呈现音频体验包括：接收表示多个音频内容元素的多个音频指令；以及使用所述可穿戴装置的音频组件向用户呈现所述音频内容元素中的一个或更多个，所述音频组件被配置为在用户的所述听觉场中呈现所述音频内容元素。3.根据权利要求2所述的方法，其中，所述音频组件包括围绕所述可穿戴装置的框架定位的多个音频回放装置，并且从所述多个音频回放装置呈现所述音频内容元素。4.根据权利要求1所述的方法，其中，所述一组减少音频指令包括：所述可穿戴装置能够呈现的音频指令，所述可穿戴装置在呈现所述音频指令时执行主动噪声消除，以在用户的所述听觉场中减弱对所述空间位置处的所述非目标音频源感知。5.根据权利要求1所述的方法，其中，基于所述空间位置和所接收到的声波来生成所述一组减少音频指令进一步包括：分析所述声波以确定所述声波的波形；基于所述波形确定反波形，所述反波形破坏性地干扰所述波形；以及生成减少音频指令，当由所述可穿戴装置呈现时，所述减少音频指令将所述反波形呈现给用户，所述反波形破坏性地干扰所述声波，使得用户在用户的所述听觉场中对所述空间位置处的所述音频源的感知减弱。6.根据权利要求1所述的方法，其中，所述一组减少音频指令包括：所述可穿戴装置能够呈现的音频指令，所述可穿戴装置在呈现所述音频指令时执行中性声音掩蔽，以减弱在用户的所述听觉场中对所述空间位置处的所述非目标音频源的感知。7.根据权利要求1所述的方法，其中，基于所述空间位置和所接收到的声波生成所述一组减少音频指令进一步包括：分析所述声波以确定所述声波的一组声学特性；确定中性声学信号，所述中性声学信号对所述声波的音频特性进行中性声音掩蔽；生成减少音频指令，当由眼部佩戴物的音频组件执行时，所述减少音频指令呈现所述中性声学信号，所述中性声学信号对所述声波进行中性声音掩蔽，从而使用户在用户的所述听觉场中对所述空间位置处的所述音频源的感知减弱。8.根据权利要求7所述的方法，其中，所述中性声学信号是白噪声、粉红噪声、整形白噪
声中的任一种。9.根据权利要求1所述的方法，其中，所述一组减少音频指令当由所述可穿戴装置执行时呈现音频内容，该音频内容执行环境声音掩蔽以减弱在用户的所述听觉场中对所述空间位置处的所述非目标音频源的感知。10.根据权利要求1所述的方法，其中，基于所述空间位置和所接收到的声波生成所述一组减少音频指令进一步包括：分析所述声波以确定所述声波的一组音频特性；确定环境声学信号，所述环境声学信号对接收到的一组声波中的一个或更多个声波的音频特性进行声音掩蔽，所述环境声学信号包括从所述非目标音频源接收到的所述声波的音频特性；以及生成减少音频指令，当由所述可穿戴装置呈现给用户时，所述减少音频指令呈现所述环境声学信号，所述环境声学信号对所述声波进行环境声音掩蔽，从而使用户在用户的所述听觉场中对所述空间位置处的所述音频源的感知减弱。11.根据权利要求10所述的方法，进一步包括：确定表示用户的所述听觉场的环境背景的所述声波的一组音频特性，并且其中，所确定的声学信号包括表示用户的所述听觉场的所述环境背景的音频特性。12.根据权利要求1所述的方法，其中，基于所述空间位置和所接收到的声波生成减少音频指令进一步包括：确定所述可穿戴装置的定向；确定所述可穿戴装置的所述定向与所述非目标音频源的所述空间位置之间的相对定向；基于所确定的相对定向来确定头部相关传递函数，所述头部相关传递函数用于修改目标音频体验以补偿所述空间位置处的所述非目标音频源；以及使用所访问的头部相关传递函数来生成减少音频指令。13.根据权利要求12所述的方法，进一步包括：响应于确定所述可穿戴装置的定向的变化，确定所述可穿戴装置的变化后的定向与所述非目标音频源的所述空间位置之间的新的相对定向；基于所确定的新的相对定向来确定修改后的头部相关传递函数，所述修改后的头部相关传递函数用于修改预期的音频体验以补偿处于所述新的相对定向的所述非目标音频源；以及使用所述修改后的头部相关传递函数来生成减少音频指令。14.根据权利要求1所述的方法，进一步包括：确定所接收的声波来自所述非目标音频源。15.根据权利要求14所述的方法，其中，确定所接收的声波来自所述非目标音频源进一步包括：确定所接收的声波的一组音频特性；并且确定所述一组音频特性代表所述非目标音频源。16.根据权利要求14所述的方法，其中，响应于确定所接收的声波来自所述非目标音频
源，生成减少音频指令。17.根据权利要求1所述的方法，进一步包括：接收来自用户的输入以生成减少音频指令。18.根据权利要求1所述的方法，进一步包括：确定呈现给用户的所述目标音频体验的类型；并且其中，生成所述减少音频指令是基于预期的音频体验的所确定的类型。19.一种非暂时性计算机可读存储介质，其存储编码指令，所述编码指令当被处理器执行时使所述处理器完成以下步骤：在用户穿戴的可穿戴装置的多个声学传感器处接收来自位于空间位置处的非目标音频源的一组声波，所述声波影响由所述可穿戴装置呈现给用户的目标音频体验，所述音频体验因用户在该用户的听觉场中将所述声波感知为所述空间位置处的所述非目标音频源而受到影响；基于接收到的所述一组声波来确定所述非目标音频源的所述空间位置；基于所确定的空间位置和接收到的所述一组声波来生成一组减少音频指令，所述减少音频指令通过在所述音频体验由所述可穿戴装置呈现给用户时补偿用户的所述听觉场中的所述非目标音频源来减少对所述音频体验的影响；使用所述一组减少音频指令来呈现修改后的音频体验，所述修改后的音频体验在由所述可穿戴装置呈现给用户时，在用户的所述听觉场中对所述空间位置处的所述非目标音频源的感知减弱。20.一种可穿戴装置，包括：多个声学传感器，所述多个声学传感器被配置为接收声波；音频组件，所述音频组件被配置为向所述可穿戴装置的用户生成音频体验；控制器，所述控制器被配置为：在用户穿戴的可穿戴装置的所述多个声学传感器处接收来自位于空间位置处的非目标音频源的一组声波，所述声波影响由所述可穿戴装置为用户生成的目标音频体验，所述音频体验因用户在该用户的听觉场中将所述声波感知为所述非目标音频源而受到影响；基于接收到的所述一组声波来确定所述非目标音频源的所述空间位置；基于所确定的空间位置和接收到的所述一组声波来生成补偿音频信号，所述补偿音频信号通过补偿用户的所述听觉场中的所述非目标音频源来减少对所述音频体验的影响；以及使用所述音频组件来呈现使用所述补偿音频信号修改后的音频体验，修改后的音频体验在用户的所述音频场中对所述非目标音频源的感知减弱。21.一种方法，包括：在可穿戴装置的多个声学传感器处接收来自位于空间位置处的非目标音...

【专利技术属性】
技术研发人员：彼得，
申请(专利权)人：脸谱科技有限责任公司，
类型：发明
国别省市：