音频的空间管理制造技术

本公开整体涉及用于管理空间音频的用户界面。一些示例性技术包括用于在视觉元素之间转变的用户界面。一些示例性技术包括用于预览音频的用户界面。一些示例性技术包括用于发现音乐的用户界面。一些示例性技术包括用于管理耳机透明的用户界面。一些示例性技术包括用于操纵音频源的多个音频流的用户界面。

【技术实现步骤摘要】
【国外来华专利技术】音频的空间管理相关申请的交叉引用本专利申请要求于2018年9月26日提交的名称为“SPATIALMANAGEMENTOFAUDIO”的美国临时专利申请序列号62/736,990的优先权，该专利申请的内容全文以引用方式并入以用于所有目的。
本公开整体涉及计算机用户界面，更具体地，涉及用于管理空间音频的技术。
技术介绍
人们可以在三维(上下、前后和左右)中定位声音。可使用不同的技术来修改音频，使得收听者将设备创建的音频感知为来自空间中的特定点。
技术实现思路
然而，用于使用电子设备来管理空间音频的一些技术通常很麻烦且效率低下。例如，一些技术不能通过音频的空间管理来为用户提供对电子设备状态的情境感知。又如，一些现有技术使用复杂且耗时的用户界面，该用户界面可包括多次按键或击键。现有技术需要比所需更多的时间，这导致浪费用户的时间和设备能量。这后一考虑在电池驱动的设备中是特别重要的。另外，现有音频技术不足以帮助用户导航图形用户界面。因此，本技术为电子设备提供了用于管理空间音频的更快、更有效的方法和界面。此类方法和本文档来自技高网...

【技术保护点】
1.一种方法，包括：/n在具有显示器的电子设备处，其中所述电子设备与两个或更多个扬声器可操作地连接：/n在所述显示器上的第一位置处显示第一视觉元素；/n访问对应于所述第一视觉元素的第一音频；/n在所述显示器上的所述第一位置处显示所述第一视觉元素时：/n在所述两个或更多个扬声器处使用所述第一音频以第一模式产生音频；以及/n接收第一用户输入；/n响应于接收到所述第一用户输入：/n将所述第一视觉元素的显示从所述显示器上的所述第一位置转变为不在所述显示器上显示所述第一视觉元素；以及/n当不在所述显示器上显示所述第一视觉元素时，在所述两个或更多个扬声器处使用所述第一音频以不同于所述第一模式的第二模式产生...

【技术特征摘要】
【国外来华专利技术】20180926 US 62/736,9901.一种方法，包括：
在具有显示器的电子设备处，其中所述电子设备与两个或更多个扬声器可操作地连接：
在所述显示器上的第一位置处显示第一视觉元素；
访问对应于所述第一视觉元素的第一音频；
在所述显示器上的所述第一位置处显示所述第一视觉元素时：
在所述两个或更多个扬声器处使用所述第一音频以第一模式产生音频；以及
接收第一用户输入；
响应于接收到所述第一用户输入：
将所述第一视觉元素的显示从所述显示器上的所述第一位置转变为不在所述显示器上显示所述第一视觉元素；以及
当不在所述显示器上显示所述第一视觉元素时，在所述两个或更多个扬声器处使用所述第一音频以不同于所述第一模式的第二模式产生音频，其中所述第二模式被配置为使得以所述第二模式产生的音频被所述用户感知为是从远离所述显示器的方向产生的。


2.根据权利要求1所述的方法，其中所述第一模式被配置为使得使用所述第一模式产生的音频被所述用户感知为是从对应于所述显示器的第一方向产生的。


3.根据权利要求1至2中任一项所述的方法，还包括：
访问对应于第二视觉元素的第二音频；
在所述显示器上的所述第一位置处显示所述第一视觉元素时并且在不显示所述第二视觉元素时：
在所述两个或更多个扬声器处使用所述第二音频以不同于所述第一模式和所述第二模式的第三模式产生音频，其中所述第三模式被配置为使得以所述第三模式产生的音频被所述用户感知为是从远离所述显示器的方向产生的；以及
放弃在所述显示器上显示对应于所述第二音频的第二视觉元素。


4.根据权利要求1至3中任一项所述的方法，还包括：
在所述显示器上的所述第一位置处显示所述第一视觉元素时：
放弃在所述显示器上显示对应于第二音频的第二视觉元素；以及
响应于接收到所述第一用户输入：
将所述第二视觉元素的显示从不在所述显示器上显示转变为所述显示器上的第四位置；以及
在使用所述第一音频以所述第二模式产生音频的同时，在所述两个或更多个扬声器处使用所述第二音频以所述第一模式产生音频。


5.根据权利要求1至4中任一项所述的方法，其中：
所述第二模式被配置为使得使用所述第二模式产生的音频被所述用户感知为是从第二方向产生的；并且
所述第三模式被配置为使得使用所述第三模式产生的音频被所述用户感知为是从不同于所述第二方向的第三方向产生的。


6.根据权利要求1至5中任一项所述的方法，还包括：
在所述显示器上的所述第一位置处显示所述第一视觉元素之后并且在所述第一视觉元素未显示在所述显示器上之前：
在所述显示器上的第二位置处显示所述第一视觉元素；以及
在所述显示器上的所述第二位置处显示所述第一视觉元素时，在所述两个或更多个扬声器处使用所述第一音频以不同于所述第一模式、所述第二模式和所述第三模式的第四模式产生音频。


7.根据权利要求1至6中任一项所述的方法，其中所述第一模式不包括音频的耳间时间差的修改。


8.根据权利要求1至7中任一项所述的方法，其中所述第二模式包括音频的耳间时间差的修改。


9.根据权利要求7至8中任一项所述的方法，其中音频的所述耳间时间差的修改包括：
组合所述音频的第一通道音频和所述音频的第二通道音频以形成组合通道音频；
更新所述第二通道音频以包括处于第一延迟的所述组合通道音频；以及
更新所述第一通道音频以包括处于不同于所述第一延迟的第二延迟的所述组合通道音频。


10.根据权利要求1至9中任一项所述的方法，还包括：
响应于开始接收所述第一用户输入：
从不使用对应于第二视觉元素的第二音频产生音频转变为在所述两个或更多个扬声器处使用对应于所述第二视觉元素的第二音频产生音频。


11.根据权利要求1至10中任一项所述的方法，其中使用所述第二模式产生音频包括以下项中的一者或多者：
衰减所述音频；
将高通滤波器应用于所述音频；
将低通滤波器应用于所述音频；以及
改变两个或更多个扬声器之间的音量平衡。


12.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求1至11中任一项所述的方法的指令。


13.一种电子设备，包括：
显示器；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求1至11中任一项所述的方法的指令。


14.一种电子设备，包括：
显示器；以及
用于执行根据权利要求1至11中任一项所述的方法的装置。


15.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，其中所述电子设备与两个或更多个扬声器可操作地连接，所述一个或多个程序包括用于执行以下操作的指令：
在所述显示器上的第一位置处显示第一视觉元素；
访问对应于所述第一视觉元素的第一音频；
在所述显示器上的所述第一位置处显示所述第一视觉元素时：
在所述两个或更多个扬声器处使用所述第一音频以第一模式产生音频；以及
接收第一用户输入；
响应于接收到所述第一用户输入：
将所述第一视觉元素的显示从所述显示器上的所述第一位置转变为不在所述显示器上显示所述第一视觉元素；以及
当不在所述显示器上显示所述第一视觉元素时，在所述两个或更多个扬声器处使用所述第一音频以不同于所述第一模式的第二模式产生音频，其中所述第二模式被配置为使得以所述第二模式产生的音频被所述用户感知为是从远离所述显示器的方向产生的。


16.一种电子设备，包括：
显示器；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，其中所述电子设备与两个或更多个扬声器可操作地连接，所述一个或多个程序包括用于执行以下操作的指令：
在所述显示器上的第一位置处显示第一视觉元素；
访问对应于所述第一视觉元素的第一音频；
在所述显示器上的所述第一位置处显示所述第一视觉元素时：
在所述两个或更多个扬声器处使用所述第一音频以第一模式产生音频；以及
接收第一用户输入；
响应于接收到所述第一用户输入：
将所述第一视觉元素的显示从所述显示器上的所述第一位置转变为不在所述显示器上显示所述第一视觉元素；以及
当不在所述显示器上显示所述第一视觉元素时，在所述两个或更多个扬声器处使用所述第一音频以不同于所述第一模式的第二模式产生音频，其中所述第二模式被配置为使得以所述第二模式产生的音频被所述用户感知为是从远离所述显示器的方向产生的。


17.一种电子设备，包括：
显示器，其中所述电子设备与两个或更多个扬声器可操作地连接；
用于在所述显示器上的第一位置处显示第一视觉元素的装置；
用于访问对应于所述第一视觉元素的第一音频的装置；
用于在所述显示器上的所述第一位置处显示所述第一视觉元素时执行以下操作的装置：
在所述两个或更多个扬声器处使用所述第一音频以第一模式产生音频；以及
接收第一用户输入；
用于响应于接收到所述第一用户输入而执行以下操作的装置：
将所述第一视觉元素的显示从所述显示器上的所述第一位置转变为不在所述显示器上显示所述第一视觉元素；以及
当不在所述显示器上显示所述第一视觉元素时，在所述两个或更多个扬声器处使用所述第一音频以不同于所述第一模式的第二模式产生音频，其中所述第二模式被配置为使得以所述第二模式产生的音频被所述用户感知为是从远离所述显示器的方向产生的。


18.一种方法，包括：
在具有显示器和触敏表面的电子设备处，其中所述电子设备与两个或更多个扬声器可操作地连接：
在所述显示器上显示多个媒体元素的列表，其中所述多个媒体元素中的每个媒体元素对应于相应的媒体文件；
使用所述触敏表面检测对应于第一媒体元素的位置处的用户接触；
响应于检测到对应于所述第一媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入：
使用所述两个或更多个扬声器并使用对应于所述第一媒体元素的第一音频文件产生音频，而不超过预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第一媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；
使用所述触敏表面检测所述用户接触从对应于所述第一媒体元素的位置到对应于第二媒体元素的位置的移动；
响应于检测到对应于所述第二媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入：
使用所述两个或更多个扬声器并使用对应于所述第二媒体元素的第二音频文件产生音频，而不超过所述预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第二媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；
使用所述触敏表面检测所述用户接触的抬离；以及
响应于检测到所述用户接触的所述抬离：
停止使用所述两个或更多个扬声器并使用所述第一音频文件或所述第二音频文件产生音频。


19.根据权利要求18所述的方法，还包括：
进一步根据所述用户接触包括触摸和保持输入：
使用所述第一音频文件产生音频而不超过预先确定的音频回放持续时间包括在多个模式之间转变所述音频，所述多个模式包括：
第一模式，其中所述第一模式被配置为使得使用所述第一模式产生的音频被所述用户感知为是从第一方向产生的；
不同于所述第一模式的第二模式；以及
不同于所述第一模式和所述第二模式的第三模式，其中所述第三模式被配置为使得使用所述第三模式产生的音频被所述用户感知为是从不同于所述第一方向的第三方向产生的。


20.根据权利要求18至19中任一项所述的方法，其中所述第一模式包括音频的耳间时间差的第一修改，并且所述第三模式包括音频的耳间时间差的不同于所述第一修改的第二修改。


21.根据权利要求18至20中任一项所述的方法，其中所述第二模式不包括音频的耳间时间差的修改。


22.根据权利要求20至21中任一项所述的方法，其中音频的所述耳间时间差的修改包括：
组合所述音频的第一通道音频和所述音频的第二通道音频以形成组合通道音频；
更新所述第二通道音频以包括处于第一延迟的所述组合通道音频；以及
更新所述第一通道音频以包括处于不同于所述第一延迟的第二延迟的所述组合通道音频。


23.根据权利要求18至22中任一项所述的方法，还包括：
响应于检测到对应于所述第一媒体元素的位置处的所述用户接触：
改变所述多个媒体元素中除所述第一媒体元素之外的所显示媒体元素的第一视觉特征；以及
响应于检测到对应于所述第二媒体元素的位置处的所述用户接触：
恢复所述第二媒体元素的所述第一视觉特征的所述改变；以及
改变所述第一媒体元素的所述第一视觉特征。


24.根据权利要求18至23中任一项所述的方法，还包括：
响应于检测到对应于所述第一媒体元素的位置处的所述用户接触：
改变所述第一媒体元素的第二视觉特征，而不改变所述多个媒体元素中除所述第一媒体元素之外的所显示媒体元素的所述第二视觉特征；以及
响应于检测到对应于所述第二媒体元素的位置处的所述用户接触：
恢复所述第一媒体元素的所述第二视觉特征的所述改变；以及
改变所述第二媒体元素的所述第二视觉特征。


25.根据权利要求18至24中任一项所述的方法，还包括：
响应于检测到对应于所述第一媒体元素的位置处的所述用户接触并且根据所述用户接触包括轻击输入：
使用对应于所述第一媒体元素的所述第一音频文件产生音频，而不在所述预先确定的音频回放持续时间之后自动停止使用所述第一音频产生音频，并且不在检测到所述用户接触的抬离时自动停止使用所述第一音频文件产生音频。


26.根据权利要求18至25中任一项所述的方法，还包括：
根据所述用户接触包括轻击输入：
使用所述第一音频文件产生音频包括使用所述第一音频文件以所述第二模式产生音频，而不在所述多个模式中的所述第一模式和所述第三模式之间转变所述音频。


27.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示器的电子设备的一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求18至26中任一项所述的方法的指令。


28.一种电子设备，包括：
显示器；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，所述一个或多个程序包括用于执行根据权利要求18至26中任一项所述的方法的指令。


29.一种电子设备，包括：
显示器；以及
用于执行根据权利要求18至26中任一项所述的方法的装置。


30.一种非暂态计算机可读存储介质，所述非暂态计算机可读存储介质存储被配置为由具有显示器和触敏表面的电子设备的一个或多个处理器执行的一个或多个程序，其中所述电子设备与两个或更多个扬声器可操作地连接，所述一个或多个程序包括用于执行以下操作的指令：
在所述显示器上显示多个媒体元素的列表，其中所述多个媒体元素中的每个媒体元素对应于相应的媒体文件；
使用所述触敏表面检测对应于第一媒体元素的位置处的用户接触；
响应于检测到对应于所述第一媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入：
使用所述两个或更多个扬声器并使用对应于所述第一媒体元素的第一音频文件产生音频，而不超过预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第一媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；
使用所述触敏表面检测所述用户接触从对应于所述第一媒体元素的位置到对应于第二媒体元素的位置的移动；
响应于检测到对应于所述第二媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入：
使用所述两个或更多个扬声器并使用对应于所述第二媒体元素的第二音频文件产生音频，而不超过所述预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第二媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；
使用所述触敏表面检测所述用户接触的抬离；以及
响应于检测到所述用户接触的所述抬离：
停止使用所述两个或更多个扬声器并使用所述第一音频文件或所述第二音频文件产生音频。


31.一种电子设备，包括：
显示器；
触敏表面；
一个或多个处理器；以及
存储器，所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序，其中所述电子设备与两个或更多个扬声器可操作地连接，所述一个或多个程序包括用于执行以下操作的指令：
在所述显示器上显示多个媒体元素的列表，其中所述多个媒体元素中的每个媒体元素对应于相应的媒体文件；
使用所述触敏表面检测对应于第一媒体元素的位置处的用户接触；
响应于检测到对应于所述第一媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入：
使用所述两个或更多个扬声器并使用对应于所述第一媒体元素的第一音频文件产生音频，而不超过预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第一媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；
使用所述触敏表面检测所述用户接触从对应于所述第一媒体元素的位置到对应于第二媒体元素的位置的移动；
响应于检测到对应于所述第二媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入：
使用所述两个或更多个扬声器并使用对应于所述第二媒体元素的第二音频文件产生音频，而不超过所述预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第二媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；
使用所述触敏表面检测所述用户接触的抬离；以及
响应于检测到所述用户接触的所述抬离：
停止使用所述两个或更多个扬声器并使用所述第一音频文件或所述第二音频文件产生音频。


32.一种电子设备，包括：
显示器；
触敏表面，其中所述电子设备与两个或更多个扬声器可操作地连接；
用于在所述显示器上显示多个媒体元素的列表的装置，其中所述多个媒体元素中的每个媒体元素对应于相应的媒体文件；
用于使用所述触敏表面检测对应于第一媒体元素的位置处的用户接触的装置；
用于响应于检测到对应于所述第一媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入而执行以下操作的装置：
使用所述两个或更多个扬声器并使用对应于所述第一媒体元素的第一音频文件产生音频，而不超过预先确定的音频回放持续时间；
在所述用户接触保持在对应于所述第一媒体元素的位置处时：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第一音频文件产生音频；
用于使用所述触敏表面检测所述用户接触从对应于所述第一媒体元素的位置到对应于第二媒体元素的位置的移动的装置；
用于响应于检测到对应于所述第二媒体元素的位置处的所述用户接触并且根据所述用户接触包括触摸和保持输入而执行以下操作的装置：
使用所述两个或更多个扬声器并使用对应于所述第二媒体元素的第二音频文件产生音频，而不超过所述预先确定的音频回放持续时间；
用于在所述用户接触保持在对应于所述第二媒体元素的位置处时执行以下操作的装置：
根据未超过所述预先确定的音频回放持续时间段，继续使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；以及
根据超过所述预先确定的音频回放持续时间段，停止使用所述两个或更多个扬声器并使用所述第二音频文件产生音频；
用于使用所述触敏表面检测所述用户接触的抬离的装置；以及
用于响应于检测到所述用户接触的所述抬离而执行以下操作的装置：
停止使用所述两个或更多个扬声器并使用所述第一音频文件或所述第二音频文件产生音频。


33.一种方法，包括：
在具有显示器和触敏表面的电子设备处，其中所述电子设备与两个或更多个扬声器可操作地连接：
检测用于激活发现模式的第一用户输入；
响应于检测到用于激活所述发现模式的所述第一用户输入，使用所述两个或更多个扬声器并使用以下音频源同时产生音频：
第一模式的第一音频源，其中所述第一模式被配置为使得使用所述第一模式产生的音频被所述用户感知为是从空间中的第一点产生的，所述第一点随时间推移在第一方向上以第一速度沿预定义的路径移动；
第二模式的第二音频源，其中所述第二模式被配置为使得使用所述第二模式产生的音频被所述用户感知为是从空间中的第二点产生的，所述第二点随时间推移在所述第一方向上以第二速度沿所述预定义的路径移动，以及
第三模式的第三音频源，其中所述第三模式被配置为使得使用所述第三模式产生的音频被所述用户感知为是从空间中的第三点产生的，所述第三点随时间推移在所述第一方向上以第三速度沿所述预定义的路径移动；并且
其中所述第一点、所述第二点和所述第三点是空间中的不同点。


34.根据权利要求33所述的方法，其中：
所述第一音频源对应于第一视觉元素，
所述第二音频源对应于第二视觉元素，并且
所述第三音频源对应于第三视觉元素，并且
所述方法还包括：
在使用所述第一音频源、所述第二音频源和所述第三音频源产生音频的同时，在所述显示器上显示所述第一视觉元素、所述第二视觉元素和所述第三视觉元素中的两者或更多者以第四速度的同时移动。


35.根据权利要求34所述的方法，其中所述第一视觉元素、所述第二视觉元素和所述第三视觉元素中的所述两者或更多者的所述移动在所述第一方向上进行。


36.根据权利要求33至35中任一项所述的方法，其中：
所述预定义的路径沿着第一维度变化；
所述预定义的路径沿着不同于所述第一维度的第二维度变化；并且
所述预定义的路径不沿着不同于所述第一维度和所述第二维度的第三维度变化。


37.根据权利要求33至36中任一项所述的方法，还包括：
其中使用所述两个或更多个扬声器同时产生音频还包括：
使用第四模式的第四音频源，其中所述第四模式被配置为使得使用所述第四模式产生的音频被所述用户感知为是从空间中的第四点产生的，所述第四点随时间推移在所述第一方向上沿着所述预定义的路径移动，所述第四点在空间中比所述第一点、所述第二点和所述第三点距所述用户更远；以及
在所述显示器上显示所述第一视觉元素、所述第二视觉元素和所述第三视觉元素中的所述两者或更多者的所述同时移动时，放弃在所述显示器上显示对应于所述第四音频源的第四视觉元素。


38.根据权利要求33至37中任一项所述的方法，其中所述第一速度、所述第二速度和所述第三速度是相同的速度。


39.根据权利要求34至38中任一项所述的方法，还包括：
在使用所述两个或更多个扬声器同时产生所述音频时，检测在不同于所述第一方向的第二方向上...

【专利技术属性】
技术研发人员：S·J·伍德，M·E·约翰逊，D·A·萨脱迦，
申请(专利权)人：苹果公司，
类型：发明
国别省市：美国;US