助听器及相关系统和方法。在一个实施方式中，助听器系统可以选择性地放大检测到的从助听器系统的用户的注视方向发出的声音。系统可包括可穿戴照相机，该可穿戴照相机配置成从用户的环境中捕获多个图像；至少一个麦克风，配置成从用户的环境捕获声音；并且至少一个处理器被编程为接收由照相机捕获的多个图像，接收代表由至少一个麦克风从用户的环境接收的声音的音频信号，基于对多个图像中的至少一个图像的分析来确定用户的注视方向，引起至少一个麦克风从与用户的注视方向相关联的区域接收到的至少一个音频信号的选择性调节，并使得至少一个调节后的音频信号传输到被配置为向用户的耳朵提供声音的听力接口设备。户的耳朵提供声音的听力接口设备。户的耳朵提供声音的听力接口设备。
【技术实现步骤摘要】
助听器系统和方法
[0001]本申请是申请日为2019年10月10日、申请号为201980082480.1、专利技术名称为“助听器系统和方法”的专利技术专利申请的分案申请。
[0002]相关申请的交叉引用
[0003]本申请要求以下专利申请的优先权：2018年10月15日提交的美国临时专利申请第62/745,478号；2018年10月17日提交的美国临时专利申请第62/746,595号；2019年2月21日提交的美国临时专利申请第62/808,317号；和2019年6月5日提交的美国临时专利申请号62/857,773。所有前述申请在此全部引入作为参考。
[0004]本公开总体上涉及用于捕获和处理来自用户的环境的图像和音频并使用从捕获的图像和音频导出的信息的设备和方法。
技术介绍
[0005]今天，技术进步使得可穿戴设备能够自动捕获图像和音频，并存储与捕获的图像和音频相关联的信息。在一项通常被称为“生活记录”的练习中，某些设备已经被用来数字记录一个人生活的方面和个人经历。一些个体记录他们的生活，这样他们就可以从过去的活动中获得瞬间，例如，社交活动、旅行等。生活记录在其他领域(如商业、健身和医疗保健以及社会研究)也可能有显著的好处。生活记录设备虽然对跟踪日常活动有用，但可以基于对捕获的图像和音频数据的分析，通过增强人在其环境中与反馈的交互的能力和其他高级功能来进行改进。
[0006]尽管用户可以用智能电话捕获图像和音频，并且一些智能电话应用可以处理捕获到的信息，但考虑到智能电话的尺寸和设计，智能电话可能不是用作生活记录装置的最佳平台。生活记录装置应该小而轻，以便于穿戴。此外，随着包括可穿戴装置在内的图像捕获设备的改进，可以提供附加功能来帮助用户在环境中和环境周围导航，识别他们遇到的人和对象，并向用户提供关于他们的环境和活动的反馈。因此，需要用于自动捕获和处理图像和音频以向装置用户提供有用信息的装置和方法，以及用于处理和利用由装置收集的信息的系统和方法。
技术实现思路
[0007]与本公开一致的实施例提供了用于自动捕获和处理来自用户的环境的图像和音频的设备和方法，以及用于处理与用户的环境从用户的环境捕获的图像和音频相关的信息的系统和方法。
[0008]在一个实施例中，助听器系统可以选择性地放大从检测到的助听器系统用户的注视方向发出的声音。该系统可以包括被配置为从用户的环境捕获多个图像的可穿戴照相机；至少一个麦克风，被配置为捕获来自用户的环境的声音；和至少一个处理器。处理器可以被编程为接收由照相机捕获的多个图像，接收代表由至少一个麦克风从用户的环境接收
的声音的音频信号，基于对多个图像中的至少一个图像的分析来确定用户的注视方向，引起对由至少一个麦克风从与用户的注视方向相关联的区域接收的至少一个音频信号的选择性调节，并且使得将至少一个经调节的音频信号传输到被配置为向用户的耳朵提供声音的听力接口设备。
[0009]在一个实施例中，一种方法可以选择性地放大从检测到的助听器系统用户的注视方向发出的声音。该方法可以包括接收由可穿戴照相机从用户的环境捕获的多个图像；接收代表由至少一个麦克风从用户的环境接收的声音的音频信号，基于对多个图像中的至少一个图像的分析来确定用户的注视方向，引起对由至少一个麦克风从与用户的注视方向相关联的区域接收的至少一个音频信号的选择性调节，使得将至少一个调节后的音频信号传输到被配置为向用户的耳朵提供声音的听力接口设备。
[0010]在一个实施例中，助听器系统可以选择性地放大与被辨识的个体的语音相关联的音频信号。该系统可以包括被配置为从用户的环境捕获多个图像的可穿戴照相机、被配置为从用户的环境捕获声音的至少一个麦克风以及至少一个处理器。处理器可以被编程为接收由照相机捕获的多个图像，在多个图像的至少一个中识别至少一个被辨识的个体的表示，接收代表由至少一个麦克风接收的声音的音频信号，引起对由至少一个麦克风从与至少一个被辨识的个体相关联的区域接收的至少一个音频信号的选择性调节，并且使得将至少一个调节后的音频信号传输到被配置为向用户的耳朵提供声音的听力接口设备。
[0011]在一个实施例中，一种方法可以选择性地放大与被辨识的个体的语音相关联的音频信号。该方法可以包括接收由可穿戴照相机从用户的环境捕获的多个图像，在多个图像的至少一个中识别至少一个被辨识的个体的表示，接收代表由至少一个麦克风从用户的环境捕获的声音的音频信号，引引起对由至少一个麦克风从与至少一个被辨识的个体相关联的区域接收的至少一个音频信号的选择性调节，并且使得将至少一个调节后的音频信号传输到被配置为向用户的耳朵提供声音的听力接口设备。
[0012]在一个实施例中，语音传输系统可以选择性地传输与被辨识的用户的语音相关联的音频信号。该系统可以包括至少一个麦克风和至少一个处理器，该麦克风被配置为捕获来自用户的环境的声音。处理器可以被编程为接收代表由至少一个麦克风捕获的声音的音频信号，基于对接收到的音频信号的分析，识别代表用户的被辨识的语音的一个或多个语音音频信号，使得向远程定位设备传输代表用户的被辨识的语音的一个或多个语音音频信号，并且阻止向远程定位设备传输不同于代表用户的被辨识的语音的一个或多个语音音频信号的至少一个背景噪声音频信号。
[0013]在一个实施例中，一种方法可以选择性地传输与被辨识的用户的语音相关联的音频信号。该方法可以包括：接收代表由至少一个麦克风从用户的环境捕获的声音的音频信号；基于对接收的音频信号的分析，识别代表用户的被辨识的语音的一个或多个语音音频信号；使得向远程定位设备传输代表用户的被辨识的语音的一个或多个语音音频信号；并且阻止向远程定位设备传输不同于代表用户的被辨识的语音的一个或多个语音音频信号的至少一个背景噪声音频信号。
[0014]在一个实施例中，助听器系统可以基于跟踪的嘴唇运动选择性地放大音频信号。该系统可以包括被配置为从用户的环境捕获多个图像的可穿戴照相机、被配置为从用户的环境捕获声音的至少一个麦克风以及至少一个处理器。处理器可以被编程为接收由照相机
捕获的多个图像；在多个图像中的至少一个图像中识别至少一个个体的表示；基于对多个图像的分析，识别与个体的嘴相关联的至少一个嘴唇运动；接收代表由至少一个麦克风捕获的声音的音频信号；基于对由至少一个麦克风捕获的声音的分析，识别与第一语音相关联的至少第一音频信号和与不同于第一语音的第二语音相关联的至少第二音频信号；基于至少一个处理器确定第一音频信号与所识别的、与个体的嘴相关联的至少一个嘴唇运动相关联，引起对第一音频信号的选择性调节；并且使得选择性调节的第一音频信号传输到被配置为向用户的耳朵提供声音的听力接口设备。
[0015]在一个实施例中，一种方法可以基于跟踪的嘴唇运动选择性地放大音频信号。该方法可以包括接收由可穿戴照相机从用户的环境捕获的多个图像；在多个图像中的至少一个图像中识别至少一个个体的表示；基于对多个图像的分析，识别与个体的嘴相关联的至少一个嘴唇运动；接收代表由至少一个麦克风从用户的环境捕获本文档来自技高网...
【技术保护点】
【技术特征摘要】
1.一种用于选择性地调节与被辨识的对象相关联的音频信号的助听器系统，所述助听器系统包括：至少一个处理器，被编程为：接收由可穿戴麦克风获取的音频信号，其中所述音频信号代表从用户的环境中的对象发出的声音；分析接收到的音频信号以获得与所述用户的环境中的发声对象相关联的隔离音频流；从所述隔离音频流确定音频指纹；使用所述音频指纹从数据库检索与特定发声对象相关的信息；基于检索到的信息，引起对所述可穿戴麦克风从与所述至少一个发声对象相关联的区域接收到的至少一个音频信号的选择性调节；和使得至少一个调节后的音频信号传输到被配置为向所述用户的耳朵提供声音的听力接口设备。2.根据权利要求1所述的助听器系统，其中，所述至少一个处理器还编程为：基于所确定的语音指纹识别所述至少一个发声对象；从与所述特定发声对象的身份相关联的数据库检索预定设置；和基于与所述特定发声对象的身份相关联的预定设置引起至少一个音频信号的调节。3.根据权利要求1所述的助听器系统，其中，所述至少一个处理器还被编程为：访问至少一个识别数据库，所述识别数据库存储不同发声对象的参考音频指纹集；触发确定的音频指纹与所述参考音频指纹集之间的比较，以识别所述特定的发声对象；和基于与所述特定发声对象的身份相关的预定设置引起至少一个音频信号的调节。4.根据权利要求3所述的助听器系统，其中，当所述确定的音频指纹不匹配所述参考音频指纹集中的任何一个时，所述至少一个处理器还被编程为：确定特定参考音频指纹与所述确定的音频指纹之间的相似度水平的至少一个指示符；以及基于将相似度水平的所述至少一个指示符与预定阈值相比较，基于与所述特定参考音频指纹相关联的预定设置引起至少一个音频信号的调节。5.根据权利要求3所述的助听器系统，其中，当所述确定的音频指纹不与所述参考音频指纹集中的任何一个匹配时，所述至少一个处理器还被编程为：确定特定参考音频指纹与所述确定的音频指纹之间的相似度水平的至少一个指示符；以及基于将所述相似度水平的至少一个指示符与预定阈值相比较，基于所述确定的音频指纹更新所述参考音频指纹集。6.根据权利要求3所述的助听器系统，其中，所述参考音频指纹集包括基于所述特定个体站在所述用户旁边的实例确定的特定个体的第一参考音频指纹，以及基于所述特定个体的语音从通信设备投射的实例确定的所述特定个体的第二参考音频指纹。7.根据权利要求1所述的助听器系统，其中，所述至少一个处理器还被编程为基于与参考音频指纹集的比较确定与所述特定发声对象相关联的类型，并且基于所确定的所述特定发声对象的类型引起所述至少一个音频信号的选择性调节。
8.根据权利要求1所述的助听器系统，其中，检索到的信息指示所述用户与所述特定发声对象之间的预先存在的关系，并且所述至少一个处理器还被编程为基于预先存在的关系引起所述至少一个音频信号的选择性调节。9.根据权利要求1所述的助听器系统，其中，所述至少一个处理器还被编程为分析接收到的音频信号以隔离被确定为与所述用户的环境中的另一发声对象相关联的音频组，其中所述特定发声对象是第一个体，并且所述另一发声对象是第二个体，并且，以及基于检索到的与所述第一个体相关联的信息引起与所述第一个体相关联的音频信号的第一选择性调节，并且基于检索到的与所述第二个体相关联的信息引起与所述第二个体相关联的音频信号的不同于所述第一选择性调节的第二选择性调节。10.根据权利要求1所述的助听器系统，其中，所述至少一个处理器还被编程为：通过对所述音频信号的分析，隔离与所述用户的环境中相应的多个发声对象相关联的多个音频流，其中每个发声对象与唯一的音频指纹相关联；使用所述多个发声对象的音频指纹来确定与所述多个发声对象中的每一个相关联的类型的至少一个指示符；以及基于所确定的与所述多个发声对象中的每一个相关联的类型的至少一个指示符，...
【专利技术属性】
技术研发人员：Y韦克斯勒，A沙舒亚，
申请(专利权)人：奥康科技有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。