助听器系统和方法技术方案

技术编号:35244674 阅读:16 留言:0更新日期:2022-10-19 09:51
一种助听器及相关系统和方法。在一个实现中,助听器系统可以包括被配置为从用户的环境捕捉图像的可穿戴相机、配置为从所述用户的所述环境捕捉声音的麦克风和处理器。处理器可以被编程为接收由相机捕捉的图像;接收表示由麦克风捕捉的声音的音频信号;在第一模式下操作以引起对第一音频信号的第一选择性调节;基于对图像或音频信号中的至少一个的分析,确定切换到第二模式以引起对第一音频信号的第二选择性调节;以及使在第二模式下选择性地调节的第一音频信号传输到被配置为向用户的耳朵提供声音的听觉接口设备。供声音的听觉接口设备。供声音的听觉接口设备。

【技术实现步骤摘要】
【国外来华专利技术】助听器系统和方法
[0001]相关申请的交叉引用
[0002]本申请要求享有2020年1月3日提交的美国临时专利申请第62/956,744号;2020年2月6日提交的美国临时专利申请第62/970,726号;和2020年7月13日提交的美国临时专利申请第63/050,890号的优先权。通过引用将所有前述申请全部合并于本文。


[0003]本公开一般涉及用于从用户的环境捕捉和处理图像和音频以及使用从捕捉的图像和音频导出的信息的设备和方法。

技术介绍

[0004]当今,技术的进步使得可穿戴设备能够自动捕捉图像和音频,并且存储与捕捉的图像和音频相关联的信息。某些设备已经被用来数字记录一个体生活的方方面面和个体经历,这种实践通常被称为“生活记录”。有些人记录他们的生活,这样他们就可以从过去的活动中检索时刻,例如社交活动、旅行等。生活记录在其他领域(例如,商业、健身和医疗保健以及社会研究)也可能有显著的益处。生活记录设备虽然对跟踪日常活动很有用,但也可以通过基于对捕捉的图像和音频数据的分析的反馈和其他高级功能来增强一个体在其环境中的交互的能力来改进。
[0005]尽管用户可以用他们的智能手机捕捉图像和音频,一些智能手机应用程序可以处理捕捉的信息,但考虑到智能手机的尺寸和设计,智能手机可能不是用作生活记录装置的最佳平台。生活记录装置应该是小而轻的,这样他们就可以很容易地佩戴。此外,随着包括可穿戴装置在内的图像捕捉设备的改进,可以提供附加功能以帮助用户在环境中和周围导航,识别他们遇到的人和对象,以及向用户提供关于其周围环境和活动的反馈。因此,需要用于自动捕捉和处理图像和音频以向装置的用户提供有用信息的装置和方法,以及需要用于处理和利用由装置收集的信息的系统和方法。

技术实现思路

[0006]根据本公开的实施例提供了用于自动捕捉和处理来自用户环境的图像和音频的设备和方法,以及用于处理与从用户环境捕捉的图像和音频相关的信息的系统和方法。
[0007]在一个实施例中,提供了一种用于选择性地调节声音的助听器系统。该助听器系统包括配置为从用户的环境捕捉多个图像的可穿戴相机和配置为从用户的环境捕捉声音的至少一个麦克风。此外,助听器系统包括至少一个处理器,其被编程为接收由相机捕捉的多个图像,从用户的环境中接收表示由至少一个麦克风捕捉的声音的多个音频信号,以及在第一模式下操作以引起对多个音频信号中的第一音频信号的第一选择性调节。该处理器还被编程为基于对多个图像或多个音频信号中的至少一个的分析,确定切换到第二模式以引起对第一音频信号的第二选择性调节,该第二选择性调节相对于第一选择性调节在至少一个方面不同。该处理器还被编程为使在第二模式下被选择性调节的第一音频信号传输到
被配置为向用户的耳朵提供声音的听觉接口设备。
[0008]在一个实施例中,提供了一种用于选择性地调节声音的助听器系统。该助听器系统包括配置为从用户的环境捕捉多个图像的可穿戴相机和配置为从用户的环境捕捉声音的至少一个麦克风。助听器系统还包括至少一个处理器,其被编程为接收由相机捕捉的多个图像,从用户的环境中接收表示由至少一个麦克风捕捉的声音的多个音频信号,以及在多个模式下操作,其中多个模式包括第一模式和第二模式,其中在第一模式下操作引起对多个音频信号中的至少一个音频信号的第一选择性调节,并且其中,在第二模式下操作引起对至少一个音频信号的第二选择性调节,第二选择性调节相对于第一选择性调节在至少一个方面不同。此外,处理器被编程为基于对多个图像或多个音频信号中的至少一个的分析来选择第一模式或第二模式,并使基于所选模式被选择性地调节的至少一个音频信号传输到听觉接口设备,听觉接口设备被配置为向用户的耳朵提供声音。
[0009]在一个实施例中,提供了一种用于选择性地调节声音的助听器系统。该助听器系统包括被配置为从用户的环境捕捉多个图像的可穿戴相机,被配置为从用户的环境捕捉多个音频信号的至少一个麦克风,以及至少一个处理器。处理器被编程为接收由相机捕捉的多个图像,从用户的环境接收表示由至少一个麦克风捕捉的声音的多个音频信号,识别由多个图像中的至少一个或由多个音频信号中的至少一个表示的至少一个辨识出的个体,以及从存储器中检索与该至少一个辨识出的个体相关联的调节配置文件。此外,该处理器被编程为引起对与至少一个辨识出的个体相关联的多个音频信号中的第一音频信号进行选择性调节,该选择性调节是基于调节配置文件来确定的,并引起将经调节的第一音频信号传输到被配置为向用户的耳朵提供声音的听觉接口设备。
[0010]在一个实施例中,提供了一种用于选择性地调节声音的助听器系统。该助听器系统包括被配置为从用户的环境捕捉多个图像的可穿戴相机,被配置为从用户的环境捕捉多个音频信号的至少一个麦克风,以及至少一个处理器。处理器被编程为接收由相机捕捉的多个图像,从用户的环境接收表示由至少一个麦克风捕捉的声音的多个音频信号,识别由多个图像中的至少一个或由多个音频信号中的至少一个表示的个体群组,以及从存储器中检索与该个体群组相关联的调节配置文件。此外,该处理器被编程为引起对与该个体群组相关联的多个音频信号中的第一音频信号进行选择性调节,该选择性调节是基于调节配置文件来确定的,并引起将经调节的第一音频信号传输到被配置为向用户的耳朵提供声音的听觉接口设备。
[0011]在一个实施例中,一种用于选择性放大声音的助听器系统可以包括被配置为从用户的环境捕捉多个图像的可穿戴相机,被配置为从用户的环境捕捉声音的至少一个麦克风,以及至少一个处理器。该处理器可以被编程为接收由可穿戴相机捕捉的多个图像;从用户的环境接收表示由至少一个麦克风捕捉的声音的至少一个音频信号;基于对多个图像中的至少一个或至少一个音频信号的分析来识别用户的至少一个动作;基于识别出的动作,引起对由至少一个麦克风接收的至少一个音频信号进行选择性调节;以及使至少一个经调节的音频信号传输到听觉接口设备,该听觉接口设备被配置为向用户的耳朵提供声音。
[0012]在一个实施例中,一种用于选择性地放大声音的方法可以包括:通过可穿戴相机从用户的环境捕捉多个图像;通过至少一个麦克风从用户的环境捕捉声音;接收由可穿戴相机捕捉的多个图像;从用户的环境接收表示由至少一个麦克风捕捉的声音的至少一个音
频信号;基于对多个图像中的至少一个或至少一个音频信号的分析来识别用户的至少一个动作;基于识别出的动作,引起对由至少一个麦克风接收的至少一个音频信号进行选择性调节;以及使至少一个经调节的音频信号传输到听觉接口设备,该听觉接口设备被配置为向用户的耳朵提供声音。
[0013]在一个实施例中,一种用于选择性放大声音的助听器系统可以包括被配置为从用户的环境捕捉多个图像的可穿戴相机,被配置为从用户的环境捕捉声音的至少一个麦克风,以及至少一个处理器。该处理器可以被编程为:接收由相机捕捉的多个图像;识别多个图像中的至少一个图像中的第一个体的表示;接收表示由至少一个麦克风捕捉的声音的音频信号;基于对音频信号的分析,识别与第一个体相关联的第一语音相关联的第一音本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种用于选择性地调节声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉声音;以及至少一个处理器,被编程为:接收由所述相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的多个音频信号;在第一模式下操作,以引起对所述多个音频信号中的第一音频信号的第一选择性调节;基于对所述多个图像或所述多个音频信号中的至少一个的分析,确定切换到第二模式以引起对所述第一音频信号的第二选择性调节,所述第二选择性调节相对于所述第一选择性调节在至少一个方面不同;以及引起在所述第二模式下被选择性调节的所述第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。2.根据权利要求1所述的助听器系统,其中,确定切换到所述第二模式包括基于对所述多个图像的所述分析来识别在所述用户的所述环境中的个体正在说话。3.根据权利要求1所述的助听器系统,其中,所述第一选择性调节包括所述第一音频信号的放大。4.根据权利要求1所述的助听器系统,其中,所述第二选择性调节包括相对于所述第一音频信号对所述多个音频信号中的至少一个第二音频信号进行衰减。5.根据权利要求4所述的助听器系统,其中,所述第一音频信号与第一个体的语音相关联,并且所述第二音频信号与第二个体的语音相关联。6.根据权利要求1所述的助听器系统,其中,确定要切换到所述第二模式还基于与所述多个图像或所述多个音频信号中的所述至少一个相关联的背景。7.根据权利要求6所述的助听器系统,其中,所述背景指示所述用户进入房间。8.根据权利要求6所述的助听器系统,其中,所述背景指示所述用户离开房间。9.根据权利要求1所述的助听器系统,其中,所述至少一个处理器还被编程为引起在所述第一模式下被选择性调节的所述第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。10.一种用于选择性地调节声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉声音;以及至少一个处理器,被编程为:接收由所述相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的多个音频信号;在多个模式下操作,其中所述多个模式包括第一模式和第二模式,其中在所述第一模式下操作引起对所述多个音频信号中的至少一个音频信号的第一选择性调节,并且其中,在所述第二模式下操作引起对所述至少一个音频信号的第二选择性调节,所述第二选择性调节相对于所述第一选择性调节在至少一个方面不同;基于对所述多个图像或所述多个音频信号中的至少一个的分析,选择所述第一模式或
所述第二模式;以及引起基于所选择的模式选择性调节的所述至少一个音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。11.根据权利要求10所述的助听器系统,其中,选择所述第一模式或所述第二模式包括基于对所述多个图像的所述分析来识别在所述用户的所述环境中的个体正在说话。12.根据权利要求10所述的助听器系统,其中,所述第一选择性调节包括对所述至少一个音频信号进行放大。13.根据权利要求10所述的助听器系统,其中,所述第一选择性调节包括改变所述至少一个音频信号的振幅。14.根据权利要求10所述的助听器系统,其中,所述第一选择性调节包括改变所述至少一个音频信号的音高。15.根据权利要求10所述的助听器系统,其中,所述第一选择性调节包括对所述至少一个音频信号进行时间拉伸。16.根据权利要求10所述的助听器系统,其中,选择所述第一模式或所述第二模式是基于与所述多个图像或所述多个音频信号中的所述至少一个相关联的背景。17.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户正在参加演讲。18.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户正在参加社交事件。19.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户正在进入房间。20.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户正在离开房间。21.根据权利要求10所述的助听器系统,其中,选择所述第一模式或所述第二模式是基于从所述用户接收的选择。22.根据权利要求10所述的助听器系统,其中,所述选择是从智能手机或膝上型计算机中的至少一个接收的。23.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户正在进入演讲室,其中所述至少一个音频信号包括演讲者的讲话,并且其中所述第一选择性调节包括对第一至少一个音频信号的放大以及对包括背景噪声的所述多个音频信号中的至少另一个音频信号进行衰减。24.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户正在离开演讲室,其中所述至少一个音频信号包括在所述演讲室之外的活跃说话者的讲话,并且其中所述第一选择性调节包括对第一至少一个音频信号的放大。25.根据权利要求10所述的助听器系统,其中,所述背景指示所述用户仅在一个体的预定距离内,并且其中所述至少一个音频信号包括所述人的讲话,并且其中所述第一选择性调节包括对第一至少一个音频信号的放大。26.根据权利要求25所述的助听器系统,其中,所述预定距离为五米或更小。27.一种用于选择性地调节声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉多个音频信号;以及至少一个处理器,被编程为:
接收由所述相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的多个音频信号;识别由所述多个图像中的至少一个或由所述多个音频信号中的至少一个表示的至少一个辨识出的个体;从存储器中检索与所述至少一个辨识出的个体相关联的调节配置文件;引起对与所述至少一个辨识出的个体相关联的所述多个音频信号中的第一音频信号的选择性调节,所述选择性调节是基于所述调节配置文件来确定的;以及引起经调节的第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。28.根据权利要求26所述的助听器系统,其中,所述存储器位于与所述可穿戴相机相同的外壳内。29.根据权利要求26所述的助听器系统,其中,所述至少一个处理器还被编程为:确定对与所述辨识出的个体相关联的所述选择性调节的至少一个修改;以及基于所述修改更新所述调节配置文件。30.根据权利要求29所述的助听器系统,其中,所述至少一个处理器还被编程为应用所述至少一个修改。31.根据权利要求29所述的助听器系统,其中,所述至少一个修改包括由所述用户进行的调整。32.根据权利要求26所述的助听器系统,其中,所述至少一个修改是基于来自所述用户的听力困难的指示来确定的。33.根据权利要求32所述的助听器系统,其中,所述困难的指示经由来自所述用户的音频信号或经由所述助听器系统的接口接收的来自所述用户的输入中的一个来确定。34.根据权利要求33所述的助听器系统,其中,所述至少一个修改包括对所述第一音频信号的放大或修改所述第一音频信号的频谱中的一个。35.根据权利要求26所述的助听器系统,其中,所述选择性调节包括对与所述辨识出的个体不相关联的所述多个音频信号中的至少一个第二音频信号进行衰减。36.根据权利要求26所述的助听器系统,其中,所述调节配置文件包括用于基于所述第一音频信号的频率速率或振幅中的至少一个来选择性地调节所述第一音频信号的预定义滤波器。37.根据权利要求26所述的助听器系统,其中,所述至少一个处理器还被编程为:从所述用户接收用于对所述选择性调节的修改的指令;以及基于所述指令更新所述调节配置文件。38.根据权利要求26所述的助听器系统,其中,引起对所述第一音频信号的选择性调节包括改变与所述辨识出的个体相关联的语音的口音或音高中的至少一个。39.根据权利要求26所述的助听器系统,其中,所述处理器还被编程为:识别由所述多个图像中的至少一个或由所述多个音频信号中的至少一个表示的另一辨识出的个体;从所述存储器检索与所述另一辨识出的个体相关联的另一调节配置文件;引起对与所述另一辨识出的个体相关联的所述多个音频信号中的第二音频信号的另
一选择性调节,所述另一选择性调节是基于所述另一调节配置文件来确定的;以及引起经调节的第二音频信号传输到被配置为向所述用户的所述耳朵提供声音的所述听觉接口设备。40.一种用于选择性地调节声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉多个音频信号;以及至少一个处理器,被编程为:接收由所述相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的多个音频信号;识别由所述多个图像中的至少一个或由所述多个音频信号中的至少一个表示的个体群组;从存储器检索与所述个体群组相关联的调节配置文件;引起与所述个体群组相关联的所述多个音频信号中的第一音频信号的选择性调节,所述选择性调节是基于所述调节配置文件来确定的;以及引起经调节的第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。41.根据权利要求40所述的助听器系统,其中,所述存储器位于与所述可穿戴相机相同的外壳内。42.根据权利要求40所述的助听器系统,其中,所述至少一个处理器还被编程为:确定对与所述辨识出的个体相关联的所述选择性调节的至少一个修改;以及基于所述修改更新所述调节配置文件。43.根据权利要求42所述的助听器系统,其中,所述至少一个处理器还被编程为应用所述至少一个修改。44.根据权利要求42所述的助听器系统,其中,所述至少一个修改包括由所述用户进行的调整。45.根据权利要求40所述的助听器系统,其中,所述至少一个修改是基于来自所述用户的听力困难的指示来确定的。46.根据权利要求45所述的助听器系统,其中,所述困难的指示经由来自所述用户的音频信号或经由所述助听器系统的接口接收的来自所述用户的输入中的一个来确定。47.根据权利要求45所述的助听器系统,其中,所述至少一个修改包括对所述第一音频信号的放大或修改所述第一音频信号的频谱中的一个。48.根据权利要求40所述的助听器系统,引起对所述第一音频信号的选择性调节包括改变与所述辨识出的个体相关联的语音的口音或音高中的至少一个。49.一种用于选择性地放大声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉声音;以及至少一个处理器,被编程为:接收由所述可穿戴相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的至少一个音频
信号;基于对所述多个图像或所述至少一个音频信号中的至少一个的分析,识别所述用户的至少一个动作;基于识别出的动作,引起对由所述至少一个麦克风接收的所述至少一个音频信号进行选择性调节;以及引起至少一个经调节的音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。50.根据权利要求49所述的助听器系统,其中所述至少一个动作包括所述用户的讲话。51.根据权利要求50所述的助听器系统,其中,识别所述至少一个动作包括基于对所述至少一个音频信号的分析来检测所述用户所说的词语。52.根据权利要求51所述的助听器系统,其中,所述词语指示所述用户未听清楚。53.根据权利要求49所述的助听器系统,其中,所述至少一个处理器还被编程为:存储来自所述用户的所述至少一个动作之前的所述至少一个音频信号的一部分;以及基于所述至少一个动作,引起所述至少一个音频信号的已存储部分传输到所述听觉接口设备。54.根据权利要求49所述的助听器系统,其中,识别所述至少一个动作包括基于对所述多个图像的分析来检测所述用户的运动。55.根据权利要求54所述的助听器系统,其中,所述运动包括所述用户的手部移动。56.根据权利要求54所述的助听器系统,其中,所述运动包括所述用户的倾斜运动。57.根据权利要求56所述的助听器系统,其中,引起对所述至少一个音频信号的选择性调节包括对从所述倾斜运动的方向接收的所述至少一个音频信号进行放大。58.一种用于选择性地放大声音的方法,所述方法包括:通过可穿戴相机从用户的环境捕捉多个图像;通过至少一个麦克风从所述用户的所述环境捕捉声音;接收由所述可穿戴相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的至少一个音频信号;基于对所述多个图像中的至少一个或所述至少一个音频信号的分析来识别所述用户的至少一个动作;基于识别出的动作,引起对由所述至少一个麦克风接收的所述至少一个音频信号进行选择性调节;以及引起至少一个经调节的音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。59.根据权利要求58所述的方法,其中所述至少一个动作包括所述用户的讲话。60.根据权利要求59所述的方法,其中,识别所述至少一个动作包括基于对所述至少一个音频信号的分析来检测所述用户所说的词语。61.根据权利要求60所述的方法,其中,所述词语指示所述用户听不清楚。62.根据权利要求58所述的方法,还包括:存储来自所述用户的所述至少一个动作之前的所述至少一个音频信号的一部分;以及
基于所述至少一个动作,引起所述至少一个音频信号的已存储部分传输到所述听觉接口设备。63.根据权利要求58所述的方法,其中,识别所述至少一个动作包括基于对所述多个图像的分析来检测所述用户的运动。64.根据权利要求63所述的方法,其中,所述运动包括所述用户的手部移动。65.根据权利要求63所述的方法,其中,所述运动包括所述用户的倾斜运动。66.根据权利要求65所述的方法,其中,引起对所述至少一个音频信号的选择性调节包括对从所述倾斜运动的方向接收的所述至少一个音频信号进行放大。67.一种存储指令集的非暂时性计算机可读介质,所述指令集可由计算设备的至少一个处理器执行,以使所述计算设备执行用于选择性地放大声音的方法,所述方法包括:通过可穿戴相机从用户的环境捕捉多个图像;通过至少一个麦克风从所述用户的所述环境捕捉声音;接收由所述可穿戴相机捕捉的所述多个图像;接收表示由所述至少一个麦克风从所述用户的所述环境捕捉的声音的至少一个音频信号;基于对所述多个图像中的至少一个或所述至少一个音频信号的分析来识别所述用户的至少一个动作;基于识别出的动作,引起对由所述至少一个麦克风接收的所述至少一个音频信号进行选择性调节;以及引起至少一个经调节的音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。68.根据权利要求67所述的非暂时性计算机可读介质,其中,所述指令集可由所述计算设备的所述至少一个处理器执行以使所述计算设备还执行:存储来自所述用户的所述至少一个动作之前的所述至少一个音频信号的一部分;以及基于所述至少一个动作,引起所述至少一个音频信号的已存储部分传输到所述听觉接口设备。69.一种用于选择性地放大声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉声音;以及至少一个处理器,被编程为:接收由所述相机捕捉的所述多个图像;识别所述多个图像中的至少一个图像中的第一个体的表示;接收表示由所述至少一个麦克风捕捉的声音的音频信号;基于对所述音频信号的分析,识别与所述第一个体相关联的第一语音相关联的第一音频信号,以及与第二个体的第二语音相关联的第二音频信号;基于所述至少一个处理器确定所述第一音频信号与比所述第二音频信号的优先级高的优先级相关联,引起对所述第一音频信号进行选择性调节;以及引起经选择性调节的第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。
70.根据权利要求69所述的助听器系统,其中,确定所述第一音频信号与更高优先级相关联包括确定所述至少一个个体比所述第二语音的源更靠近所述用户。71.根据权利要求69所述的助听器系统,其中,确定所述第一音频信号与更高优先级相关联包括接收由所述用户配置的至少一个设置。72.根据权利要求71所述的助听器系统,其中,所述至少一个设置是从配对移动设备接收的。73.根据权利要求72所述的助听器系统,其中,所述至少一个设置由所述用户通过所述移动设备上的图形用户界面输入。74.根据权利要求69所述的助听器系统,其中,所述第一音频信号的选择性调节包括对所述第一音频信号进行放大。75.根据权利要求69所述的助听器系统,还包括对所述第二音频信号进行衰减。76.根据权利要求69所述的助听器系统,其中,确定所述第一音频信号与更高优先级相关联包括基于对所述多个图像中的至少一个图像的分析来识别至少一个动作。77.根据权利要求76所述的助听器系统,其中,所述至少一个动作包括朝向与所述第一音频信号相关联的个体的视线方向。78.根据权利要求76所述的助听器系统,其中,所述至少一个动作包括由所述用户朝向与所述第一音频信号相关联的个体的指向动作。79.一种用于选择性地放大声音的方法,所述方法包括:通过可穿戴相机从用户的环境捕捉多个图像;通过至少一个麦克风从所述用户的所述环境捕捉声音;接收由所述相机捕捉的所述多个图像;识别所述多个图像中的至少一个图像中的第一个体的表示;接收表示由所述至少一个麦克风捕捉的声音的音频信号;基于对所述音频信号的分析,识别与所述第一个体相关联的第一语音相关联的第一音频信号,以及与第二个体的第二语音相关联的第二音频信号;基于所述至少一个处理器确定所述第一音频信号与比所述第二音频信号的优先级高的优先级相关联,引起对所述第一音频信号进行选择性调节;以及引起经选择性调节的第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。80.根据权利要求79所述的方法,其中,确定所述第一音频信号与更高优先级相关联包括确定所述至少一个个体比所述第二语音的源更靠近所述用户。81.根据权利要求79所述的方法,其中,确定所述第一音频信号与更高优先级相关联包括接收由所述用户配置的至少一个设置。82.根据权利要求81所述的方法,其中,所述至少一个设置是从配对移动设备接收的。83.根据权利要求82所述的方法,其中,所述至少一个设置由所述用户通过所述移动设备上的图形用户界面输入。84.根据权利要求79所述的方法,其中,所述第一音频信号的选择性调节包括对所述第一音频信号进行放大。85.根据权利要求79所述的方法,还包括对所述第二音频信号进行衰减。
86.根据权利要求79所述的方法,其中,确定所述第一音频信号与更高优先级相关联包括基于对所述多个图像中的至少一个图像的分析来识别至少一个动作。87.根据权利要求86所述的方法,其中,所述至少一个动作包括朝向与所述第一音频信号相关联的个体的视线方向。88.一种存储指令集的非暂时性计算机可读介质,所述指令集可由计算设备的至少一个处理器执行,以使所述计算设备执行用于选择性地放大声音的方法,所述方法包括:通过可穿戴相机从用户的环境捕捉多个图像;通过至少一个麦克风从所述用户的所述环境捕捉声音;接收由所述相机捕捉的所述多个图像;识别所述多个图像中的至少一个图像中的第一个体的表示;接收表示由所述至少一个麦克风捕捉的声音的音频信号;基于对所述音频信号的分析,识别与所述第一个体相关联的第一语音相关联的第一音频信号,以及与第二个体的第二语音相关联的第二音频信号;基于所述至少一个处理器确定所述第一音频信号与比所述第二音频信号的优先级高的优先级相关联,引起对所述第一音频信号进行选择性调节;以及引起经选择性调节的第一音频信号传输到被配置为向所述用户的耳朵提供声音的听觉接口设备。89.一种用于选择性地放大声音的助听器系统,所述助听器系统包括:可穿戴相机设备,所述可穿戴相机设备包括:至少一个相机,被配置为从用户的环境捕捉多个图像;至少一个麦克风,被配置为从所述用户的所述环境捕捉声音;以及至少一个第一处理器,被编程为选择性地调节从所述至少一个麦克风接收的表示由所述至少一个麦克风捕捉的所述声音的音频信号;以及助听器设备,所述助听器设备包括:至少一个扬声器,被配置为向所述用户的耳朵提供声音;以及至少一个第二处理器,被编程为:使一个或多个指令传输到所述可穿戴相机设备;从所述可穿戴相机设备接收经调节的音频信号;以及基于所述经调节的音频信号,使用所述至少一个扬声器向所述用户的耳朵提供声音。90.根据权利要求89所述的助听器系统,还包括与所述助听器设备或所述可穿戴相机设备中的至少一个配对的移动设备。91.根据权利要求90所述的助听器系统,其中,所述移动设备包括用于从所述用户接收输入的用户界面。92.根据权利要求91所述的助听器系统,其中,所述至少一个第二处理器还被配置为基于来自所述用户的所述输入来确定所述一个或多个指令。93.根据权利要求89所述的助听器系统,还包括与所述助听器设备或所述可穿戴相机设备中的至少一个配对的测距设备。94.根据权利要求90所述的助听器系统,其中,所述移动设备包括用于向所述用户提供输出的用户界面。95.根据权利要求89所述的助听器系统,其中,所述可穿戴相机设备被配置为基于所述
一个或多个指令来捕捉所述多个图像和所述声音。96.根据权利要求92所述的助听器系统,其中,所述至少一个第一处理器被编程为基于所述一个或多个指令来选择性地调节音频信号。97.根据权利要求89所述的助听器系统,其中,所述经调节的音频信号包括经放大信号或经衰减信号中的至少一个。98.根据权利要求90所述的助听器系统,其中,所述移动设备与所述助听器设备或所述可穿戴相机设备中的至少一个无线配对。99.一种用于在助听器系统中放大声音的方法,所述方法包括:使用可穿戴相机设备的至少一个相机从可穿戴的用户的环境捕捉多个图像;使用所述可穿戴相机设备的至少一个麦克风从所述用户的所述环境捕捉声音;使用至少一个第一处理器选择性地调节从所述至少一个麦克风接收的表示由所述至少一个麦克风捕捉的所述声音的音频信号;以及通过使用所述助听器设备的至少一个第二处理器,使用所述助听器设备的至少一个扬声器向所述用户的耳朵提供声音,所述至少一个第二处理器被编程为:使一个或多个指令传输到所述可穿戴相机设备;从所述可穿戴相机设备接收经调节的音频信号;以及基于所述经调节的音频信号,使用所述至少一个扬声器向所述用户的耳朵提供声音。100.根据权利要求99所述的方法,还包括将移动设备与所述助听器设备或所述可穿戴相机设备中的至少一个配对。101.根据权利要求100所述的方法,还包括经由所述移动设备的用户界面从所述用户接收输入。102.根据权利要求101所述的方法,其中,所述至少一个第二处理器还被编程为基于来自所述用户的所述输入来确定所述一个或多个指令。103.根据权利要求99所述的方法,还包括使用与所述助听器设备或所述可穿戴相机设备中的至少一个配对的测距设备来确定范围。104.根据权利要求100所述的方法,其中,所述移动设备包括用于向所述用户提供输出的用户界面。105.根据权利要求102所述的方法,其中,所述可穿戴相机设备被配置为基于所述一个或多个指令来捕捉所述多个图像和所述声音。106.根据权利要求102所述的方法,其中,所述至少一个第一处理器被编程为基于所述一个或多个指令来选择性地调节音频信号。107.根据权利要求99所述的方法,其中,所述经调节的音频信号包括经放大信号或经衰减信号中的至少一个。108.根据权利要求100所述的方法,其中,所述移动设备与所述助听器设备或所述可穿戴相机设备中的至少一个无线配对。109.一种用于选择性地放大声音的助听器系统,所述助听器系统包括:可穿戴相机,被配置为从用户的环境捕捉多个图像,所述可穿戴相机具有图像捕捉参数;至少一个麦克风,被配置为从所述用户的所述环境捕捉声音;以及
至少一个处理器,被编程为执行以下步骤:接收由所述相机捕捉的所述多个图像;接收表示由所述至少一个麦克风捕捉的声音的音频信号;识别所述多个图像中的至少一个图像中的至少一个个体的表示;基于所述多个图像或所述音频信号中的至少一个,检测与所述至少一个个体相关联的语速;以及基于检测到的语速,引起对所述可穿戴相机的所述图像捕捉参数进行调整。110.根据权利要求109所述的助听器系统,其中,所述图像捕捉参数是所述相机的帧速率。111.根据权利要求109所述的助听器系统,其中,检测所述语速包括:基于对所述多个图像的分析,识别与所述至少一个个体的嘴相关联的至少一个唇部移动;以及基于所述唇部移动来确定所述语速。112.根据权利要求109所述的助听器系统,其中,检测所述语速包括:基于对所述音频信号的分析,识别所述个体所说的多个词语;以及基于所述多个词语来确定所述语速。113.根据权利要求112所述的助听器系统,其中,识别所述多个词语包括使用语音识别算法。114.根据权利要求112所述的助听器系统,其中,引起对所述可穿戴相机的所述图像捕捉参数进行所述调整包括:基于确定语速大于阈值而增加所述相机的帧速率。115.根据权利要求112所述的助听器系统,其中,引起对所述可穿戴相机的所述图像捕捉参数进行所述调整包括:基于确定语速小于阈值而降低所述相机的帧速率。116.根据权利要求109所述的助听器系统,其中,所述图像捕捉参数是捕捉图像的分辨率或所述捕捉图像的压缩。117.根据权利要求109所述的助听器系统,其中,所述至少一个处理器还被编程为执行步骤:基于检测到的光线水平,引起对所述可穿戴相机的所述图像捕捉参数进行调整。118.根据权利要求109所述的助听器系统,其中,所述至少一个处理器还被编程为执行步骤:基于位置信息,引起对所述可穿戴相机的所述图像捕捉参数进行调整。119.根据权利要求109所述的助听器系统,其中,所述至少一个麦克风具有音频捕捉参数,并且所述至少一个处理器还被编程为执行步骤:基于检测到的语速,引起对所述至少一个麦克风的所述音频捕捉参数进行调整。120.一种用于在助听器系统中放大声音的方法,所述方法包括:接收由可穿戴相机捕捉的所述多个图像;接收表示由至少一个麦克风捕捉的声音的音频信号;识别所述多个图像中的至少一个图像中的至少一个个体的表示;
基于所述多个图像或所述音频信号中的至少一个,检测与所述至少一个个体相关联的语速;以及基于检测到的语速,引起对所述可穿戴相机的图像捕捉参数进行调整。121.根据权利要求120所述的方法,其中,所述图像捕捉参数是所述相机的帧速率。122.根据权利要求120所述的方法,其中,检测所述语速包括:基于对所述多个图像的分析,识别与所述至少一个个体的嘴相关联的至少一个唇部移动;以及基于所述唇部移动来确定所述语速。123.根据权利要求120所述的方法,其中,检测所述语速包括:基于对所述音频信号的分析,识别所述个体所说的多个词语;以及基于所述多个词语来确定所述语速。124.根据权利要求123所述的方法,其中,识别所述多个词语包括使用语音识别算法。125.根据权利要求123所述的方法,其中,引起对所述可穿戴相机的所述图像捕捉参数进行所述调整包括:基于确定语速大于阈值而增加所述相机的帧速率。126.根据权利要求123所述的方法,其中,引起对所述可穿戴相机的所述图像捕捉参数进行所述调整包括:基于确定语速小于阈值而降低所述相机的帧速率。127.根据权利要求123所述的方法,所述图像捕捉参数是捕捉图像的分辨率或所述捕捉图像的压缩。128.根据权利要求120所述的方法,其中,所述步骤还包括:基于检测到的光线水平,引起对所述可穿戴相机的所述图像捕捉参数进行调整。129.根据权利要求120所述的方法,其中,所述步骤还包括:基于位置信息,引起对所述可穿戴相机的所述图像捕捉参数进行调整。130.根据权利要求120所述的方法,其中,所述步骤还包括:基于检测到的语速,引起对所述至少一个麦克风的音频捕捉参数进行调整。131.一种用于选择性地放大音频信号的助听器系统,所述助听器系统包括:至少一个麦克风,被配置为从所述用户的环境捕捉声音;以及至少一个处理器,被编程为:接收表示由所述至少一个麦克风捕捉的所述声音的音频信号;接收与处理所述音频信号相关联的时间延迟的指示;在缓冲器中存储表示所述音频信号的部分的多个音频样本;以及处理所述多个音频样本中的第一音频样本以产生经处理的第一音频样本,其中处理所述第一音频样本...

【专利技术属性】
技术研发人员:Y维克斯勒A沙舒亚
申请(专利权)人:奥康科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1