用于提供声源信息的方法和装置及增强现实眼镜制造方法及图纸

本发明专利技术实施例提供一种用于提供声源信息的方法和装置及增强现实眼镜，属于增强现实技术领域。该方法包括：接收至少一个声源的语音；基于接收的所述至少一个声源中的每一声源的语音，确定所述至少一个声源中的每一声源的方位，其中所述方位以接收至少一个声源的语音的语音接收模块为基准点；识别所述至少一个声源中的每一声源的语音，以将所述至少一个声源中的每一声源的语音转化成文字；以及显示所述至少一个声源中的每一声源的方位及语音所转化的文字。藉此，实现了使得听障人士可以明白声源发出的语音的内容的同时能够清楚、直观的了解声源的方位，从而使得听障人士能更好的把握声源发出的语音的内容。

【技术实现步骤摘要】
用于提供声源信息的方法和装置及增强现实眼镜
本专利技术涉及增强现实
，具体地涉及用于提供声源信息的方法和装置及增强现实眼镜。
技术介绍
增强现实(AugmentedReality，AR)技术，是一种通过实时计算影像的位置及角度，在影像上叠加相应的图像、视频、3D模型，进而对虚拟世界与现实世界进行融合的技术。AR客户端可以结合直接存储在其本地的图片识别物料，对用户的线下环境进行实时的图像识别，并在识别出的特定的线下目标在真实场景中的位置上，按照预配置的展示效果增强显示相应的展示数据。随着技术的发展，增强现实技术的应用很广泛，但对于听障人士而言，增强现实技术却没有很好的帮助到他们。当前，听障人士与健听人沟通主要通过以下两种途径：手语翻译员或佩戴助听器。但是，这两种沟通途径都不能很好的使得听障人士了解声源的位置，影响听障人士把握从声源发出的语音的内容。
技术实现思路
本专利技术的目的是提供一种用于提供声源信息的方法和装置及增强现实眼镜，其可实现在使得听障人士明白声源发出的语音的内容的同时能够了解声源的方位。为了实现上述目的，本专利技术的一个方面提供一种用于提供声源信息的方法，该方法包括：接收至少一个声源的语音；基于接收的所述至少一个声源中的每一声源的语音，确定所述至少一个声源中的每一声源的方位，其中所述方位以接收至少一个声源的语音的语音接收模块为基准点；识别所述至少一个声源中的每一声源的语音，以将所述至少一个声源中的每一声源的语音转化成文字；以及显示所述至少一个声源中的每一声源的方位及语音所转化的文字。可选地，所述方位包括方向和/或距离。可选地，所述方向被采用箭头表示，所述箭头位于一圆周划定的区域内，所述箭头偏离穿过该圆周的纵轴一角度。相应地，本专利技术的另一方面提供一种用于提供声源信息的装置，该装置包括：语音接收模块，用于接收至少一个声源的语音；确定模块，用于基于接收的所述至少一个声源中的每一声源的语音，确定所述至少一个声源中的每一声源的方位，其中所述方位以所述语音接收模块为基准点；语音识别模块，用于识别所述至少一个声源中的每一声源的语音，以将所述至少一个声源中的每一声源的语音转化成文字；以及显示模块，用于显示所述至少一个声源中的每一声源的方位及语音所转化的文字。可选地，所述方位包括方向和/或距离。可选地，所述方向被采用箭头表示，所述箭头位于一圆周划定的区域内，所述箭头偏离穿过该圆周的纵轴一角度。可选地，所述显示模块为近眼显示器。可选地，所述近眼显示器为透视式近眼显示器。此外，本专利技术的另一方面还提供一种增强现实眼镜，该增强现实眼镜包括上述的装置。另外，本专利技术的另一方面还提供一种机器可读存储介质，该机器可读存储介质上存储有指令，该指令用于使得机器执行上述的方法。通过上述技术方案，显示至少一个声源中的每一声源的语音转化的文字使得听障人士可以明白每一声源的语音的内容；显示至少一个声源中的每一声源的方位，实现了以简单、直观的方式提示听障人士语音的发声位置。如此，使得听障人士在观看“字幕”以理解收听到的语音信息的同时获取类似于常人的对位置的感知，实现了使得听障人士可以明白每个声源发出的语音的内容的同时能够清楚、直观的了解每个声源的方位，从而使得听障人士能更好的把握每个声源发出的语音的内容。特别地，在存在多个声源的环境下，使得听障人士清楚每个声源的方位，非常有助于听障人士与他人的交流。本专利技术的其它特征和优点将在随后的具体实施方式部分予以详细说明。附图说明附图是用来提供对本专利技术实施例的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本专利技术实施例，但并不构成对本专利技术实施例的限制。在附图中：图1是本专利技术一实施例提供的用于提供声源信息的方法的流程图；图2是本专利技术另一实施例提供的使用箭头表示方向的示例图；图3是本专利技术另一实施例提供的方位的示例图；图4是本专利技术另一实施例提供的显示一声源的方位及语音转化的文字的示例图；图5是本专利技术另一实施例提供的显示多个声源的方位及语音转化的文字的示例图；以及图6是本专利技术另一实施例提供的用于提供声源信息的装置的结构框图。附图标记说明1语音接收模块2确定模块3语音识别模块4显示模块具体实施方式以下结合附图对本专利技术实施例的具体实施方式进行详细说明。应当理解的是，此处所描述的具体实施方式仅用于说明和解释本专利技术实施例，并不用于限制本专利技术实施例。本专利技术实施例的一个方面提供一种用于提供声源信息的方法。图1是本专利技术一实施例提供的用于提供声源信息的方法的流程图。如图1所示，该方法包括以下步骤。在步骤S10中，接收至少一个声源的语音。在步骤S11中，基于接收的至少一个声源中的每一声源的语音，确定至少一个声源中的每一声源的方位。其中，确定声源的方位可以是基于接收到从声源发出的语音的时间。例如，用于接收至少一个声源的语音的语音接收模块包括多个语音采集模块，该多个语音采集模块被设置在不同的位置，多个语音采集模块接收到从同一声源发出的语音的时间不同。针对至少一个声源中的每一声源，根据语音到达多个语音采集模块的时间的不同，即，根据语音到达多个语音采集模块的时间差，确定声源的方位。可选地，在本专利技术实施例中，语音采集模块可以是麦克风，该语音接收模块可以是麦克风阵列。例如，麦克风阵列可以包括2、4、6、7或8个麦克风。可选地，在本专利技术实施例中，方位的基准点可以根据实际情况进行设置，例如，可以是语音接收模块所在的位置。具体地，可以是多个语音采集模块中的任一语音采集模块，或者还可以是多个语音采集模块的中间位置。另外，当语音接收模块被听障人士佩戴或者距离听障人士的距离不远时，以语音接收模块为基准点，实际即以听障人士为基准点，如此，听障人士可以基于确定出的方位了解声源相对于自己的位置。可选地，在本专利技术实施例中，方位可以包括方向和/或距离。可选地，在本专利技术实施例中，可以采用箭头表示方向，箭头位于一圆周划定的区域内，箭头的起点为该圆周的原点，其中，该原点相当于听障人士所在位置，箭头偏离穿过该圆周的纵轴一角度，如图2所示，图中竖向虚线为穿过圆周的纵轴。此外，以圆周的横轴为基准，如图2所示的横向虚线所示，当箭头位于横轴以上的部分时，表示声源在听障人士的前方；当箭头位于横轴以下的部分时，表示声源在听障人士的后方。例如，以如2所示的方向示例为例，该箭头表示的声源在听障人士的前方。另外，该以箭头表示声源的方向的方式还可以解读为采用时钟来表示方向。其中圆周代表表盘，位于圆周的横轴的上半部分的纵轴表示12点钟方向，根据箭头偏离12点钟的角度确定声源大概在几点钟方向。以图2所示的方向示例为例，箭头表示的声源大概在10点钟方向。另外，在方位包括方向和距离的情况下，可以采用如图3所示的示例表示方位。需要说明的是，显示距离的位置可以根据实际情况进行设定，对此，不进行限制。此外，在方位仅包括距离的情况下，可以仅显示距离。特别地，当基于接收到的语音确定声源来自于听障人士本人时，采用箭头表示声源的方向时，在圆周中心显示“O”或者“●”来表示声源的方向。另外，在本专利技术实施例中，还可以采用文字描述方位，例如，以图3所示的方位为例，可以显示文字“方向为十点钟方向，距离为50cm”。在步骤S12中，识别至少一个声源中的每一声源的语音，以将至少一个声源中的每一本文档来自技高网...

【技术保护点】
1.一种用于提供声源信息的方法，其特征在于，该方法包括：接收至少一个声源的语音；基于接收的所述至少一个声源中的每一声源的语音，确定所述至少一个声源中的每一声源的方位，其中所述方位以接收至少一个声源的语音的语音接收模块为基准点；识别所述至少一个声源中的每一声源的语音，以将所述至少一个声源中的每一声源的语音转化成文字；以及显示所述至少一个声源中的每一声源的方位及语音所转化的文字。

【技术特征摘要】
1.一种用于提供声源信息的方法，其特征在于，该方法包括：接收至少一个声源的语音；基于接收的所述至少一个声源中的每一声源的语音，确定所述至少一个声源中的每一声源的方位，其中所述方位以接收至少一个声源的语音的语音接收模块为基准点；识别所述至少一个声源中的每一声源的语音，以将所述至少一个声源中的每一声源的语音转化成文字；以及显示所述至少一个声源中的每一声源的方位及语音所转化的文字。2.根据权利要求1所述的方法，其特征在于，所述方位包括方向和/或距离。3.根据权利要求2所述的方法，其特征在于，所述方向被采用箭头表示，所述箭头位于一圆周划定的区域内，所述箭头偏离穿过该圆周的纵轴一角度。4.一种用于提供声源信息的装置，其特征在于，该装置包括：语音接收模块，用于接收至少一个声源的语音；确定模块，用于基于接收的所述至少一个声源中的每一声源的语音，确定所述至少一个声源中的每一声源的方位，其...

【专利技术属性】
技术研发人员：张志扬，苏进，苏卓然，李琦，杨莉，
申请(专利权)人：北京佳珥医学科技有限公司，
类型：发明
国别省市：北京,11