一种聋哑人辅助方法、装置以及电子设备制造方法及图纸

本发明专利技术的实施例提供一种聋哑人辅助方法、装置以及电子设备，涉及智能装置技术领域，用于辅助聋哑人方便、快捷的感知声音，该方法包括：接收声音；对声音进行识别并根据识别结果将声音转换为显示信号；在显示信号的驱动下进行显示。本发明专利技术实施例用于聋哑人的辅助。

【技术实现步骤摘要】
【国外来华专利技术】一种聋哑人辅助方法、装置以及电子设备
本专利技术涉及智能装置
，尤其涉及一种聋哑人辅助方法、装置以及电子设备。
技术介绍
听觉是人类感知世界的一种重要方式。人类通过听觉可以实现人与人之间的思想与感情的传递和反馈、躲避环境中的危险状况等。调查显示，听力语言残疾人数居视力残疾、肢残、肢残等五大残疾人数之首，仅中国听力语言残疾人数就有2000万左右，并且其中包括许多七岁以下的儿童。听力语言残疾人群由于听力语言能力的缺陷，造成生活中存在非常多的障碍，因此听力语言残疾人群是亟需帮助的。目前，常见的听力常见的聋哑人辅助设备包括：助听器或人工耳蜗，这些设备对很多聋哑人都有帮助，但同时也存在一定的局限性。一方面，不同残疾程度对助听器或人工耳蜗的设备参数要求不同，用户在选择相应产品时需要复杂的甄选过程。另一方面，对于听力在语前已完全丧失且成年人，即使通过人工耳蜗植入等方式使其恢复听觉，也不是恢复听觉后就能听懂说话，而是要进行语言训练，而且由于错过了最佳语言学习期，语言训练效果往往不理想，导致交流时仍存在较大的障碍。综上，现有技术中的聋哑人辅助设备一定的局限性，如何辅助聋哑人方便、快捷的感知声音仍是本领域技术人员不断研究的问题。
技术实现思路
本专利技术的实施例提供一种聋哑人辅助方法、装置以及电子设备，主要用于辅助聋哑人方便、快捷的感知声音。为达到上述目的，本专利技术的实施例采用如下技术方案：第一方面，提供一种聋哑人辅助方法，包括：接收声音；对所述声音进行识别并根据识别结果将所述声音转换为显示信号；在所述显示信号的驱动下进行显示。第二方面，提供一种交流辅助装置，包括：接收单元，用于接收声音；转换单元，用于对所述声音进行识别并根据识别结果将所述声音转换为显示信号；显示单元，用于在所述显示信号的驱动下进行显示。第三方面，提供一种电子设备，包括：声音采集设备、显示设备、存储器和处理器，声音采集设备、显示设备和存储器耦合至所述处理器；所述存储器用于存储计算机执行代码，所述计算机执行代码用于控制所述处理器执行第一方面所述的聋哑人辅助方法。第四方面，提供一种存储介质，其特征在于，用于储存为第二方面所述的交流辅助装置所用的计算机软件指令，其包含执行第一方面所述的聋哑人辅助方法所设计的程序代码。第五方面，提供一种计算机程序产品，可直接加载到计算机的内部存储器中，并含有软件代码，所述计算机程序经由计算机载入并执行后能够实现第一方面所述的聋哑人辅助方法。本专利技术的实施例提供的聋哑人辅助方法，首先接收声音，然后对接收到的声音行识别并根据识别结果将声音转换为显示信号，最后在显示信号的驱动下进行显示，由于本专利技术实施例提供的聋哑人辅助方法可以将接收到的声音转换为显示信号，并将在显示信号的驱动下进行显示，即可以将接收到的听觉信号转换成视觉信号，进而使聋哑人通过视觉看到与声音对应的显示内容，因此通过本专利技术实施例提供的聋哑人辅助方法可以辅助聋哑人感知声音。此外，相比于现有技术中的聋哑人辅助设备，本专利技术实施例提供的聋哑人辅助方法无需复杂的甄选过程，也无需进行语言训练，因此相比于现有技术本专利技术实施例提供的聋哑人辅助方法可以辅助聋哑人方便、快捷的感知声音。附图说明为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术的实施例提供的聋哑人辅助方法的步骤流程图之一；图2为本专利技术的实施例提供的聋哑人辅助方法的步骤流程图之二；图3为本专利技术的实施例提供的聋哑人辅助方法的步骤流程图之三；图4为本专利技术的实施例提供的声音方位与显示位置的对应关系的示意图；图5为本专利技术的实施例提供的聋哑人辅助方法的步骤流程图之四；图6为本专利技术的实施例提供的聋哑人辅助装置的示意性结构图之一；图7为本专利技术的实施例提供的聋哑人辅助装置的示意性结构图之二；图8为本专利技术的实施例提供的聋哑人辅助装置的示意性结构图之三；图9为本专利技术的实施例提供的电子设备的示意性结构图。具体实施方式本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。如果不加说明，本文中的“多个”是指两个或两个以上。需要说明的是，本专利技术实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本专利技术实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。需要说明的是，本专利技术实施例中，除非另有说明，“多个”的含义是指两个或两个以上。需要说明的是，本专利技术实施例中，“的(英文：of)”，“相应的(英文：corresponding，relevant)”和“对应的(英文：corresponding)”有时可以混用，应当指出的是，在不强调其区别时，其所要表达的含义是一致的。下面将结合本专利技术实施例的说明书附图，对本专利技术实施例提供的技术方案进行说明。显然，所描述的是本专利技术的一部分实施例，而不是全部的实施例。需要说明的是，下文所提供的任意多个技术方案中的部分或全部技术特征在不冲突的情况下，可以结合使用，形成新的技术方案。本专利技术实施例所提供的技术方案的基本原理为：对接收到的声音进行识别，将接收到的声音转换为显示信号并在显示信号的驱动下将声音对应的内容显示出来，从而使聋哑人通过观看与声音对应的视觉信息感知声音。本专利技术实施例提供的聋哑人辅助方法的执行主体可以为聋哑人辅助装置或者可以用于执行聋哑人辅助方法的电子设备。其中，聋哑人辅助装置可以为上述电子设备中的中央处理器(CentralProcessingUnit，CPU)、CPU与存储器等硬件的组合、或者可以为上述电子设备中的其他控制单元或者模块。示例性的，上述电子设备可以为采用本专利技术实施例提供的方法进行聋哑人辅助的手机、增强现实眼镜(简称：AR眼镜)、个人计算机((personalcomputer，PC)、上网本、个人数字助理(英文：PersonalDigitalAssistant，简称：PDA)、服务器等，或者上述电子设备可以为安装有可以进行聋哑人辅助的软件客户端或软件系统或软件应用的PC、服务器等，具体的硬件实现环境可以通用计算机形式，或者是ASIC的方式，也可以是FPGA，或者是一些可编程的扩展平台例如Tensilica的Xtensa平台等等。基于上述内容，本专利技术的实施例提供一种聋哑人辅助方法，具体的参照图1所示，该聋哑人辅助方法包括如下步骤：S11、接收声音。具体的，上述实施例中的声音可以为他人与用户进行交流时发出的说话声音、广播发出的说话声音等；也可以为环境中的声音，例如：汽车鸣笛的声音、狗叫的声音、打雷的声音等。此外，上述步骤S11中具体可以通过麦克风(英文名称：microphone，简称：Mic)、Mic阵列等声音感应装置来对声音进行接收。S12、对声音进行识别并根据识别结果将声音转换为显示信号本文档来自技高网...

【技术保护点】
一种聋哑人辅助方法，其特征在于，包括：接收声音；对所述声音进行识别并根据识别结果将所述声音转换为显示信号；在所述显示信号的驱动下进行显示。

【技术特征摘要】
【国外来华专利技术】1.一种聋哑人辅助方法，其特征在于，包括：接收声音；对所述声音进行识别并根据识别结果将所述声音转换为显示信号；在所述显示信号的驱动下进行显示。2.根据权利要求1所述的方法，其特征在于，所述对所述声音进行识别并根据识别结果将所述声音转换为显示信号，包括：对所述声音的种类进行识别；当所述声音为说话声时，识别所述说话声的内容，根据所述说话声的内容将所述说话声转换为用于驱动显示文字的显示信号；和/或，当所述声音为环境声时，识别所述环境声的类别，根据所述环境声的类别将所述环境声转换为用于驱动显示标识的显示信号。3.根据权利要求2所述的方法，其特征在于，所述方法还包括：获取相对人的图像；其中，所述相对人为发出说话声的人；根据所述相对人的图像获取所述相对人的嘴唇动作；所述根据所述说话声的内容将所述说话声转换为用于驱动显示文字的显示信号,包括：根据所述说话声的内容和所述相对人的嘴唇动作将所述说话声转换为用于驱动显示文字的显示信号。4.根据权利要求1所述的方法，其特征在于，所述方法还包括：获取所述声音的方位；所述在所述显示信号的驱动下进行显示，包括：根据所述声音的方位在所述显示信号的驱动下在显示界面的相应位置上进行显示。5.根据权利要求1所述的方法，其特征在于，所述对所述声音进行识别并根据识别结果将所述声音转换为显示信号包括：将所述声音发送至远端服务器，以便所述与端服务器对所述声音进行识别并根据识别结果将所述声音转换为显示信号；接收所述远端服务器发送的显示信号。6.根据权利要求1所述的方法，其特征在于，所述方法还包括：检测用户的手部动作；对所述用户的手部动作进行识别并根据识别结果将所述用户的手部动作转换为语音；对所述语音进行播报。7.一种聋哑人辅助装置，其特征在于，包括：接收单元，用于接收声音；转换单元，用于对所述声音进行识别并根据识别结果将所述声音转换为显示信号；显示单元，用于在所述显示信号的驱动下进行显示。8.根据权利要求7所述的装置，其特征在于，所述转换单元具体用于对所述声音的种类进行识别；所述转换单元具体用于当所述声音为说话声时，...

【专利技术属性】
技术研发人员：廉士国，李强，
申请(专利权)人：深圳前海达闼云端智能科技有限公司，
类型：发明
国别省市：广东,44