用于语音识别和手语识别的智能眼镜制造技术

本实用新型专利技术提供一种用于语音识别和手语识别的智能眼镜，包括镜框及设置在镜框上的智能装置，该智能装置包括雷达、扬声器、麦克风、显示器、处理器；雷达收集手语信息，麦克风收集语音信息；处理器用于将手语信息转化为待播放的语音信息实现手语识别或将收集的语音信息转化为文字信息实现语音识别，通过显示器和扬声器将文字信息显示和语音信息播放出来，听障人士佩戴该智能眼镜可以实现与正常人无障碍交流。

Intelligent glasses for speech recognition and sign language recognition

The utility model provides a smart glasses for speech recognition and gesture recognition, including intelligent device arranged on the frame and the frame of the intelligent device, including radar, speaker, microphone, display, radar processor; collection of sign language information, collect the microphone voice information; processor for sign language information into voice information to achieve playback sign language recognition or collect voice information into speech recognition text information, through the display and speaker text information display and voice broadcast information, hearing impaired people wearing the smart glasses can achieve barrier free communication with normal people.

【技术实现步骤摘要】
用于语音识别和手语识别的智能眼镜
本技术涉及智能穿戴设备领域，特别涉及一种用于语音识别和手语识别的智能眼镜。
技术介绍
目前，全国范围内的听障人超过两千万人(数据来源，中国残疾人联合会)，由于该人群无法与正常人(即非听障人)直接进行语言交流，从而造成这样一个庞大的群体一直生活在社会的边缘，他们很难真正融入这个社会。当前，听障人与正常人沟通主要通过以下两种途径：手语员翻译或佩戴助听器。由于手语员人才十分稀缺；其次大多数交流场景都是随机出现的，很难保证手语员及时出现在听障人身边；再加上聘用专职手语员花费较大，一般听障人很难承担。对于不同的听障人，助听器的效果不尽相同，佩戴助听器对于神经性耳聋患者效果甚微。长久佩戴助听器会导致耳朵很不舒服，还有可能引发中耳炎等不良后果。随着科技的发展和人们生活水平的不断提高，各种智能眼镜为听障人提供了一种与正常人交流的工具，它通过将听障人士的手语信息转化为普通正常人可以识别的信息，同时将正常人的语音信息转化为听障人可以识别的信息来实现听障人士与正常人的交流。但由于目前智能眼镜主要使用摄像头来采集手语信息，存在着采集信息识别率不高，抗干扰能力差，对光线要求高，并且直接使用智能眼镜的镜片作为显示设备，不利于后续用户增加矫正视力的镜片，这些都使该类智能眼镜没有大规模推广应用。
技术实现思路
鉴于上述现有技术的不足，本技术的目的在于提供一种用于语音识别和手语识别的智能眼镜，其结构轻巧，操作方便，转化识别率高，抗干扰能力强，为听障人士提供一种使用方便的智能眼镜，方便听障人与正常人无障碍交流。本技术的技术方案如下：一种用于语音识别和手语识别的智能眼镜，包括镜框及设置在镜框上的智能装置，该智能装置包括雷达、扬声器、麦克风、显示器、处理器；其中，所述雷达固定设置在所述智能装置的下方，所述扬声器和麦克风固定设置在所述智能装置的前方；所述雷达用于收集手语信息；所述麦克风用于收集语音信息；所述处理器用于将手语信息转化为待播放的语音信息实现手语识别或将收集的语音信息转化为文字信息实现语音识别；所述扬声器用于播放语音信息；所述显示器用于显示文字信息；如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述镜框上设置有加装镜片的内槽和固定孔。如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述雷达为谷歌的Soli微型雷达芯片。如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述显示器为近眼显示的穿透式光学引擎。如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述电子系统还包括：通信模块，与所述处理器连接，用于与蓝牙耳机、移动终端和云端服务器建立无线通信；触控板，用于操作该智能眼镜进行各种参数设置或待机状态下唤醒智能眼镜；如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述语音识别和手语识别支持离线识别和在线识别。如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述智能装置上安装有智能操作系统。如上所述的用于语音识别和手语识别的智能眼镜，优选的是，所述显示器还用于用户操作该智能眼镜时的交互反馈界面；所述处理器还用于信息的接收与转发。所述雷达、扬声器、麦克风、显示器和处理器均采用低功耗或超低功耗技术的芯片并且任一器件均可替换为不同配置参数的同类器件。本技术与现有技术相比，其有益效果在于：本技术的技术方案是采用雷达来实现手语感知，相比传统的摄像头来实现手语感知具有如下优点：高流畅性，高精准度，抗干扰强，可在低光亮环境使用。该技术方案通过将听障人的手语信息转化为语音信息播放给正常人听，而将正常人的语音信息转化为文字信息展示给听障人看，这样就实现了听障人士与正常人的无障碍交流。附图说明为了更清楚地说明本技术实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本技术的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。图1是本技术提供的用于语音识别和手语识别的智能眼镜的结构示意图；图2是本技术一实施例提供的用于语音识别和手语识别的智能眼镜的电气结构图；图3是本技术另一实施例提供的用于语音识别和手语识别的智能眼镜的电气结构图及其外部连接设备；主要元件符号说明：10-智能装置、20-镜框、101-雷达、102-显示器、103-扬声器、104-麦克风、105-处理器、106-存储器、107-电池、108-通信模块、109-触控板。具体实施方式下面详细描述本技术的实施例，所述实施例的示例在附图中示出。其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本技术，而不能理解为对本技术的限制。本技术具体实施方式提供一种用于语音识别和手语识别的智能眼镜，见图1至图3，一种用于语音识别和手语识别的智能眼镜，包括镜框20及设置在镜框上的智能装置10。该镜框20上设置有加装镜片的内槽和固定孔，可以根据用户需求加装不同类型的镜片，可以是近视镜片、远视镜片或太阳镜片，以起到矫正和保护视力的目的。所述智能装置10不局限安装于图1所示的镜框的右边，也可以安装在镜框20的左边，安装在镜框20左边的智能装置10与安装在镜框右边的智能装置10为镜像对称结构，选择智能装置左置还是右置于镜框，这个是基于用户的用手用眼习惯来决定的，智能装置10在镜框20上的位置还需保证该智能装置10不会对用户的正常视野产生干扰。该智能装置10包括雷达101、扬声器103、麦克风104、显示器102、处理器105。其中，所述雷达101固定设置在所述智能装置的下方，以便使听障人士的手语动作处于雷达有效检测范围内；所述扬声器103和麦克风104固定设置在所述智能装置的前方，以便麦克风能有效收集正常人的语音信息及正常人能够听清楚智能眼镜播放的语音信息。所述处理器105设置在智能装置的侧面，该位置信息不局限于侧面，只要保证能实现相应的功能并满足其散热要求即可。所述雷达101用于收集手语信息；进一步地，雷达101主要利用无线电波的反射来进行成像。通过计算从天线发射无线电波，到天线收到反射波的延时，可以得出物体的位置。通过比较发射波与反射波的波长变化(多普勒频移)，可以计算出物体的速度。当物体靠近雷达101运动，其反射波的波长会变短；当物体远离雷达101运动，其反射波的波长则会变长。物体的速度越大，波长的变化也越大。这样，通过对比发射波和反射波，就得到了物体的位置和速度，也就可以精细地捕捉物体的运动。进一步地，所述雷达101采用谷歌的Soli微型雷达芯片，该芯片由传感器和天线阵列组成，雷达101发射并接收反射回来的毫米波雷达信号。从原始的雷达信号到最终的手势控制需要经历下面几步：1、捕捉原始反射信号2、将接收的时序信号处理和转换到RangeDopplerMap(距离多普勒映射)3、特征提取，识别，定位与追踪4、从提取的特征实现手语识别根据谷歌提供给第三方开发者的SDK(软件开发工具包)实现手语识别算法。所述麦克风104用于收集语音信息；进一步地，所述麦克风104采用科大讯飞股份有限公司的麦本文档来自技高网...

【技术保护点】
一种用于语音识别和手语识别的智能眼镜，其特征在于,包括镜框及设置在镜框上的智能装置，该智能装置包括雷达、扬声器、麦克风、显示器、处理器；其中，所述雷达固定设置在所述智能装置的下方，所述扬声器和麦克风固定设置在所述智能装置的前方；所述雷达用于收集手语信息；所述麦克风用于收集语音信息；所述处理器用于将手语信息转化为待播放的语音信息实现手语识别或将采集的语音信息转化为文字信息实现语音识别；所述扬声器用于播放语音信息；所述显示器用于显示文字信息。

【技术特征摘要】
1.一种用于语音识别和手语识别的智能眼镜，其特征在于,包括镜框及设置在镜框上的智能装置，该智能装置包括雷达、扬声器、麦克风、显示器、处理器；其中，所述雷达固定设置在所述智能装置的下方，所述扬声器和麦克风固定设置在所述智能装置的前方；所述雷达用于收集手语信息；所述麦克风用于收集语音信息；所述处理器用于将手语信息转化为待播放的语音信息实现手语识别或将采集的语音信息转化为文字信息实现语音识别；所述扬声器用于播放语音信息；所述显示器用于显示文字信息。2.根据权利要求1所述的用于语音识别和手语识别的智能眼镜，其特征在于，所述镜框上设置有加装镜片的内槽和固定孔。3.根据权利要求1所述的用于语音识别和手语识别的智能眼镜，其特征在于，所述雷达为谷歌的Soli微型雷达芯片。4.根据权利要求1所述的用于语音识别和手语识别的智能眼镜，其特征在于，所述显示器为近眼显示的穿透式光学引擎。5.根据权利要求1所述的用于语音识别和手语识别的智能眼镜...

【专利技术属性】
技术研发人员：石城川，陈国强，
申请(专利权)人：广州音书科技有限公司，
类型：新型
国别省市：广东,44