具有从语音信号到覆盖在显示器上的可移动嘴唇的图像的翻译的护目镜制造技术

具有语音至移动嘴唇算法的护目镜，语音至移动嘴唇算法接收和翻译通过护目镜观看的人的语音和话语，并且然后在被观看的人的面罩上显示对应于语音和话语的移动嘴唇的覆盖。具有文本至移动嘴唇信息的数据库被用于翻译语音并且以很少的等待时间近实时地生成移动嘴唇。这种翻译为耳聋/听力受损的用户提供了与通过眼镜观看的人在他们佩戴面罩时进行理解和交流的能力。翻译可以包括自动语音识别(ASR)和自然语言理解(NLU)作为声音识别引擎。

【技术实现步骤摘要】
【国外来华专利技术】

本主题涉及一种护目镜装置，例如智能眼镜。

技术介绍

1、现今可用的便携式护目镜装置(诸如智能眼镜、头戴具和头帽)集成了相机和透视显示器。听力不完美的用户可能具有使用这些护目镜装置的问题。

技术实现思路

【技术保护点】

1.一种护目镜，包括：

2.根据权利要求1所述的护目镜，进一步包括存储与相应移动嘴唇图像匹配的文本的数据库，其中，所述处理器被配置成将所述语音翻译成文本并使用所述数据库来生成指示经翻译的语音的所述移动嘴唇图像。

3.根据权利要求2所述的护目镜，其中，所述处理器被配置成生成一系列移动嘴唇图像，所述一系列移动嘴唇图像包括用于所述语音的每个单词的移动嘴唇图像。

4.根据权利要求3所述的护目镜，其中，所述处理器被配置成生成一系列移动嘴唇图像，所述一系列移动嘴唇图像包括用于所述语音的每个单词和话语的移动嘴唇图像。

5.根据权利要求2所述的护目镜，其中...

【技术特征摘要】
【国外来华专利技术】

1.一种护目镜，包括：

2.根据权利要求1所述的护目镜，进一步包括存储与相应移动嘴唇图像匹配的文本的数据库，其中，所述处理器被配置成将所述语音翻译成文本并使用所述数据库来生成指示经翻译的语音的所述移动嘴唇图像。

3.根据权利要求2所述的护目镜，其中，所述处理器被配置成生成一系列移动嘴唇图像，所述一系列移动嘴唇图像包括用于所述语音的每个单词的移动嘴唇图像。

4.根据权利要求3所述的护目镜，其中，所述处理器被配置成生成一系列移动嘴唇图像，所述一系列移动嘴唇图像包括用于所述语音的每个单词和话语的移动嘴唇图像。

5.根据权利要求2所述的护目镜，其中，所述处理器被配置成在所显示的面罩上以放大并且与人头部不成比例的尺寸显示所述移动嘴唇图像。

6.根据权利要求1所述的护目镜，其中，所述处理器被配置成使用自动语音识别(asr)将所述语音翻译成文本。

7.根据权利要求2所述的护目镜，其中，所述处理器被配置成还使用自然语言理解(nlu)将所述语音翻译成文本。

8.根据权利要求1所述的护目镜，其中，所述处理器被配置成近实时地生成所述移动嘴唇图像。

9.一种护目镜的使用方法，所述护目镜具有框架、由所述框架支撑并且被配置成生成通过所述框架观看的佩戴面罩的人的图像的相机、由所述框架支撑的显示器、由所述框架支撑的麦克风以及处理器，所述处理器：

10.根据权利要求9所述的方法，所述护目镜进一步包括存储与相应移动嘴唇图像匹配的文本的数据库，其中，所述处理器将所述语音翻译成文本并且使用所述数据库来生成指示所述翻译语音的所述移动嘴唇图像。

11.根据权利要求10所述的方法，其中，所述处理器生成一系列移动嘴唇图像，所述一系列移动嘴唇图像包括用...

【专利技术属性】
技术研发人员：凯瑟琳·沃辛顿·麦克马洪，
申请(专利权)人：斯纳普公司，
类型：发明
国别省市：