当前位置: 首页 > 专利查询>寇平公司专利>正文

使用动作及语音命令的主机应用程序的高级远程控制制造技术

技术编号:8865154 阅读:137 留言:0更新日期:2013-06-29 02:17
一种头戴式微型显示器(HMD)设备,该设备使用手部、身体、头部运动或姿势及语音命令来控制与本地处理器或主计算机的相互作用。该本地处理器将信息叠加到诸如操作系统桌面或应用程序菜单上,该信息指示激活相关联行动所需的动作、姿势和/或语音输入。

【技术实现步骤摘要】
【国外来华专利技术】使用动作及语音命令的主机应用程序的高级远程控制相关申请的交叉引用本申请要求于2010年9月20日提交的美国临时申请号61/384,586的权益。通过引用将以上一项或多项申请的全部教导结合在此。
技术介绍
本申请涉及人类/计算机接口,更具体地涉及一种接受语音命令并跟踪手势和/或头部运动的设备,以向如在本地或在远程主计算机上执行的软件提供输入。能够存储和显示大量高分辨率计算机图形信息甚至视频内容的小型便携式电子设备继续越来越受欢迎。这些智能电话设备(如Apple iPhone 和Google Android 电话)代表了移动电话、便携式计算机和数字媒体播放器之间的融合的显著趋势。(iPhone是 California 的 Cupertino 的 Apple Computer, Inc.的商标;An droid 是 California 的Mountain View的Google, Inc.的商标。)虽然这些设备通常包括显示屏,但是由于它们的物理尺寸的限制,高分辨率大幅面的显示器的视觉体验无法在此类设备中轻易地复制。因此,消费者现在追求一种高品质、便携式、彩色显示器来加强他们的手持设备。一种此类设备是头戴式眼镜设备,其佩戴在用户的脸部或头部周围,类似一副眼镜或耳机。这些设备包括小型高分辨率微型显示器和放大图像的镜头。无线接口为此类设备提供了极大的便利性和移动性。该微型显示器可以提供超级视频图形阵列(SVGA) (800X600)分辨率,或者甚至扩展图形阵列(XGA) (1024X768)或更高的分辨率。如需有关此类显示器的更多信息,请参阅于2009年I月5日提交的美国申请第12/348,648号的标题为“用于控制其他系统和设备的移动无线显不软件平台(Mobile Wireless Display Software Platformfor Controlling Other Systems and Devices) ” 以及于 2009 年 3 月 27 日提交的 PCT 国际申请第PCT/US09/38601号的标题为“具有适合用作移动互联网设备的高分辨率显示器的手持无线显不设备(Handheld Wireless Display Devices Having High ResolutionDisplay Suitable for Use as Mobile Internet Device) ” 的共同未决的专利申请,其中每个文件的全部内容通过引用结合于此。
技术实现思路
便携式个人计算机有微型显示器、输入设备(如头部跟踪加速计)、一个或多个陀螺仪或检测运动(如头部运动、手部动作和/或姿势)的摄像机、多个检测语音命令的音频处理电路。这些组合的输入提供对在该设备本身上和/或在远程主处理器上运行的一个或多个操作系统和/或一个或多个应用程序的控制。头戴式显示器(HMD)设备包括微型显示器。在一个实施例中,用于显示从本地处理器接收到的视觉信息。动作检测器检测用户的头部和/或身体部分的物理运动,以提供动作或姿势输入。麦克风提供音频信号,该音频信号被该本地处理器解释为语音命令。该本地处理器将文字、图形或其他用户提示叠加到该微型显示器上以指示将要激活某些命令的动作/姿势/语音输入。该处理器将这些语音、动作或姿势输入或其组合转换成用户命令。该用户命令然后由操作系统或应用程序解释,以改变显示在该微型显示器上的信息的多个方面。这可以包括该本地处理器已经处理了该用户命令的视觉或音频确认。附图说明根据示例实施例的以下更具体的说明,上述内容将是清楚的,如在这些附图中展示的,其中贯穿这些不同的视图,相同的附图标记是指相同的部分。这些图不一定是按比例绘出,而是着重展示实施例。图1是高层次图,示出了头戴式显示器(HMD)设备,以及使用手势和/或头部运动控制本地或远程计算机的行动的人。图2A是使用头部条带的实施例。图2B示出了可选的摄像机元件。图3是该设备及到主机的可选连接的高层次方框图,展示了语音、手势和头部动作跟踪命令是如何被翻译的。图4是该HMD设备的组件的更详细的图。图5是到如Microsoft Windows桌面上的示例软件叠加,以向该用户指示可用的头部运动和语首命令。图6是一组由一个或多个操作系统业务执行的功能。图7是这个或这些业务保持的示例表。图8是示例滚动列表。图9示出了用户用头部动作和语音输入从多个桌面做出选择。具体实施例方式下面是对示例实施例的说明。图1示出了无线计算头戴式耳机设备(HMD) 100(也称为视频眼镜设备100),其结合了高分辨率(VGA或更好)微型显示器元件和下面描述的其他特征。HMD设备100通常包括许多不同类型的集成电路,包括微型计算机(单核或多核)、一个或多个无线接口、相关联的存储器或其他存储设备、一个或多个摄像机(光学传感器)和/或各种传感器。这些传感器可以包括音频输入和/或输出设备(如一个或多个麦克风输入和一个或多个输出扬声器),这些传感器可以包括地理位置传感的3轴至9轴自由度的定向传感器(如数字磁强计)、大气传感器、健康状况传感器、GPS、数字罗盘、压力传感器、环境传感器、能量传感器、加速度传感器、位置传感器、姿态传感器、动作传感器、速度传感器或光学传感器、摄像机(可见光、红外线等)。进一步的电路(如额外的无线电波、辅助照明、测距仪等等)和/或传感器阵列可以嵌入在和/或附装到该设备中。如“热靴”(图1中未示出)的一个或多个外围底座也通常位于HMD 100内,用于安装如摄像机或额外传感器的可选附件。这个或这些摄像机、这个或这些动作传感器和/或这个或这些传感器用于在至少第一轴111 (水平)但也优选在第二轴(垂直)112、第三轴(深度)113、第四轴(斜角)114、第五轴(坡角)115及第六轴(偏航角)116跟踪该用户的头部、手部和/或身体的动作和/或位置。设备100可以以各种方式使用。它可以用作完全包含的头戴式全功能便携式个人计算机/智能电话,通过短和/或长距离无线链路150 (如蓝牙、WiF1、蜂窝、LTE、WiMAX或其他无线电波)与外部计算机和网络完全连接。设备100还可以用作由远程主计算机200提供的视频流信号的远程显示器。主机200可以是例如笔记本计算机、手机、Blackberry、iPhone 或具有比视频眼镜设备100本身更小或更大的计算复杂度的其他计算设备。然后,主机200向设备100提供将要显示的信息。设备100与主机200通过如由蓝牙、WiF1、蜂窝、LTE、WiMax或其他无线电波链路150提供的一个或多个合适的无线连接进行连接。主机200本身可以进一步连接到其他网络,如通过有线或无线连接连接到互联网210。设备100还可以用作主机200的遥控器。包含在HMD 100中的各种音频输入设备和动作传感器和/或一个或多个摄像机可以允许用户在虚拟显示器400所定义的更大的区域内选择视野300,该虚拟显示器由设备100本地的处理器和/或由主机200内部的处理器提供。例如,该用户通常可以使用头部运动或手部运动或身体姿势或以其他方式(如用语音输入)控制该更大的虚拟显示区域400的视野300的位置、范围(例如X-Y或3D范围)和/或放大率。因此,无线计算耳机设备100可以对来自这些外设本文档来自技高网
...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】2010.09.20 US 61/384,5861.一种手提设备,包括: 微型显示器,用于显示从本地处理器接收到的视觉信息; 动作检测器,用于检测用户的身体部分的物理运动,并且提供动作或姿势输入;以及 位于所述手提设备中的所述本地处理器,并且进一步包括: 收发器,用于接收所述动作或姿势输入; 翻译器,用于将所述动作或姿势输入翻译成用户命令; 叠加器,用于生成依赖于一个或...

【专利技术属性】
技术研发人员:J·J·雅各布森C·帕金森S·A·波姆博
申请(专利权)人:寇平公司
类型:
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1