光学头戴式显示器、电视入口模块和用于控制图形用户界面的方法技术

一种光学头戴式显示器OHMD(110)及其中用于控制图形用户界面GUI的方法、以及一种电视入口模块(120)及其中用于启用OHMD(110)来控制由电视入口模块(120)显示的GUI的方法。电视入口模块(120)显示用于使OHMD(110)能够进入用于控制GUI的模式的GUI元素。OHMD(110)在OHMD(110)的显示器(111)上显示用于用户对准GUI元素的瞄准元素。当通过检测用户的头或用户的眼睛检测(403)到瞄准元素对准了GUI元素时，OHMD(110)进入用于控制GUI的模式。电视入口模块(120)从OHMD(110)接收用于控制(410)GUI的命令。还公开了相应的计算机程序(1204、1404)以及计算机程序产品(1205、1405)。

【技术实现步骤摘要】
【国外来华专利技术】
本文的实施例涉及控制多媒体应用中的图形用户界面。具体地，公开了光学头戴式显示器及其中用于控制图形用户界面的方法、以及电视入口模块及其中用于启用光学头戴式显示器来控制由电视入口模块显示的图形用户界面的方法。此外，还公开了对应的计算机程序和计算机程序产品。
技术介绍
多媒体应用包括能够向用户传送多媒体体验(即，视频和声音二者)的设备。这些设备包括例如电视机、多媒体播放器、平板电脑、计算机、移动电话、膝上型电脑、盘播放器等。具体地，大屏电视机变得非常普及。目前的大屏电视机(TV)通常由红外(IR)遥控器来控制。通过使用IR遥控器上的导航键来控制TV的图形用户界面(GUI)。还可以通过第二屏幕(例如平板电脑)来控制GUI，其通过允许TV的用户(例如观看者)通过在平板电脑上输入用于在GUI中导航的指令来在GUI中导航。通常，在平板电脑的触摸屏上的所谓划动将被发送为用于在GUI中侧向移动的指令，即，类似于当用户按下遥控器上的方向键时的情况。使用平板电脑相较于IR遥控器控制GUI的一个优势在于，可以利用触摸屏特定的输入特征(通常是平板电脑所固有的，例如划动和两指命令)。此外，现有的TV可以配备有相机，该相机可以捕捉用户的手势。手势可以是用户挥手来控制GUI。此外，现有的TV可以配备有麦克风，该麦克风可以捕捉用户的语音命令。随后语音命令可以控制TV的GUI。综上所述清楚的是，可以以多种不同方式在TV的GUI中进行导航或操控。每种方式具有其优点和缺点。例如，与使用IR遥控器相比，挥手可能会造成更多的对GUI的意外控制。作为另一示例，用于控制GUI的语音命令可能会打扰控制GUI的用户周围的人。几乎不断地在开发用于不同目的的新类型的电子设备。这些新类型的电子设备的一个示例被称为光学头戴式显示器(OHMD)。预期OHMD会在未来几年内大量增长。
技术实现思路
一个目的在于克服或者至少缓解上述在控制例如TV的GUI的现有方式中存在的缺点。根据第一方面，通过由OHMD执行的用于通过检测用户的头或用户的眼睛的移动控制由电视入口模块显示的GUI的方法，来实现所述目的。电视入口模块还显示用于控制GUI的GUI元素。OHMD包括用户可视的显示器。OHMD在OHMD的显示器上显示用于使得用户对准GUI元素的瞄准元素。当检测到瞄准元素对准了GUI元素时，OHM进入用于控制GUI的模式。根据第二方面，通过由电视入口模块执行的用于启用OHMD来控制由电视入口模块显示的GUI的方法来实现上述目的。电视入口模块显示用于使OHMD能够进入用于控制GUI的模式的GUI元素。电视入口模块从OHMD接收用于控制GUI的命令。根据第三方面，通过一种OHMD来实现所述目的，所述OHMD被配置为通过检测用户的头或用户的眼睛的移动来控制由电视入口模块显示的GUI。电视入口模块还显示用于控制GUI的GUI元素。OHMD包括被配置为显示用户可视的信息的显示器。OHMD还包括显示单元，被配置为在OHMD的显示器上显示用于用户对准GUI元素的瞄准元素。OHMD还包括检测单元，被配置为检测瞄准元素对准GUI元素。此外，OHMD包括进入单元，被配置为当瞄准元素对准GUI元素时进入用于控制GUI的模式。根据第四方面，通过一种电视入口模块来实现上述目的，所述电
视入口模块被配置为启用OHMD来控制由电视入口模块显示的GUI。电视入口模块包括显示单元，被配置为显示用于使OHMD能够进入用于控制GUI的模式的GUI元素。电视入口模块还包括接收单元，配置为从OHMD接收用于控制GUI的命令。根据第五方面，通过用于控制由电视入口模块显示的GUI的计算机程序来实现上述目的。所述计算机程序包括计算机可读代码单元，当计算机可读代码单元在OHMD上执行时使OHMD执行本文描述的OHMD中的方法。根据第六方面，通过包括计算机可读介质和如上所述的计算机程序在内的计算机程序产品来实现上述目的。根据第七方面，通过用于启用OHMD来控制由电视入口模块显示的GUI的计算机程序来实现上述目的。所述计算机程序包括计算机可读代码单元，当计算机可读代码单元在电视入口模块上执行时使电视入口模块执行本文描述的电视入口模块中的方法。根据第八方面，通过包括计算机可读介质和如上所述的计算机程序在内的计算机程序产品来实现上述目的。本文的实施例的优点在于，携带或穿戴OHMD的用户可以在不使用用户语音命令、手势或遥控器的情况下控制TV的GUI。如上所述，语音命令可能干扰其他人。挥手可能不能给出以满意方式控制GUI所需要的足够精细的控制。如上所述，手势经常存在被意外地捕捉为针对GUI的控制命令的问题。附图说明根据以下详细说明和所附附图，将易于理解本文公开的实施例的各方面，包括其特定特征和优点，附图中：图1是可实现本文实施例的示例性系统的示意概述，图2是电视入口的GUI的示意图示，图3是用户的头的示意，图4是示出方法实施例在根据图1的系统中执行时的示意组合信令方案及流程图，图5是GUI的示例性外观的示意图示，图6是GUI的另一示例性外观的示意图示，图7是GUI元素和瞄准元素的两个示意示图，图8是GUI的另一示例性外观的示意图示，图9是示出了移动和划动动作与释放模式之间的循环的表示，图10a至图10e是示出了根据本文一些实施例的菜单的使用的框图，图11是示出了OHMD中的方法的实施例的流程图，图12是示出了OHMD的实施例的框图，图13是示出了电视入口模块中的方法的实施例的流程图，以及图14是示出了电视入口模块的实施例的框图。具体实施方式贯穿以下说明，类似的参考符号视情况被用于标记类似的单元、模块、电路、节点、部分、项目或特征。在附图中，由虚线指示一些实施例中出现的特征，除非另外指示。本文描述的实施例使用与例如大屏TV组合的OHMD，用于通过OHMD来控制TV上的GUI。更具体地，当电视入口模块显示GUI元素并且OHMD显示瞄准元素时，根据实施例，用户能够使瞄准元素对准GUI元素，以使OHM直接或间接进入用于控制由电视入口模块显示的GUI的模式。当OHMD可能处于所述模式下时，例如，可以由OHMD向入口模块发送用户的头或者用户的眼睛的移动作为用于控制GUI的命令。作为示例性场景，用户坐在TV前，同时戴着可以控制TV GUI的OHMD。用户仅需要移动他/她的头或者眼睛来控制GUI。为了使用户不会在每次移动头时意外地控制TV GUI，OHMD需要进入某一模式。通过如上所述将瞄准元素对准GUI元素来进入该模式。图1示出了可实现本文实施例的示例性系统100。系统100包括OHMD 110，例如无线电子眼镜、用于观看三维视频的眼镜等，例如所谓的Google眼镜。使用(例如携带)OHMD 110
的人可以被称为本公开中的用户。OHMD 110包括用户可视的显示器111。可以向用户显示任何类型的数据的显示器111可以是透明或半透明显示器，例如采取液晶显示器(LCD)、发光二极管(LED)显示器等的形式。OHMD 110包括相机112，面朝用户(即通常在用户的观看方向上)。相机112可以捕捉观看方向(例如面朝前的方向)上的静止图像或视频。OHMD 110可以包括运动传感器113，例如用于跟踪OHMD 110的移动的陀螺本文档来自技高网...

【技术保护点】
一种由光学头戴式显示器OHMD(110)执行的方法，用于通过检测用户的头或用户的眼睛的移动来控制由电视入口模块(120)显示的图形用户界面GUI，其中所述电视入口模块(120)还显示用于控制GUI的GUI元素，其中OHMD(110)包括用户可视的显示器(111)，其中所述方法包括：在OHMD(110)的显示器(111)上显示(402)用于用户对准GUI元素的瞄准元素；以及当检测到(403)瞄准元素对准了GUI元素时，进入(407)用于控制GUI的模式。

【技术特征摘要】
【国外来华专利技术】1.一种由光学头戴式显示器OHMD(110)执行的方法，用于通过检测用户的头或用户的眼睛的移动来控制由电视入口模块(120)显示的图形用户界面GUI，其中所述电视入口模块(120)还显示用于控制GUI的GUI元素，其中OHMD(110)包括用户可视的显示器(111)，其中所述方法包括：在OHMD(110)的显示器(111)上显示(402)用于用户对准GUI元素的瞄准元素；以及当检测到(403)瞄准元素对准了GUI元素时，进入(407)用于控制GUI的模式。2.根据权利要求1所述的方法，其中，所述方法还包括，在进入(407)用于控制GUI的模式之前：在OHMD(110)的显示器上显示(404)包括用于进入控制GUI的模式的命令项在内的菜单；以及检测(405)用户对所述命令项的选择。3.根据权利要求1所述的方法，其中，所述方法包括，在进入(407)用于控制GUI的模式之前：检测(406)用于进入用于控制GUI的模式的眨眼命令。4.根据权利要求1至3中的任一项所述的方法，其中所述方法包括：检测(408)用户的头或用户的眼睛的移动；以及向电视入口模块(120)发送(409)用于控制GUI的命令。5.根据权利要求4所述的方法，其中，所述命令指示电视入口模块(120)在GUI中引起一组动作中的一个动作，其中，所述一组动作包括移动动作或划动动作中的至少一个。6.根据从属于权利要求1的权利要求4、或者当权利要求4从属于权利要求1时的权利要求5所述的方法，其中，所述方法包括：当在定义的时间段期间内没有检测到用户的头或用户的眼睛的移动时，以循环方式将命令设置(411)为所述一组动作中的一个动作。7.根据前述任一项权利要求所述的方法，其中所述方法包括：退出(413)用于控制GUI的模式。8.根据从属于权利要求6的权利要求7所述的方法，其中，所述退出(413)当所述命令被设置为移动动作第一次数并被设置为划动动作第二次数时执行，其中，第二次数等于第一次数。9.根据从属于权利要求2的权利要求7所述的方法，其中，所述菜单包括用于退出用于控制GUI的模式的释放项，其中，响应于对所述释放项的选择而执行退出(413)。10.根据从属于权利要求3的权利要求7所述的方法，其中，所述方法还包括：在执行退出(413)之前，检测(412)用于退出用于控制GUI的模式的进一步的眨眼命令。11.根据前述任一项权利要求所述的方法，其中，通过用户将瞄准元素对齐GUI元素来将瞄准元素对准GUI元素。12.根据前述任一项权利要求所述的方法，其中GUI显示在显示设备上。13.根据权利要求12所述的方法，其中，电视入口模块(120)连接到所述显示设备，所述显示设备在电视入口模块(120)外部。14.根据权利要求12所述的方法，其中，所述显示设备包括电视入口模块(120)。15.一种由电视入口模块(120)执行的方法，用于启用光学头戴式显示器OHMD(110)来控制由电视入口模块(120)显示的图形用户界面GUI，所述方法包括：显示(410)用于使OHMD(110)能够进入用于控制GUI的模式的GUI元素；以及从OHMD(110)接收(409)用于控制(410)GUI的命令。16.根据权利要求15所述的方法，其中，所述命令指示电视入口模块(120)在GUI中引起一组动作中的一个动作，其中，所述一组
\t动作包括移动动作或划动动作中的至少一个。17.一种光学头戴式显示器OHMD(110)，被配置为通过检测用户的头或用户的眼睛的移动来控制由电视入口模块(120)显示的图形用户界面GUI，其中所述电视入口模块(120)还显示用于控制GUI的GUI元素，其中OHMD(110)包括被配置为显示用户可视的信息的显示器(1210)，其中所述OHMD(110)包括：显示单元(1220)，被配置为在OHMD(110)的显示器(111)上显示用于用户对准GUI元素的瞄准元素；检测单元(1230)，被配置为检测瞄准元素对准GUI元素；以及进入单元(1240)，被配置为当瞄准元素对准GUI元素时进入用于控制GUI的模式。18.根据权利要求17所述的OHMD(110)，其中，显示单元(1220)还被配置为在OHMD(110)的显示器上显示菜...

【专利技术属性】
技术研发人员：奥拉·安德森，纳西索·小奥利韦拉，巴勃罗·埃斯特班·加雷，加百利·瓦妮莎，
申请(专利权)人：瑞典爱立信有限公司，
类型：发明
国别省市：瑞典;SE