控制方法及相关装置制造方法及图纸

本申请实施例公开了一种控制方法及相关装置，应用于电子设备，所述电子设备和可穿戴设备通信连接，方法包括：采集人眼针对所述电子设备的显示屏幕的注视位置；当检测到所述注视位置为第一位置点时，接收来自所述可穿戴设备采集的第一静脉图像；根据所述第一静脉图像确定第一指令；确定所述第一位置的内容信息；针对所述内容信息执行所述第一指令所指示的操作。本申请实施例有利于提升用户对于电子设备进行控制的便捷性，提升用户体验。

Control methods and related devices

【技术实现步骤摘要】
控制方法及相关装置
本申请涉及交互控制
，具体涉及一种控制方法及相关装置。
技术介绍
现有技术中，电子设备可通过红外摄像头可以获取手部某个部位的静脉图像，从而进行静脉识别。眼球追踪技术为当人的眼睛看向不同方向时通过电子设备检测眼部的细微变化，这些变化会产生可以提取的特征，通过图像捕捉或扫描提取这些特征，从而实时追踪眼睛的变化，预测用户的状态和需求，并进行响应，达到用眼睛控制设备的目的。目前静脉识别技术和眼球追踪技术逐渐成熟，但是，却没有合适的交互控制方法，导致用户使用静脉识别和眼球追踪技术是只有新技术带来的新鲜感但却没有实质性的提升用户体验。
技术实现思路
本申请实施例提供了一种控制方法及相关装置，以期提升交互控制的便捷性，提升用户体验。第一方面，本申请实施例提供一种控制方法，应用于电子设备，所述电子设备和可穿戴设备通信连接，所述方法包括：采集人眼针对所述电子设备的显示屏幕的注视位置；当检测到所述注视位置为第一位置点时，接收来自所述可穿戴设备采集的第一静脉图像；根据所述第一静脉图像确定第一指令；确定所述第一位置的内容信息；针对所述内容信息执行所述第一指令所指示的操作。第二方面，本申请实施例提供一种控制装置，应用于电子设备，所述电子设备和可穿戴设备通信连接，所述控制装置包括处理单元和通信单元，其中，所述处理单元，用于采集人眼针对所述电子设备的显示屏幕的注视位置；以及用于当检测到所述注视位置为第一位置点时，通过所述通信单元接收来自所述可穿戴设备采集的第一静脉图像；以及用于根据所述第一静脉图像确定第一指令；以及用于确定所述第一位置的内容信息；以及用于针对所述内容信息执行所述第一指令所指示的操作。第三方面，本申请实施例提供一种电子设备，包括处理器、存储器、通信接口以及一个或多个程序，其中，上述一个或多个程序被存储在上述存储器中，并且被配置由上述处理器执行，上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。可以看出，本申请实施例中，电子设备采集人眼针对所述电子设备的显示屏幕的注视位置；当检测到所述注视位置为第一位置点时，接收来自所述可穿戴设备采集的第一静脉图像；根据所述第一静脉图像确定第一指令；确定所述第一位置的内容信息；针对所述内容信息执行所述第一指令所指示的操作。可见，本申请实施例中电子设备可根据静脉别技术确定用户要执行的指令，并通过眼球追踪技术确定执行该指令的目标单位，进而针对目标单位执行用户想要执行的指令，无需亲自动手操作电子设备，提升了用户操作电子设备的便捷性；同时本申请实施例提出的控制方法，充分发挥了静脉识别和眼球追踪的特性、，提升了用户体验。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1是本申请实施例提供的一种控制系统的系统架构图；图2A是本申请实施例提供的一种控制方法的流程示意图；图2B为本申请实施例提供的一种手指轮廓图和掌心轮廓图的位置关系的示意图图3是本申请实施例提供的另一种控制方法的流程示意图；图4是本申请实施例提供的另一种控制方法的流程示意图；图5是本申请实施例提供的一种电子设备的结构示意图；图6是本申请实施例提供的一种控制装置的功能单元组成框图。具体实施方式下面对本申请实施例进行详细介绍。请参阅图1，图1是本申请实施例提供的一种控制系统的系统架构图。其中包括电子设备110和可穿戴设备120，电子设备110和可穿戴设备120通信连接；电子设备110包括摄像头111；可穿戴设备120包括摄像头121；摄像头111可获取人眼的运动情况，进而交由电子设备110进行处理，实现眼球追踪；摄像头121可获取手部的静脉图像，如图所示，可穿戴设备120可以包括至少一个摄像头121，且图中所示的摄像相投121所示的位置均为可选的位置，图中仅示意了摄像头121几种可能存在的位置，在实际设置摄像头121时，包括但不限于图中所示的位置，只要可以获取到手部静脉图像的位置均可根据实际需求设置摄像头121；在本申请实施例中，摄像头111可实时获取人眼的运动情况，电子设备根据预设算法处理获取到的眼球运动情况，确定出人眼注视电子设备的显示屏幕的实时注视位置；可穿戴设备120的摄像头121可实时获取人体手部的静脉图像，并实时将静脉图像发送至电子设备110，电子设备根据预设的算法分析静脉图像确定出静脉图像对应的手势，其次，确定出该手势对应的指令，并对当前注视位置对应的内容执行该指令所指示的操作。其中，本申请实施例中的电子设备110可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备(UserEquipment，UE)，移动台(MobileStation，MS)，终端设备(terminaldevice)等等。请参阅图2A，图2A是本申请实施例提供了一种控制方法的流程示意图，应用于电子设备，所述电子设备和可穿戴设备通信连接，如图所示，本控制方法包括：步骤201，电子设备采集人眼针对所述电子设备的显示屏幕的注视位置；其中，当用户在注视电子设备的显示屏幕时，电子设备可设置在显示屏幕上显示注视位置或者不显示注视位置；举例来说，当设置为显示注视位置时，注视位置可显示光标(如当前鼠标的光标)，以便于用户确认当前注视的位置。步骤202，当所述电子设备检测到所述注视位置为第一位置点时，接收来自所述可穿戴设备采集的第一静脉图像；步骤203，所述电子设备根据所述第一静脉图像确定第一指令；其中，在进入不同的显示界面或应用时，用户可设置当前显示界面或应用专属的静脉图像与指令之间的对应关系；例如在电子设备在运行第一应用时，第一静脉图像可对应A指令，而在运行第二应用时，第一静脉图像可对应B指令。步骤204，所述电子设备确定所述第一位置的内容信息；其中，内容信息可以是选择窗口，例如电脑中的应用程序图标，以及每个应用程序中放大、缩小和关闭等选择窗口；也可以是移动终端中的应用程序图标，以及进入每个应用后，每个应用预设的选择窗口；例如文本编辑界面中，显示屏幕显示输入键盘，第一位置处为第一键位，则第一键位显示的内容即为所述内容信息。步骤205，所述电子设备针对所述内容信息执行所述第一指令所指示的操作。举例来说，当前内容信息为第一应用程序的图标，当前第一指令为确认指令，则打开第一应用程序。可以看出，本申请实施例中，电子设备采集人眼针对所述电子设备的显示屏幕的注视位置；当检测到所述注视位置为第一位置本文档来自技高网...

【技术保护点】
1.一种控制方法，其特征在于，应用于电子设备，所述电子设备和可穿戴设备通信连接，所述方法包括：采集人眼针对所述电子设备的显示屏幕的注视位置；当检测到所述注视位置为第一位置点时，接收来自所述可穿戴设备采集的第一静脉图像；根据所述第一静脉图像确定第一指令；确定所述第一位置的内容信息；针对所述内容信息执行所述第一指令所指示的操作。

【技术特征摘要】
1.一种控制方法，其特征在于，应用于电子设备，所述电子设备和可穿戴设备通信连接，所述方法包括：采集人眼针对所述电子设备的显示屏幕的注视位置；当检测到所述注视位置为第一位置点时，接收来自所述可穿戴设备采集的第一静脉图像；根据所述第一静脉图像确定第一指令；确定所述第一位置的内容信息；针对所述内容信息执行所述第一指令所指示的操作。2.根据权利要求1所述的方法，其特征在于，所述根据所述第一静脉图像确定第一指令，包括：根据所述第一静脉图像确定第一手势；以所述第一手势为查询标识，查询预设匹配关系，获取所述第一手势对应的所述第一指令，所述预设匹配关系包括手势和指令之间的匹配关系。3.根据权利要求2所述的方法，其特征在于，所述根据所述第一静脉图像确定第一手势，包括：根据预设特征提取算法提取所述第一静脉图像的特征信息，并根据所述特征信息生成特征图像，所述特征图像包括以下至少一种：掌心轮廓图，手指轮廓图；根据所述特征图像确定所述第一静脉图像对应的所述第一手势。4.根据权利要求3所述的方法，其特征在于，所述根据所述特征图像确定所述第一静脉图像对应的所述第一手势，包括：确定每张手指轮廓图对应的手指的弯折情况；输入所述弯折情况到预设的训练模型，以得到所述第一手势，所述预设的训练模型可根据手指的弯折情况确定出匹配的手势；或者，根据所述手指轮廓图确定每根手指均处于平直状态；确定每张手指轮廓图与所述掌心轮廓图的位置关系；根据所述位置关系确定所述第一手势。5.根据权利要求1-4任一项所述的方法，其特征在于，所述电子设备的显示屏幕当前显示的界面为文本界面，所述内容信息为预设键盘的第一键位，所述第一指令为确认指令；所述针对所述内容信息执行所述第一指令所指示的操作，包括：输入所述第一键位的信息，执行所述第一键位对应的指令。6.根据权利要求5所述的方法，其特征在于，所述执行所述第一...

【专利技术属性】
技术研发人员：张海平，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东,44