基于手势的控制方法、系统、装置、电子设备和存储介质制造方法及图纸

本公开涉及计算机技术领域，具体涉及一种基于手势的控制方法、装置、电子设备和存储介质。本公开提供的基于手势的控制方法包括：检测用户的手势并确定所述手势是否为关联手势；响应于确定所述手势为关联手势，确定关联手势对应的关联项目；若关联项目包括图形用户界面，则控制第一终端打开图形用户界面；和/或，若关联项目包括控制指令，则控制第一终端基于控制指令发出对应的指令，以使其他设备执行与控制指令对应的功能。控制指令对应的功能。控制指令对应的功能。

【技术实现步骤摘要】
基于手势的控制方法、系统、装置、电子设备和存储介质


[0001]本公开涉及计算机
，具体涉及一种基于手势的控制方法、系统、装置、电子设备和存储介质。

技术介绍

[0002]随着智能终端技术的发展，越来越智能化的电视可以为用户提供更加的应用的功能。但因受限于电视的远场使用场景，用户难以采用手机所适用的触控方式对电视进行便捷的控制。与手机相比，若需在电视上从海量的应用中找到特定的应用，并在特定的应用中定位到特定的界面，需要用户进行繁琐的操作并耗费较多时间。

技术实现思路

[0003]提供该
技术实现思路
部分以便以简要的形式介绍构思，这些构思将在后面的具体实施方式部分被详细描述。该
技术实现思路
部分并不旨在标识要求保护的技术方案的关键特征或必要特征，也不旨在用于限制所要求的保护的技术方案的范围。
[0004]第一方面，根据本公开的一个或多个实施例，提供了一种基于手势的控制方法，用于第一终端，所述方法包括：
[0005]检测用户的手势并确定所述手势是否为关联手势；
[0006]响应于确定所述手势为关联手势，确定所述关联手势对应的关联项目；
[0007]若所述关联项目包括图形用户界面，则控制所述第一终端打开所述图形用户界面；和/或，若所述关联项目包括控制指令，则控制所述第一终端基于所述控制指令发出对应的指令，以使其他设备执行与所述控制指令对应的功能。
[0008]第二方面，根据本公开的一个或多个实施例，提供了一种基于手势的控制方法，用于第一终端，所述第二终端能够与第一终端通信连接；所述方法包括：
[0009]当第一预设条件满足时，确定关联手势；
[0010]当第二预设条件满足时，获取关联项目；
[0011]将所述关联手势与所述关联项目进行关联；
[0012]向所述第一终端发送用于表征所述关联手势的信息和所述关联项目的信息，以使所述第一终端能够响应于识别出用户做出所述关联手势，执行所述关联项目对应的功能。
[0013]第三方面，根据本公开的一个或多个实施例，提供了一种手势控制装置，包括：
[0014]第一手势识别单元，用于检测用户的手势并确定所述手势是否为关联手势；
[0015]第一项目确定单元，响应于确定所述手势为关联手势，确定所述关联手势对应的关联项目；
[0016]第一执行单元，用于若所述关联项目包括图形用户界面，则控制所述第一终端打开所述图形用户界面；和/或，若所述关联项目包括控制指令，则控制所述第一终端基于所述控制指令发出对应的指令，以使其他设备执行与所述控制指令对应的功能。
[0017]第四方面，根据本公开的一个或多个实施例，提供了一种手势控制装置，包括：
是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。术语“响应于”以及有关的术语是指一个信号或事件被另一个信号或事件影响到某个程度，但不一定是完全地或直接地受到影响。如果事件x“响应于”事件y而发生，则x可以直接或间接地响应于y。例如，y的出现最终可能导致x的出现，但可能存在其它中间事件和/或条件。在其它情形中，y可能不一定导致x的出现，并且即使y尚未发生，x也可能发生。此外，术语“响应于”还可以意味着“至少部分地响应于”。
[0037]术语“确定”广泛涵盖各种各样的动作，可包括获取、演算、计算、处理、推导、调研、查找(例如，在表、数据库或其他数据结构中查找)、探明、和类似动作，还可包括接收(例如，接收信息)、访问(例如，访问存储器中的数据)和类似动作，以及解析、选择、选取、建立和类似动作等等。其他术语的相关定义将在下文描述中给出。其他术语的相关定义将在下文描述中给出。
[0038]需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
[0039]需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
[0040]为了本公开的目的，短语“A和/或B”意为(A)、(B)或(A和B)。
[0041]本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
[0042]图1示出了本公开一实施例提供的基于手势的控制方法100的流程图，方法100包括：
[0043]步骤S120：检测用户的手势并确定所述手势是否为关联手势。
[0044]其中，关联手势是用于与特定项目关联的手势。示例性地，可以通过第一终端内置或外接的摄像装置捕获的图像，对图像中的用户手势进行检测和识别。
[0045]示例性地，第一终端可以将检测的手势与第一终端预先存储的关联手势进行比较，以确定所检测的手势所对应的关联手势，例如，当检测的用户手势与关联手势a的相似度超过预设阈值时，则确定该用户手势为关联手势a。
[0046]步骤S140：响应于确定所述手势为关联手势，确定所述关联手势对应的关联项目。
[0047]其中，关联项目是用于与特定手势关联的项目，包括所述第一终端的图形用户界面和/或用于控制其他设备的控制指令；第一终端的图形用户界面包括但不限于第一终端上装载或配置的应用、组件、插件、控件等的显示界面或视图。以观看视频的应用场景为例，项目可以包括某个视频应用程序提供的某档节目所在的应用界面。以智能家居应用场景为例，项目可以包括控制电灯、空调、扫地机器人等家用电器工作状态的控制指令。
[0048]步骤S160：若所述关联项目包括图形用户界面，则控制所述第一终端打开所述图形用户界面；和/或，若所述关联项目包括控制指令，则控制所述第一终端基于所述控制指令发出对应的指令，以使其他设备执行与所述控制指令对应的功能。
[0049]示例性地，当第一终端识别到与图形用户界面关联的手势后，第一终端可以执行与该界面对应的功能，例如打开第一终端装载的某一个应用界面；当第一终端识别到与控制指令关联的手势后，第一终端可以基于所述控制指令发出对应的指令，以使其他设备执
行与所述控制指令对应的功能。示例性地，第一终端可以发送请求至与云端服务器，以使服务器发送相应的指令，控制其他设备执行对应的功能。例如，对于接入了物联网(Internet of Things,IoT)的第一终端，用户可以向第一终端发出用于指示开启扫地机的手势，第一终端向物联网服务器基于与该手势关联的控制指令发送对应的指令，以开启扫地机。
[0050]示例性地，用户可以将某视频应用所提供的某视频节目所在的应用界面A的与特定的手势a进行关联，当用户对第一终端做出手势a时，第一终端可以基于打开与手势a关联的应用界面A。
[0051]这样，根据本公开一个或多个实施例，用户可以通过做出特定的手势来控制本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于手势的控制方法，用于第一终端，其特征在于，包括：检测用户的手势并确定所述手势是否为关联手势；响应于确定所述手势为关联手势，确定所述关联手势对应的关联项目；若所述关联项目包括图形用户界面，则控制所述第一终端打开所述图形用户界面；和/或，若所述关联项目包括控制指令，则控制所述第一终端基于所述控制指令发出对应的指令，以使其他设备执行与所述控制指令对应的功能。2.根据权利要求1所述的基于手势的控制方法，其特征在于，还包括：预先将关联手势与关联项目进行关联，包括：当第一预设条件满足时，确定关联手势；当第二预设条件满足时，确定关联项目；以及将所述关联手势与所述关联项目进行关联，以使所述关联手势能够被指定用于触发所述关联项目对应的功能。3.根据权利要求2所述的基于手势的控制方法，其特征在于，所述预先将关联手势与关联项目进行关联，还包括：接收第二终端发送的关联手势和与所述关联手势关联的关联项目。4.根据权利要求2所述的基于手势的控制方法，其特征在于，所述当第一预设条件满足时，确定关联手势，包括：接收来自第二终端发出的预设指令，基于用户对所述第一终端的操作确定关联手势。5.根据权利要求2所述的基于手势的控制方法，其特征在于，所述当第二预设条件满足时，确定关联项目，包括：接收来自第二终端发出的预设指令，基于用户对所述第一终端的操作确定关联项目。6.根据权利要求5所述的基于手势的控制方法，其特征在于，还包括：向所述第二终端发送用于表征所述关联项目的信息。7.根据权利要求2所述的基于手势的控制方法，其特征在于，所述将所述关联手势与所述关联项目进行关联，包括：获取所述关联项目的目标信息；将所述关联手势与所述关联项目的目标信息进行关联。8.根据权利要求7所述的基于手势的控制方法，其特征在于，当所述关联项目包括应用界面时，所述关联项目的目标信息包括所述应用界面对应的应用信息和组件信息。9.根据权利要求2所述的基于手势的控制方法，其特征在于，所述第一终端预先能够识别至少一个预设的手势，所述关联手势为所述至少一个预设的手势中的一个手势。10.根据权利要求9所述的基于手势的控制方法，其特征在于，所述预先将关联手势与关联项目进行关联，还包括：在确定关联手势之前，显示所述至少一个预设的手势；所述当第一预设条件满足时，确定关联手势，包括：响应于识别出用户做出所述预设的手势，将所述预设的手势确定为所述关联手势。11.根据权利要求9所述的基于手势的控制方法，其特征在于，所述当第二预设条件...

【专利技术属性】
技术研发人员：付浩翔，黄翀宇，张瑞芳，王铭西，
申请(专利权)人：北京字节跳动网络技术有限公司，
类型：发明
国别省市：