显示设备、终端设备和手势交互方法技术

本申请一些实施例提供了一种显示设备、终端设备和手势交互方法。显示设备可以生成包含第一用户图像的手势识别指令或包含图像采集指令的手势识别指令，并发送至终端设备。终端设备根据第一用户图像可以生成第一手势指令，终端设备也可以根据图像采集指令采集第二用户图像并根据第二用户图像生成第二手势指令。终端设备将第一手势指令或第二手势指令发送给显示设备，显示设备进一步可以执行。因此，当显示设备无法采集用户图像时，终端设备可以根据图像采集指令采集图像从而识别用户指令，当显示设备可以采集用户图像，但无法识别出图像中的手势时，终端设备也可以对用户图像进行识别，得到用户指令，从而实现手势交互，提高了用户的体验性。户的体验性。户的体验性。

【技术实现步骤摘要】
显示设备、终端设备和手势交互方法


[0001]本申请涉及显示设备
，尤其涉及一种显示设备、终端设备和手势交互方法。

技术介绍

[0002]显示设备是指能够输出具体显示画面的终端设备，随着显示设备的快速发展，显示设备的功能将越来越丰富，性能也越来越强大，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体，用于满足用户多样化和个性化需求。
[0003]人们不满足于利用控制装置向显示设备发出指令的人机交互模式，因此，手势交互的方式应运而生。手势交互的目的在于通过检测用户做出的特定手势动作，控制显示设备执行相对应的控制指令。例如，用户可以通过向左或向右挥手的动作，代替遥控器等控制装置上的左右方向键，控制显示设备进行快退或快进播放操作。相比较于控制装置，利用手势直接发出指令更加的便捷。
[0004]相关技术中，在进行手势交互时，显示设备需要利用摄像头采集用户图像，从而识别出用户手势，以执行用户手势对应的控制指令。然而，在一些特殊情况下，显示设备无法实现手势交互。例如，对于不具有摄像头或者摄像头损坏的显示设备，无法采集到用户图像，也就无法实现手势交互。或者，显示设备采集到了用户图像，但是没有识别出用户手势，同样无法实现手势交互。从而严重影响用户的使用体验。

技术实现思路

[0005]本申请一些实施例提供了一种显示设备、终端设备和手势交互方法。以解决相关技术中，显示设备无法实现手势交互，严重影响用户的使用体验的问题。
[0006]第一方面，本申请提供一种显示设备，包括显示器，图像采集器和控制器。其中，图像输入接口被配置为连接图像采集器，图像采集器用于采集用户图像；控制器被配置为执行以下步骤：
[0007]接收用户输入的手势交互指令；
[0008]生成手势识别指令并发送至终端设备，所述手势识别指令中包含所述图像采集器采集的第一用户图像或图像采集指令；以使终端设备根据所述第一用户图像生成第一手势指令，或，根据所述图像采集指令采集第二用户图像并根据所述第二用户图像生成第二手势指令；
[0009]响应于终端设备发送的所述第一手势指令或所述第二手势指令，执行所述第一手势指令或所述第二手势指令。
[0010]第二方面，本申请一些实施例提供一种终端设备，终端设备被配置为：
[0011]接收显示设备发送的手势识别指令并检测，手势识别指令中包含第一用户图像或图像采集指令；
[0012]基于检测到所述手势识别指令中包含第一用户图像，对所述第一用户图像进行手
势识别处理，得到第一用户手势；获取所述第一用户手势关联的第一手势指令，并将所述第一手势指令发送至显示设备；
[0013]基于检测到所述手势识别指令中包含图像采集指令，采集第二用户图像并对所述第二用户图像进行手势识别处理，得到第二用户手势；获取所述第二用户手势相关联的第二手势指令，并将所述第一手势指令发送至显示设备。
[0014]第三方面，本申请一些实施例提供一种手势交互方法，应用于显示设备，包括：
[0015]接收用户输入的手势交互指令；
[0016]生成手势识别指令并发送至终端设备，所述手势识别指令中包含第一用户图像或图像采集指令；以使终端设备根据所述第一用户图像生成第一手势指令，或，根据所述图像采集指令采集第二用户图像并根据所述第二用户图像生成第二手势指令；
[0017]响应于终端设备发送的所述第一手势指令或所述第二手势指令，执行所述第一手势指令或所述第二手势指令。
[0018]由以上技术方案可以看出，本申请一些实施例提供了一种显示设备、终端设备和手势交互方法。显示设备可以生成包含第一用户图像的手势识别指令或包含图像采集指令的手势识别指令，并将手势识别指令发送至终端设备。终端设备根据第一用户图像可以生成第一手势指令，终端设备也可以根据图像采集指令采集第二用户图像并根据第二用户图像生成第二手势指令。终端设备将第一手势指令或第二手势指令发送给显示设备，显示设备进一步可以执行。因此，当显示设备无法采集用户图像时，终端设备可以根据图像采集指令采集图像从而识别用户指令，当显示设备可以采集用户图像，但无法识别出图像中的手势时，终端设备也可以对用户图像进行识别，得到用户指令，从而实现手势交互，提高了用户的体验性。
附图说明
[0019]为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
[0020]图1示出了根据一些实施例的显示设备的使用场景；
[0021]图2示出了根据一些实施例的控制装置100的硬件配置框图；
[0022]图3示出了根据一些实施例的显示设备200的硬件配置框图；
[0023]图4示出了根据一些实施例的显示设备200中软件配置图；
[0024]图5示出了一些实施例中用户界面的示意图；
[0025]图6示出了一些实施例中用户界面的示意图；
[0026]图7示出了一些实施例中用户手势的示意图；
[0027]图8示出了一些实施例中显示设备各部件的交互流程图；
[0028]图9示出了一些实施例中图像交互模式的流程示意图；
[0029]图10示出了一些实施例中终端识别模式的流程示意图；
[0030]图11示出了一些实施例中手势交互模式情况的示意图；
[0031]图12示出了一些实施例中手势交互模式情况的示意图；
[0032]图13示出了一些实施例中显示设备和终端设备的拍摄范围的示意图；
[0033]图14示出了一些实施例中显示设备和终端设备的拍摄范围的示意图；
[0034]图15示出了一些实施例中分屏场景下手势交互的流程示意图；
[0035]图16示出了一些实施例中手势交互的流程示意图；
[0036]图17示出了一些实施例中显示器显示第一用户图像和第二用户图像的示意图；
[0037]图18示出了手势交互方法的一些实施例的流程示意图。
具体实施方式
[0038]为使本申请的目的、实施方式和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
[0039]基于本申请描述的示例性实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请所附权利要求保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。
[0040]本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种显示设备，其特征在于，包括：显示器；图像输入接口，被配置为连接图像采集器，图像采集器用于采集用户图像；控制器，被配置为：接收用户输入的手势交互指令；生成手势识别指令并发送至终端设备，所述手势识别指令中包含所述图像采集器采集的第一用户图像或图像采集指令；以使终端设备根据所述第一用户图像生成第一手势指令，或，根据所述图像采集指令采集第二用户图像并根据所述第二用户图像生成第二手势指令；响应于终端设备发送的所述第一手势指令或所述第二手势指令，执行所述第一手势指令或所述第二手势指令。2.根据权利要求1所述的显示设备，其特征在于，所述控制器还被配置为：在执行接收用户输入的手势交互指令的步骤后，获取所述图像采集器采集的第一用户图像；对所述第一用户图像进行手势识别处理，得到所述第一用户图像中的第一用户手势；获取所述第一用户手势的关联指令，并确定为第一手势指令；执行所述第一手势指令；或，执行生成手势识别指令并发送至终端设备的步骤。3.根据权利要求2所述的显示设备，其特征在于，所述控制器还被配置为：在执行接收用户输入的手势交互指令的步骤后，获取显示设备的负载率情况；根据所述负载率情况判断显示设备是否满足预设的第一负载率条件，所述第一负载率条件为：在预设时间内，显示设备的负载率超过预设的第一阈值的次数达到预设数值；若是，则执行生成手势识别指令并发送至终端设备的步骤；若否，则执行获取所述图像采集器采集的第一用户图像的步骤。4.根据权利要求3所述的显示设备，其特征在于，所述控制器还被配置为：在执行生成手势识别指令并发送至终端设备的步骤中，根据所述负载率情况判断显示设备是否满足预设的第二负载率条件，所述第二负载率条件为：在预设时间内，显示设备的负载率超过预设的第二阈值的次数达到预设数值；所述第二阈值大于所述第一阈值；若否，则获取所述图像采集器采集的第一用户图像，生成包含所述第一用户图像的第一手势识别指令并发送至终端设备；若是，则生成包含图像采集指令的第二手势识别指令，并发送至终端设备，所述图像采集指令用于使终端设备采集第二用户图像。5.根据权利要求2所述的显示设备，其特征在于，所述控制器被配置为：在执行获取所述第一用户手势的关联指令的步骤前，获取所述第一用户手势的置信度并检测；基于检测到所述置信度大于或等于预设的置信度阈值，则执行获取所述第一用户手势的关联指令的步骤；基于检测到所述置信度小于预设的置信度阈值，则执行生成手势识别指令并发送至终端设备的步骤，且所...

【专利技术属性】
技术研发人员：高伟，贾亚洲，周晓磊，祝欣培，岳国华，李佳琳，付廷杰，李保成，吴汉勇，
申请(专利权)人：海信视像科技股份有限公司，
类型：发明
国别省市：