显示设备和控件识别方法技术

本申请提供了一种显示设备和控件识别方法。显示设备包括显示器和控制器。其中，控制器被配置为：当接受到用户输入的控件触发指令时，可以获取控件触发指令中的控件关键词，并控制显示器显示候选控件界面。其中，候选控件界面中具有控件文本中包括控件关键词的候选控件，以使用户选择出目标候选控件。再根据用户对候选控件界面的操作，可以确定用户选择的目标候选控件并进行触发。本申请可以从用户界面的多个相似控件中识别出用户需要的目标控件，从而响应用户的指令，提高了用户的体验性。提高了用户的体验性。提高了用户的体验性。

【技术实现步骤摘要】
显示设备和控件识别方法


[0001]本申请涉及显示设备
，尤其涉及一种显示设备和控件识别方法。

技术介绍

[0002]显示设备是指能够输出具体显示画面的终端设备，如智能电视、移动终端、智能广告屏、投影仪等。随着显示设备的快速发展，显示设备的功能将越来越丰富，性能也越来越强大，可实现双向人机交互功能，集影音、娱乐、数据等多种功能于一体，用于满足用户多样化和个性化需求。智能语音交互已经成为显示设备的主要功能之一。
[0003]对于具有智能语音交互功能的显示设备，用户可以通过语音的方式输入控制指令，从而实现显示设备的一些功能。例如，用户可以通过说出“我要看某某”的方式，显示设备通过识别出用户输入的指令中所包含的控件名称，并进一步触发相应的目标控件，从而实现用户的需求。
[0004]然而，用户输入的指令中的控件名称可能不是完整的，例如，用户语音输入“打开我的”，显示设备可以识别出的控件名称为“我的”，这并不是一个完整的控件名称，显示设备可能有多个控件名称中包含“我的”的控件。此时，显示设备可能无法确认用户需要打开的目标控件，从而无法响应用户的指令，导致用户的体验性较差。

技术实现思路

[0005]本专利技术提供了一种显示设备和控件识别方法。以解决相关技术中，显示设备可能无法确认用户需要打开的目标控件，导致用户的体验性较差的问题。
[0006]第一方面，本申请提供一种显示设备，包括显示器和控制器。其中，控制器被配置为执行以下步骤：
[0007]响应于用户输入的控件触发指令，获取所述控件触发指令中的控件关键词；控制显示器显示候选控件界面，以使用户根据所述候选控件界面选择候选控件；所述候选控件界面中包括至少一个候选控件，所述候选控件的控件文本中包括所述控件关键词；根据用户对所述候选控件界面的操作，确定用户选择的目标候选控件；触发目标候选控件。
[0008]在一些实现方式中，所述控制器还被配置为：在执行获取所述控件触发指令中的控件关键词的步骤前，控制显示器显示用户界面，以使用户输入所述控件触发指令。
[0009]在一些实现方式中，在执行控制显示器显示候选控件界面的步骤前，根据所述控件关键词获取所述用户界面中所有的候选控件；根据所有的候选控件生成候选控件界面。
[0010]在一些实现方式中，所述控制器进一步被配置为：在执行根据所述控件关键词获取所述用户界面中所有的候选控件的步骤中，
[0011]获取所述用户界面中每个控件的控件信息，所述控件信息包括控件文本和控件位置；将控件文本中包含所述控件关键词的控件确定为一个候选控件；获取所述用户界面中所有的候选控件。
[0012]在一些实现方式中，所述控制器还被配置为：在执行控制显示器显示候选控件界
面的步骤后，在所有的候选控件中随机选取一个候选控件作为焦点控件，并在所述候选控件界面中突出显示，以使用户确认是否触发所述焦点控件；如果检测到用户输入的确认指令，触发所述焦点控件；如果未检测到用户输入的确认指令，执行所述确定用户选择的目标候选控件的步骤。
[0013]在一些实现方式中，所述控制器进一步被配置为：在执行确定用户选择的目标候选控件的步骤中，响应于控制装置在用户对所述候选控件界面中的焦点控件进行切换时发送的指令，获取切换后的焦点控件，并确定为目标候选控件。
[0014]在一些实现方式中，所述控制器进一步被配置为：在执行确定用户选择的目标候选控件的步骤中，将所述候选控件界面发送至终端设备，以使终端设备显示所述候选控件界面；响应于移动终端在用户触控所述候选控件界面中的候选控件时发送的指令，将用户触控的候选控件确定为所述目标候选控件。
[0015]在一些实现方式中，显示设备还包括图像采集器，被配置为采集用户图像。
[0016]在一些实现方式中，所述控制器进一步被配置为：在执行确定用户选择的目标候选控件的步骤中，
[0017]获取所述候选控件界面中每个候选控件的偏移角度，所述偏移角度用于表示所述候选控件相对于所述候选控件界面的位置；根据图像采集器采集的用户图像获取用户在所述候选控件界面中的用户手势轨迹；根据每个候选控件的偏移角度和所述用户手势轨迹确定用户选择的目标候选控件。
[0018]在一些实现方式中，所述控制器进一步被配置为：在执行获取所述候选控件界面中每个候选控件的偏移角度的步骤中，
[0019]设置所述候选控件界面的界面焦点；确定每个候选控件的标记点，所述每个候选控件的标记点为两个；分别获取每个候选控件的两个标记点到所述界面焦点之间的连线，并将两条连线之间的角度确定为每个候选控件的偏移角度。
[0020]在一些实现方式中，所述控制器进一步被配置为：在执行根据图像采集器采集的用户图像获取用户在所述候选控件界面中的用户手势轨迹的步骤中，
[0021]将所述用户图像映射到所述候选控件界面中，并将初始的用户手势焦点确定为所述候选控件界面的界面焦点；获取预设周期后的用户手势焦点位于所述候选控件界面中的第一位置；将所述界面焦点和所述第一位置之间的轨迹确定为用户手势轨迹。
[0022]在一些实现方式中，所述控制器进一步被配置为：在执行根据每个候选控件的偏移角度和所述用户手势轨迹确定用户选择的目标候选控件的步骤中，
[0023]获取偏移角度中包括所述用户手势轨迹的候选控件，确定为第一候选控件；获取所述第一候选控件的关联候选控件，所述第一候选控件和所述关联候选控件的偏移角度的重叠部分大于预设阈值；确定所述用户手势轨迹的轨迹距离，并根据所述轨迹距离对所述第一候选控件和所述关联候选控件进行筛选，得到用户选择的目标候选控件。
[0024]在一些实现方式中，所述控制器还被配置为：在执行确定用户选择的目标候选控件的步骤后，
[0025]将所述目标候选控件作为焦点控件，并在所述候选控件界面中突出显示，以使用户确认是否触发所述焦点控件；如果检测到用户输入的确认指令，执行触发所述目标候选控件的步骤；如果未检测到用户输入的确认指令，获取下一个预设周期后的用户手势焦点
位于所述候选控件界面中的第二位置；将所述界面焦点和所述第二位置之间的轨迹确定为更新后的用户手势轨迹；根据所述更新后的用户手势轨迹，执行所述确定用户选择的目标候选控件的步骤。
[0026]第二方面，本申请提供一种控件识别方法，应用于显示设备，包括：
[0027]响应于用户输入的控件触发指令，获取所述控件触发指令中的控件关键词；控制显示器显示候选控件界面，以使用户根据所述候选控件界面选择候选控件；所述候选控件界面中包括至少一个候选控件，所述候选控件的控件文本中包括所述控件关键词；根据用户对所述候选控件界面的操作，确定用户选择的目标候选控件；触发目标候选控件。
[0028]由以上技术方案可以看出，本申请提供了一种显示设备和控件识别方法。当接受到用户输入的控件触发指令时，可以获取控件触发指令中的控件关键词，并控制显示器显示候选控件界面。其中，候选控件界面中具有控件文本中包括本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种显示设备，其特征在于，包括：显示器；控制器，被配置为：响应于用户输入的控件触发指令，获取所述控件触发指令中的控件关键词；控制显示器显示候选控件界面，以使用户根据所述候选控件界面选择候选控件；所述候选控件界面中包括至少一个候选控件，所述候选控件的控件文本中包括所述控件关键词；根据用户对所述候选控件界面的操作，确定用户选择的目标候选控件；触发所述目标候选控件。2.根据权利要求1所述的显示设备，其特征在于，所述控制器还被配置为：在执行获取所述控件触发指令中的控件关键词的步骤前，控制显示器显示用户界面，以使用户输入所述控件触发指令；在执行控制显示器显示候选控件界面的步骤前，根据所述控件关键词获取所述用户界面中所有的候选控件；根据所有的候选控件生成候选控件界面。3.根据权利要求2所述的显示设备，其特征在于，所述控制器进一步被配置为：在执行根据所述控件关键词获取所述用户界面中所有的候选控件的步骤中，获取所述用户界面中每个控件的控件信息，所述控件信息包括控件文本和控件位置；将控件文本中包含所述控件关键词的控件确定为一个候选控件；获取所述用户界面中所有的候选控件。4.根据权利要求2所述的显示设备，其特征在于，所述控制器还被配置为：在执行控制显示器显示候选控件界面的步骤后，在所有的候选控件中随机选取一个候选控件作为焦点控件，并在所述候选控件界面中突出显示，以使用户确认是否触发所述焦点控件；如果检测到用户输入的确认指令，触发所述焦点控件；如果未检测到用户输入的确认指令，执行所述确定用户选择的目标候选控件的步骤。5.根据权利要求4所述的显示设备，其特征在于，所述控制器进一步被配置为：在执行确定用户选择的目标候选控件的步骤中，响应于控制装置在用户对所述候选控件界面中的焦点控件进行切换时发送的指令，获取切换后的焦点控件，并确定为目标候选控件。6.根据权利要求1所述的显示设备，其特征在于，所述控制器进一步被配置为：在执行确定用户选择的目标候选控件的步骤中，将所述候选控件界面发送至终端设备，以使终端设备显示所述候选控件界面；响应于移动终端在用户触控所述候选控件界面中的候选控件时发送的指令，将用户触控的候选控件确定为所述目标候选控件。7.根据权利要求1所述的显示设备，其特征在于，还包括：图像采集器，被配置为采集用户图像；所述控制器进一步被配置为：在执行确定用户选择的目标候选控件的步骤中，获取所述候选控件界面中每个候选控件的偏移角度，所述偏移角度用于表示所述候选
控件相对于所述候选控件界面的位置；根据图像采集器采集的用户图像获取用户在所述候选...

【专利技术属性】
技术研发人员：高伟，姜俊厚，贾亚洲，岳国华，祝欣培，李佳琳，初德进，李保成，吴汉勇，
申请(专利权)人：海信视像科技股份有限公司，
类型：发明
国别省市：