一种基于自动标注的屏幕控制方法技术

本发明专利技术公开了一种基于自动标注的屏幕控制方法，包括用户、屏幕和控制器，包括以下步骤：(1)用户向控制器发出控制指令；(2)控制器控制屏幕进行自动标注；(3)屏幕将自动标注的可操作区域及可操作区域相应的符号展示给用户；(4)用户向控制器发出符号指令；(5)控制器将符号指令发送给屏幕；(6)屏幕执行上述符号指令相应的功能。本发明专利技术解决了图像识别较难、语音识别率低和无通用性的问题，通过遍历屏幕内容里的元素控件，寻找可操作区域，并进行符号标注，避免直接对图像内容进行识别。简单的符号大大提高用户语音输入的准确率。语音和符号标注可适用于各种屏幕的系统，通用性的问题也就此解决。

【技术实现步骤摘要】

本专利技术涉及屏幕领域，特别是指。
技术介绍
现阶段，远程控制大屏幕设备的实现方式有很多种，但遥控器的控制方式依旧居于榜首。此种控制方式由来已久，但是也存在诸多问题，譬如遥控器的丢失或没电造成的各种不便，且可控距离也较为受限。此外，各大厂商对各自产品控制方式不同，也导致不同产品间互通性较差。纵观之，整个市场上并无体系化、通用性的规则和使用方式。如搜狐对其视频应用在TV上进行了特别定制，开发了专用的控制程序，此种方式仅有搜狐可用。而当前新兴的技术实现方式，如语音控制和图像识别技术，语音控制存在识别率低的问题，特别是不同的方言，语调，发音不准等问题。图像识别技术由于其特殊性，存在背景负载或干扰过多的问题，使用时并不方便。
技术实现思路
本专利技术提出，解决了图像识别技术实现困难，语音识别不够准确和无通用性的问题本专利技术的技术方案是这样实现的:，包括用户、屏幕和控制器，包括以下步骤:(I)用户向控制器发出控制指令；步骤⑴中，用户通过按键或语音向控制器发出控制指令。(2)控制器控制屏幕进行自动标注；步骤(2)中，自动标注包括以下步骤:(201)开始遍历屏幕上的控件；(202)寻找并获取一个控件；(203)若成功获取一个控件，则进入步骤(204)，否则结束；(204)若控件是非根控件，则进入步骤(205)，否则进入步骤(202);(205)若非根控件可被操作，则进入步骤(206)，否则进入步骤(202)；(206)若非根控件与其他已被标注非根控件没有交集，则进入步骤(207)，否则进入步骤(202)；(207)采用符号将非根控件进行标注，并将该符号加入预制符号字典。(3)屏幕将自动标注的可操作区域及可操作区域相应的符号展示给用户；(4)用户向控制器发出符号指令；(5)控制器将上述符号指令发送给屏幕；(6)屏幕执行上述符号指令相应的功能。进一步的，符号为数字或字母或文字或标点符号或特殊符号中的一种或几种。进一步的，控制器为手机或电脑或数字电视。进一步的，控制器通过蓝牙或红外线或无线射频或WiFi或3G通信或LTE通信向屏幕发送控制指令。进一步的，屏幕为手机屏幕或电脑屏幕或数字电视屏幕。本专利技术的有益效果在于:解决了图像识别较难、语音识别率低和无通用性。定义了新的屏幕的交互方式，解决了行业间的互通问题，肃清了相应规则。通过遍历屏幕内容里的元素控件，寻找可操作区域，并进行符号标注，避免直接对图像内容进行识别。通过对可操作区域进行标注，形成了符号字典。有限的符号字典可以大大的提高用户语音输入的准确率。语音和符号标注可适用于各种屏幕的系统，通用性的问题也就此解决。【附图说明】为了更清楚地说明本专利技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本专利技术的流程图；图2为本专利技术的自动标注的流程图；图3为安卓手机屏幕可操作区域的示意图。【具体实施方式】下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。如图1所示，本专利技术提出了，包括用户、屏幕和控制器，包括以下步骤:(I)用户向控制器发出控制指令；用户通过按键或语音向控制器发出控制指令。⑵控制器控制屏幕进行自动标注；(3)屏幕将自动标注的可操作区域及可操作区域相应的符号展示给用户；(4)用户向控制器发出符号指令；(5)控制器将上述符号指令发送给屏幕；(6)屏幕执行上述符号指令相应的功能。具体的，用户即为需要对屏幕进行控制的人，控制器可与屏幕集成在一起，比如智能手机，移动设备等等，此时，屏幕即为手机或移动设备的屏幕，控制器即为手机或移动设备上的按键或操控区，适用于触屏或非触屏手机。当控制器也可不与屏幕集成在一起，比如当用户需控制电脑或数字电视时，控制器可为手机、遥控器或与电脑连接的可操作模块。当用户需要远程控制LED屏幕或电脑时，控制器可为遥控器、手机或电脑，遥控器、手机和电脑能够用于控制LED屏幕，手机和电脑可用于控制另一台电脑。一般来说，凡具有屏幕设备，并可对屏幕设备进行自动标注的产品，均可通过本专利技术提出的方法进行控制。在具体实施过程中，比如用户在观看数字电视，控制器可为用户的手机，手机上安装有用于控制数字电视的软件，该软件能够在安卓系统和苹果系统上，该系统使用的范围广，兼容性较强。该软件可与用户的手机号码绑定，使用更加方便安全。当用户想要换频道或者玩游戏等，可点击软件，在软件的主菜单上点击相应的功能区，手机会向数字电视发送控制指令信号，手机向数字电视发送控制指令信号，可通过蓝牙或无线网络或红外线或射频进行通信，数字电视上安装有相对应的接收信号的装置，手机控制数字电视的距离比现有的遥控器的范围增加了很多，比如遥控器发出的信号经过墙壁会产生衰弱，因而，遥控器只能和数字电视在同一间房间内才能起作用，而手机可通过WiFi连接数字电视，即使手机和数字电视不在同一间屋子，也能对数字电视进行控制。当然，这在数字电视控制的领域里的优势并不明显，但其可能在其他领域产生不可预料的技术效果。数字电视接收到控制指令信号，对屏幕当前第1页1 2 本文档来自技高网...

【技术保护点】
一种基于自动标注的屏幕控制方法，包括用户、屏幕和控制器，其特征在于，包括以下步骤：(1)用户向控制器发出控制指令；(2)控制器控制屏幕进行自动标注；(3)屏幕将自动标注的可操作区域及可操作区域相应的符号展示给用户；(4)用户向控制器发出符号指令；(5)控制器将符号指令发送给屏幕；(6)屏幕执行上述符号指令相应的功能。

【技术特征摘要】

【专利技术属性】
技术研发人员：陈洋，王恒，陈光明，许跃，
申请(专利权)人：深圳市卡迪尔通讯技术有限公司，
类型：发明
国别省市：广东;44