This field relates to the technical field of user interface, in particular to a voice control method, system and intelligent terminal based on terminal interface recognition. The method includes: acquiring and identifying the content of the current interface; generating voice instructions corresponding to the operation events in the current interface according to a pre-determined strategy; superimposing voice instructions on the current interface; and performing event operation on the terminal by inputting corresponding voice instructions. The detailed operation of each application interface can be controlled by voice. Users can quickly understand and remember the voice instructions of various operations. The voice instructions correspond to the detailed position of the interface operation one by one. The recognition accuracy will be greatly improved, and the user experience will also be improved.
【技术实现步骤摘要】
一种基于终端界面识别的语音控制方法、系统及智能终端
本领域涉及用户界面
,具体涉及一种基于终端界面识别的语音控制方法、系统及智能终端。
技术介绍
当前的很多软件采取图形用户界面(GUI,GraphicalUserInterface)的形式,允许用户通过鼠标、键盘、触摸屏等与GUI交互。随着计算机技术的飞速发展,各种便携式可视装备不断涌现,如智能眼镜、智能手表等等。其中,很多装备是不方便用手操作的,语音控制是一种很好的替代方案。传统的软件用户界面仅考虑可视表现而开发,对于有助于语音交互的界面开发细节关注不够。目前存在各种技术以提供更好的语音人机交互,其中很多注重于创建可结合的更易于语音输入交互的新交互风格,如CommandTalk、ATIS、ELVIS、SUITEKeys等等。SUITEKeys直接模拟用手移动鼠标并且按各个键的交互。这些系统侧重于提供用于口头人机交互的改进型模型,从而在根本上改变交互风格。随着通讯技术的不断发展,终端的控制方式越来越丰富,也越来越智能,其中,语音控制即一种应用广泛、技术较成熟的控制方式。但是现有技术中的语音系统,仍存在各应用界面详细操作无法使用语音控制,用户无法了解和记住各类操作的语音指令,语音指令与界面操作的详细位置无法一一对应的问题,其识别准确度会很大程度的降低,造成不良的用户体验。
技术实现思路
为解决各应用界面详细操作无法使用语音控制,用户无法了解和记住各类操作的语音指令,语音指令与界面操作的详细位置无法一一对应的问题,本专利技术提供了一种基于终端界面识别的语音控制方法、系统及智能终端。为了解决上述技术问题,本专利 ...
【技术保护点】
1.一种基于终端界面识别的语音控制方法,其特征在于,所述方法包括:获取和识别当前界面的内容;根据预先制定的策略生成与当前界面中操作事件对应的语音指令;将语音指令叠加显示在当前界面上;用户通过输入对应的语音指令对终端进行事件操作。
【技术特征摘要】
1.一种基于终端界面识别的语音控制方法,其特征在于,所述方法包括:获取和识别当前界面的内容;根据预先制定的策略生成与当前界面中操作事件对应的语音指令;将语音指令叠加显示在当前界面上;用户通过输入对应的语音指令对终端进行事件操作。2.根据权利要求1所述的基于终端界面识别的语音控制方法,其特征在于:预先对应用程序各界面中的操作事件进行语音指令标注,应用程序界面打开界面时根据标注的策略自动生成语音指令,在当前界面上显示。3.根据权利要求1所述的基于终端界面识别的语音控制方法,其特征在于:识别当前界面中的控件信息,判断是否存在操作事件,若有则生成与操作事件对应的语音指令。4.根据权利要求4所述的基于终端界面识别的语音控制方法,其特征在于:控件信息包括ImageView、Buttom、ListView、TextView和EditView中的一种或多种。5.根据权利要求1所述的基于终端界面识别的语音控制方法,其特征在于:所述操作事件包括编辑、滑动、点击和长按操作中的一种或多种。6.根据权利要求1所述的基于终端界面识别的语音控制方法,其...
【专利技术属性】
技术研发人员:王子,梁博,杨扬,杨楠,
申请(专利权)人:珠海格力电器股份有限公司,
类型:发明
国别省市:广东,44
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。