一种基于JavaScript扩展的Web页面语音操控实现方法技术
A method of Web page voice manipulation based on JavaScript extension
The present invention provides a method for realizing voice control Web page based on the extension of JavaScript, the method comprises the following steps: Web engine web address, call the JavaScript extension analysis \, contains event attribute label page and hyperlink tag; get all the information in the web page; assigned to identify each operation only the label, form two set of tuples; according to the type of label for each label, add the corresponding operation according to the user identity for each label; web operation identifies the key words speak the key words, through the voice into text analysis engine, matching text analysis with the two set of tuples in the identification, acquisition, identification text corresponding to the Web; by calling the JavaScript script engine, matching the corresponding event trigger identification function or hyperlink jump. The method of the invention does not need to trigger additional mouse click events, thereby shortening the response time, improving the processing speed and enhancing the user experience.
【技术实现步骤摘要】
一种基于JavaScript扩展的Web页面语音操控实现方法
本专利技术涉及Web引擎
，具体涉及一种基于JavaScript扩展的Web页面语音操控实现方法。
技术介绍
随着语音识别技术的飞速发展，越来越多的Web应用和智能设备集成了语音功能模块，方便了人们的生活。在将语音识别功能加入到网页浏览中的时候，存在的问题是，如何高效地解析网页中的超链接标签，并通过语音控制超链接的跳转进行网页浏览。在现有的应用中，采取的一般做法是语音引擎的启动与网页的加载同时进行，在获取网页中标签的同时绑定唯一的语音文本标签，在用户说出相应的文本标签后，再计算该文本在设备屏幕上的坐标，并向该坐标发送点击事件实现链接跳转达到网页浏览。上述方法存在的问题是，在向网页标签发送点击事件之前，需要先计算该标签在屏幕中的坐标，每次当页面发生变化都需要计算一次，这种方法还需要调用系统的鼠标点击功能来触发相关操作，而额外向设备申请计算资源和使用系统功能，会显著降低超链接的跳转速度，影响用户体验。
技术实现思路
本专利技术的目的在于克服目前Web页面实现语音操控时存在的上述问题，提出一种基于JavaScript扩展的Web页面语音操控实现方法，该方法使用JavaScript脚本完成语音控制，不触发额外的鼠标点击事件，无须计算标签所在屏幕坐标，提高了处理速度。为了实现上述目的，本专利技术提供了一种基于JavaScript扩展的Web页面语音操控实现方法，所述方法包括：Web引擎获得网页地址，调用JavaScript扩展解析网页，获取网页中包含事件属性的标签和超链接标签；获取网页中的所有标签的信息...
【技术保护点】
一种基于JavaScript扩展的Web页面语音操控实现方法，所述方法包括：Web引擎获得网页地址，调用JavaScript扩展解析网页，获取网页中包含事件属性的标签和超链接标签；获取网页中的所有标签的信息；对每一个标签分配唯一操作标识，形成二元组集合；根据每个标签的标签类型，为每个标签添加对应的操作标识；用户根据网页操作标识说出关键词，将该关键词通过语音引擎解析成文本，将解析出的文本与二元组集合中的标识进行匹配，获取文本对应的匹配标识；Web引擎通过调用JavaScript脚本，触发匹配标识对应的事件函数或超链接跳转。
【技术特征摘要】
1.一种基于JavaScript扩展的Web页面语音操控实现方法，所述方法包括：Web引擎获得网页地址，调用JavaScript扩展解析网页，获取网页中包含事件属性的标签和超链接标签；获取网页中的所有标签的信息；对每一个标签分配唯一操作标识，形成二元组集合；根据每个标签的标签类型，为每个标签添加对应的操作标识；用户根据网页操作标识说出关键词，将该关键词通过语音引擎解析成文本，将解析出的文本与二元组集合中的标识进行匹配，获取文本对应的匹配标识；Web引擎通过调用JavaScript脚本，触发匹配标识对应的事件函数或超链接跳转。2.根据权利要求1所述的基于JavaScript扩展的Web页面语音操控实现方法，其特征在于，所述方法具体包括：步骤1)预先定义实现语音操控的JavaScript脚本，将该脚本注入到WebView中，WebView获得网页地址并加载网页；通过调用JavaScript脚本解析该网页，获取网页中包含事件属性的标签和超链接标签；并用prompt方法携带标签信息以对话框形式在网页中依次弹出；步骤2)WebView依次捕获用JavaScript脚本中prompt方法产生的对话框，提取出网页中各标签的信息并识别标签类型；对每一个标签分配唯一操作标识，形成二元组集合；步骤3)根据每个标签的标签类型，在网页中为每个标签添加对应的操作标识；所述操作标识包括：事件、操作目标和用户可视化的描述；步骤4)用户根据网页操作标识说出关键词，将该关键词通过语音引擎解析成文本，将解析出的文本与二元组集合中的操作标识进行匹配，获取文本对应的匹配标识；步骤5)Web引擎通过调用JavaScript脚本，触发匹配标识对应的事件函数或超链接跳转。3.根据权利要求2所述的基于JavaScript扩展的Web页面语音操控实现方法，其特征在于，所述步骤1)具体包括：步骤1-1)预先定义实现语音操控的JavaScript脚本，将该脚本加载到WebView中；步骤1-2)调用WebView的setWebViewClient方法向WebView注入WebViewClient类对象，并把加载JavaScript脚本的代码添加到类中的onPageFinished方法中；骤1-3)当WebView加载网页完毕后即触发onPageFinished方法，调用脚本解析网页，获取网页中包含事件属性的标签和超链接标签，以标签为单位将标签信息传入prompt方法，prompt方法作为从网页向外传递标签信息的媒介，在网页中弹出带有提示信息的对话框。4.根据权利要求2所述的基...
【专利技术属性】
技术研发人员：党寿江，李强，脱立恒，李超鹏，
申请(专利权)人：中国科学院声学研究所，
类型：发明
国别省市：北京,11
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。