用于辅助阅读的方法及装置、服务器、存储介质制造方法及图纸

本申请涉及教育教学技术领域，公开一种用于辅助阅读的方法，包括：确定文本类型，并获取文本内容；采集用户语音信息，并根据用户语音信息解析出语义内容；将语义内容与文本内容进行匹配，确定焦点位置；在焦点位置处显示虚拟手势，以向用户指示待阅读内容的位置。本申请通过采集用户语音信息提取语义内容，并与文本内容进行匹配，能够识别出用户当前朗读到的位置，进而锁定用户即将要阅读到的焦点位置。再控制虚拟手势在焦点位置处显示，本申请能够轻松方便地完成对待读内容的辅助指示。从而实现用户读到哪，虚拟手势指到哪的效果，有利于提升辅助阅读的准确性，改善用户阅读体验。本申请还公开一种用于辅助阅读的装置及服务器、存储介质。储介质。储介质。

【技术实现步骤摘要】
用于辅助阅读的方法及装置、服务器、存储介质


[0001]本申请涉及教育教学
，例如涉及一种用于辅助阅读的方法及装置、服务器、存储介质。

技术介绍

[0002]目前，随着教育水平的提高，越来越多的人重视起阅读。尤其针对孩童阅读书本，现在市面上流行点读笔及其专门配套图书以辅助孩童的阅读。但此类产品成本较高，且书本覆盖面较窄，不利于阅读产品的普及。为此，另有一种技术是确定用户手指在待读页面图像上的页面指读位置；基于页面指读位置，以及待读页面图像及其对应的参照页面图像之间的坐标映射关系，确定页面指读位置映射在参照页面图像中的粗略指读位置；基于页面指读位置在待读页面图像中的页面感兴趣区域，以及粗略指读位置在参照页面图像中的参照感兴趣区域，确定参照页面图像中的精细指读位置；基于精细指读位置，进行辅助阅读。
[0003]在实现本公开实施例的过程中，发现相关技术中至少存在如下问题：
[0004]该方法依赖手指的动作，在使用过程中需要时刻保持手指的动作，用户实际体验欠佳。而且手指长时间动作会导致人的疲劳，以及注意力的下降。进而可能会发生用户指错、指歪或者指岔行等现象，这反而影响了辅助阅读的准确性。

技术实现思路

[0005]为了对披露的实施例的一些方面有基本的理解，下面给出了简单的概括。所述概括不是泛泛评述，也不是要确定关键/重要组成元素或描绘这些实施例的保护范围，而是作为后面的详细说明的序言。
[0006]本公开实施例提供了一种用于辅助阅读的方法及装置、服务器、存储介质，能够提升辅助阅读的准确性，并改善用户阅读体验。
[0007]在一些实施例中，所述方法包括：
[0008]确定文本类型，并获取文本内容；
[0009]采集用户语音信息，并根据用户语音信息解析出语义内容；
[0010]将语义内容与文本内容进行匹配，确定焦点位置；
[0011]在焦点位置处显示虚拟手势，以向用户指示待阅读内容的位置。
[0012]在一些实施例中，所述装置包括：处理器和存储有程序指令的存储器，所述处理器被配置为在运行所述程序指令时，执行上述的用于辅助阅读的方法。
[0013]在一些实施例中，所述服务器包括：上述的用于辅助阅读的装置。
[0014]在一些实施例中，所述存储介质，存储有程序指令，所述程序指令在运行时，执行上述的用于辅助阅读的方法。
[0015]本公开实施例提供的用于辅助阅读的方法及装置、服务器、存储介质，可以实现以下技术效果：
[0016]本公开实施例中，通过确定文本类型及获取文本内容，并执行相应的指示操作，能
够同时实现对电子文本和纸质文本的辅助阅读。通过采集用户语音信息提取语义内容，并与文本内容进行匹配。本公开实施例能够识别出用户当前朗读到的位置，进而锁定用户接下来将要阅读到的焦点位置。再利用虚拟手势在焦点位置处进行显示，本公开实施例能够轻松方便地完成对待阅读文本内容的辅助指示。从而实现用户读到哪，虚拟手势指到哪的效果，因此有利于提升辅助阅读的准确性，并改善用户阅读体验。
[0017]以上的总体描述和下文中的描述仅是示例性和解释性的，不用于限制本申请。
附图说明
[0018]一个或多个实施例通过与之对应的附图进行示例性说明，这些示例性说明和附图并不构成对实施例的限定，附图中具有相同参考数字标号的元件示为类似的元件，附图不构成比例限制，并且其中：
[0019]图1是本公开实施例提供的一个用于辅助阅读的方法的示意图；
[0020]图2是本公开实施例提供的另一个用于辅助阅读的方法的示意图；
[0021]图3是本公开实施例提供的另一个用于辅助阅读的方法的示意图；
[0022]图4是本公开实施例提供的另一个用于辅助阅读的方法的示意图；
[0023]图5是本公开实施例提供的另一个用于辅助阅读的方法的示意图；
[0024]图6是本公开实施例提供的一个用于辅助阅读的装置的示意图。
具体实施方式
[0025]为了能够更加详尽地了解本公开实施例的特点与
技术实现思路
，下面结合附图对本公开实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本公开实施例。在以下的技术描述中，为方便解释起见，通过多个细节以提供对所披露实施例的充分理解。然而，在没有这些细节的情况下，一个或多个实施例仍然可以实施。在其它情况下，为简化附图，熟知的结构和装置可以简化展示。
[0026]本公开实施例的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开实施例的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含。
[0027]除非另有说明，术语“多个”表示两个或两个以上。
[0028]本公开实施例中，字符“/”表示前后对象是一种“或”的关系。例如，A/B表示：A或B。
[0029]术语“和/或”是一种描述对象的关联关系，表示可以存在三种关系。例如，A和/或B，表示：A或B，或，A和B这三种关系。
[0030]术语“对应”可以指的是一种关联关系或绑定关系，A与B相对应指的是A与B之间是一种关联关系或绑定关系。
[0031]目前，随着教育水平的提高，越来越多的人重视起阅读。尤其针对孩童阅读书本，现在市面上流行点读笔及其专门配套图书以辅助孩童的阅读。但此类产品成本较高，且书本覆盖面较窄，不利于阅读产品的普及。为此，另有一种技术是确定用户手指在待读页面图像上的页面指读位置；基于页面指读位置，以及待读页面图像及其对应的参照页面图像之间的坐标映射关系，确定页面指读位置映射在参照页面图像中的粗略指读位置；基于页面
指读位置在待读页面图像中的页面感兴趣区域，以及粗略指读位置在参照页面图像中的参照感兴趣区域，确定参照页面图像中的精细指读位置；基于精细指读位置，进行辅助阅读。但该方法依赖手指的动作，在使用过程中需要时刻保持手指的动作。长时间会导致人的疲劳，以及注意力的下降。进而可能会发生用户指错、指歪或者指岔行等现象，这反而影响了辅助阅读的准确性。
[0032]结合图1所示，本公开实施例提供一种用于辅助阅读的方法，包括：
[0033]S101，服务器确定文本类型，并获取文本内容。
[0034]S102，服务器采集用户语音信息，并根据用户语音信息解析出语义内容。
[0035]S103，服务器将语义内容与文本内容进行匹配，确定焦点位置。
[0036]S104，服务器控制在焦点位置处显示虚拟手势，以向用户指示待阅读内容的位置。
[0037]采用本公开实施例提供的用于辅助阅读的方法，通过确定文本类型及获取文本内容，并执行相应的指示操作，能够同时实现对电子文本和纸质文本的辅助阅读。通过采集用户语音信息提取语义内容，并与文本内容进行匹配。本公开实施例能够识别出用户当前朗读到的位本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种用于辅助阅读的方法，其特征在于，应用于服务器，所述方法包括：确定文本类型，并获取文本内容；采集用户语音信息，并根据用户语音信息解析出语义内容；将语义内容与文本内容进行匹配，确定焦点位置；在焦点位置处显示虚拟手势，以向用户指示待阅读内容的位置。2.根据权利要求1所述的方法，其特征在于，所述文本类型包括电子文本或纸质文本；所述获取文本内容包括：对于电子文本，接收文本所在设备调取并发送的文本内容；对于纸质文本，接收摄像模块拍摄并发送的文本实际图像，并从中提取出文本内容。3.根据权利要求2所述的方法，其特征在于，所述在焦点位置处显示虚拟手势包括：对于电子文本，发送控制指令至文本所在设备，使文本所在设备控制虚拟手势显示在焦点位置处；对于纸质文本，发送控制指令至投影模块，使投影模块将虚拟手势模拟图像投影到焦点位置处。4.根据权利要求1至3任一项所述的方法，其特征在于，所述将语义内容与文本内容进行匹配，确定焦点位置和所述在焦点位置处显示虚拟手势，以向用户指示待阅读内容的位置之间，还包括：根据用户语音信息解析出声音特征；根据声音特征确定虚拟手势的图案。5.根据权利要求4所述的方法，其特征在于，所述根据声音特征确定虚拟手势的图案包括：根据声音特征确定用户的语音情绪；根据语音情绪确定虚拟手势的形状和/或色彩。6.根据权利要求1至3任一项所述的方法，其特征在...

【专利技术属性】
技术研发人员：王喆，褚福海，隋俊华，安晶，田云龙，郭莹，王统帅，
申请(专利权)人：海尔智家股份有限公司，
类型：发明
国别省市：