一种辅助绘本阅读的方法和系统技术方案

本发明专利技术涉及辅助阅读技术领域，具体公开了一种辅助绘本阅读的方法和系统，所述方法包括获取预设数量的绘本图像，根据所述绘本图像在云数据库中查询模板绘本；实时获取与绘本之间的距离及其空间夹角，根据所述距离及其空间夹角对在模板绘本中定位目标区域；实时接收传感器的按压信息，根据所述按压信息确定最终区域，对最终区域进行识别，生成语音辅助信息；基于预设的传感器获取用户的反馈信息，根据所述反馈信息调节语音辅助信息。本发明专利技术根据绘本图像确定模板绘本，实时获取智能笔的姿位，根据姿位确定智能笔在当前时刻对应模板绘本的哪一区域，对该区域进行资源准备，提前进行预处理过程，极大地降低了预处理时耗，变相地提高识别速度。识别速度。

【技术实现步骤摘要】
一种辅助绘本阅读的方法和系统


[0001]本专利技术涉及辅助阅读
，具体是一种辅助绘本阅读的方法和系统。

技术介绍

[0002]绘本是一种新型的适应于儿童学习的读物，它由多张图像和少量的文字组成，与现有的动画片对标，借助一些智能识别笔，对绘本进行识别，可以生成相关的语音信息，使得儿童能够同时获得视觉和听觉上的满足感，而且，还能够保护眼睛。
[0003]但是，现有的智能识别笔的智能化水平还不够高，识别过程的协调性很低，存在较长的反应时间，影响阅读体验，如何提高识别速度是本专利技术技术方案想要解决的技术问题。

技术实现思路

[0004]本专利技术的目的在于提供一种辅助绘本阅读的方法和系统，以解决上述
技术介绍
中提出的问题。
[0005]为实现上述目的，本专利技术提供如下技术方案：
[0006]一种辅助绘本阅读的方法，所述方法包括：
[0007]获取预设数量的绘本图像，根据所述绘本图像在云数据库中查询模板绘本；
[0008]实时获取与绘本之间的距离及其空间夹角，根据所述距离及其空间夹角对在模板绘本中定位目标区域；
[0009]实时接收传感器的按压信息，根据所述按压信息确定最终区域，对最终区域进行识别，生成语音辅助信息；
[0010]基于预设的传感器获取用户的反馈信息，根据所述反馈信息调节语音辅助信息。
[0011]作为本专利技术进一步的方案：所述获取预设数量的绘本图像，根据所述绘本图像在云数据库中查询模板绘本的步骤包括：
[0012]实时播报预设的指引信息，基于指引信息获取绘本图像；
[0013]对绘本图像进行识别，确定绘本图像的图像特征，根据所述图像特征在预设的模板绘本库中限缩范围；
[0014]循环执行直至限缩范围为一，得到模板绘本；
[0015]其中，当得到新的限缩范围时，计算限缩范围与前一限缩范围之间的交集，当交集存在时，将交集作为新的限缩范围；当交集不存在时，生成复位指令。
[0016]作为本专利技术进一步的方案：所述对绘本图像进行识别，确定绘本图像的图像特征，根据所述图像特征在预设的模板绘本库中限缩范围的步骤包括：
[0017]对所述绘本图像进行色值转换并进行归一化处理，对归一化处理后的绘本图像进行轮廓识别；
[0018]计算各轮廓的像素点总数，选取像素点总数小于预设数量的轮廓，计算其中心点；
[0019]获取所述中心点相对于绘本的位置及该轮廓的色值均值，连接位置及色值均值，得到图像特征；
[0020]根据所述图像特征在模板绘本库中遍历匹配，得到限缩范围；所述限缩范围是模板绘本库的子库。
[0021]作为本专利技术进一步的方案：所述实时获取与绘本之间的距离及其空间夹角，根据所述距离及其空间夹角对在模板绘本中定位目标区域的步骤包括：
[0022]根据预设的距离传感器获取与绘本之间的实际距离；
[0023]根据预设的范围传感器获取与绘本之间的最小距离，根据所述最小距离与实际距离计算空间夹角；其中，所述范围传感器为不同方向上的距离传感器的集合；
[0024]根据所述实际距离和空间夹角在模板绘本中定位目标区。
[0025]作为本专利技术进一步的方案：所述实时接收传感器的按压信息，根据所述按压信息确定最终区域，对最终区域进行识别，生成语音辅助信息的步骤包括：
[0026]实时接收预设的力学传感器的数据，根据所述数据判断是否存在按压信息；所述按压信息用于表征力学传感器与绘本之间的压力信息；
[0027]当存在按压信息时，读取预设时间范围内的目标区定位情况，根据所述定位情况确定最终区域；
[0028]在预设的辅助信息库中查询最终区域对应的文本信息，将文本信息转换为语音信息。
[0029]作为本专利技术进一步的方案：所述基于预设的传感器获取用户的反馈信息，根据所述反馈信息调节语音辅助信息的步骤包括：
[0030]基于预设的压力传感器获取用户的握持面积及握持压强；
[0031]将所述握持面积及握持压强输入训练好的状态识别模型，确定用户状态；
[0032]接收用户发出的语音指令，根据所述语音指令及用户状态调节语音辅助信息；
[0033]所述根据所述语音指令及用户状态调节语音辅助信息的步骤为选择式调节步骤。
[0034]本专利技术技术方案还提供了一种辅助绘本阅读的系统，所述系统包括：
[0035]模板绘本查询模块，用于获取预设数量的绘本图像，根据所述绘本图像在云数据库中查询模板绘本；
[0036]检测参数获取模块，用于实时获取与绘本之间的距离及其空间夹角，根据所述距离及其空间夹角对在模板绘本中定位目标区域；
[0037]语音信息生成模块，用于实时接收传感器的按压信息，根据所述按压信息确定最终区域，对最终区域进行识别，生成语音辅助信息；
[0038]语音信息调节模块，用于基于预设的传感器获取用户的反馈信息，根据所述反馈信息调节语音辅助信息。
[0039]作为本专利技术进一步的方案：所述模板绘本查询模块包括：
[0040]图像获取单元，用于实时播报预设的指引信息，基于指引信息获取绘本图像；
[0041]图像识别单元，用于对绘本图像进行识别，确定绘本图像的图像特征，根据所述图像特征在预设的模板绘本库中限缩范围；
[0042]循环执行单元，用于循环执行直至限缩范围为一，得到模板绘本；
[0043]其中，当得到新的限缩范围时，计算限缩范围与前一限缩范围之间的交集，当交集存在时，将交集作为新的限缩范围；当交集不存在时，生成复位指令。
[0044]作为本专利技术进一步的方案：所述检测参数获取模块包括：
[0045]实际距离获取单元，用于根据预设的距离传感器获取与绘本之间的实际距离；
[0046]最小距离确定单元，用于根据预设的范围传感器获取与绘本之间的最小距离，根据所述最小距离与实际距离计算空间夹角；其中，所述范围传感器为不同方向上的距离传感器的集合；
[0047]目标区定位单元，用于根据所述实际距离和空间夹角在模板绘本中定位目标区。
[0048]作为本专利技术进一步的方案：所述语音信息生成模块包括：
[0049]按压判定单元，用于实时接收预设的力学传感器的数据，根据所述数据判断是否存在按压信息；所述按压信息用于表征力学传感器与绘本之间的压力信息；
[0050]区域定位单元，用于当存在按压信息时，读取预设时间范围内的目标区定位情况，根据所述定位情况确定最终区域；
[0051]信息转换单元，用于在预设的辅助信息库中查询最终区域对应的文本信息，将文本信息转换为语音信息。
[0052]与现有技术相比，本专利技术的有益效果是：本专利技术根据绘本图像确定模板绘本，实时获取智能笔的姿位，根据姿位确定智能笔在当前时刻对应模板绘本的哪一区域，对该区域进行资源准备，提前进行预处理过程，当接收到按压信息时，可以极大地降低预处理时耗，变相地提高识别速度。本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种辅助绘本阅读的方法，其特征在于，所述方法包括：获取预设数量的绘本图像，根据所述绘本图像在云数据库中查询模板绘本；实时获取与绘本之间的距离及其空间夹角，根据所述距离及其空间夹角对在模板绘本中定位目标区域；实时接收传感器的按压信息，根据所述按压信息确定最终区域，对最终区域进行识别，生成语音辅助信息；基于预设的传感器获取用户的反馈信息，根据所述反馈信息调节语音辅助信息。2.根据权利要求1所述的辅助绘本阅读的方法，其特征在于，所述获取预设数量的绘本图像，根据所述绘本图像在云数据库中查询模板绘本的步骤包括：实时播报预设的指引信息，基于指引信息获取绘本图像；对绘本图像进行识别，确定绘本图像的图像特征，根据所述图像特征在预设的模板绘本库中限缩范围；循环执行直至限缩范围为一，得到模板绘本；其中，当得到新的限缩范围时，计算限缩范围与前一限缩范围之间的交集，当交集存在时，将交集作为新的限缩范围；当交集不存在时，生成复位指令。3.根据权利要求2所述的辅助绘本阅读的方法，其特征在于，所述对绘本图像进行识别，确定绘本图像的图像特征，根据所述图像特征在预设的模板绘本库中限缩范围的步骤包括：对所述绘本图像进行色值转换并进行归一化处理，对归一化处理后的绘本图像进行轮廓识别；计算各轮廓的像素点总数，选取像素点总数小于预设数量的轮廓，计算其中心点；获取所述中心点相对于绘本的位置及该轮廓的色值均值，连接位置及色值均值，得到图像特征；根据所述图像特征在模板绘本库中遍历匹配，得到限缩范围；所述限缩范围是模板绘本库的子库。4.根据权利要求1所述的辅助绘本阅读的方法，其特征在于，所述实时获取与绘本之间的距离及其空间夹角，根据所述距离及其空间夹角对在模板绘本中定位目标区域的步骤包括：根据预设的距离传感器获取与绘本之间的实际距离；根据预设的范围传感器获取与绘本之间的最小距离，根据所述最小距离与实际距离计算空间夹角；其中，所述范围传感器为不同方向上的距离传感器的集合；根据所述实际距离和空间夹角在模板绘本中定位目标区。5.根据权利要求4所述的辅助绘本阅读的方法，其特征在于，所述实时接收传感器的按压信息，根据所述按压信息确定最终区域，对最终区域进行识别，生成语音辅助信息的步骤包括：实时接收预设的力学传感器的数据，根据所述数据判断是否存在按压信息；所述按压信息用于表征力学传感器与绘本之间的压力信息；当存在按压信息时，读取预设时间范围内的目标区定位情况，根据所述定位情况确定最终区域；
在预设的辅助信息库中查询最终区域对应的文本信息，将文...

【专利技术属性】
技术研发人员：徐天晔，
申请(专利权)人：徐天晔，
类型：发明
国别省市：