一种智能点读方法及点读设备技术

一种智能点读方法及点读设备，包括：利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用摄像头确定目标物体的姿态信息；待点读信息载体至少包括书本或者练习册；姿态信息至少包括目标物体的目标指向信息以及目标物体的目标运动轨迹信息；获取目标指向信息在待点读信息载体的位置信息中指向的目标位置信息；当判断出目标运动轨迹信息与预设运动轨迹信息相匹配时，以预设运动轨迹信息对应的内容识别方式、目标运动轨迹信息和目标位置信息为依据，确定目标内容信息；语音输出目标内容信息对应的目标语音信息。实施本发明专利技术实施例，能够适用于各类文本内容的点读、操作方便且以书本为主点读设备为辅来实现辅助学习，可以提高学习效率。

An Intelligent Point Reading Method and Point Reading Equipment

An intelligent point reading method and device include: using the camera of the point reading device to determine the location information of the information carrier to be read, and using the camera to determine the attitude information of the target object; the information carrier to be read includes at least books or workbooks; the attitude information includes at least the target pointing information of the target object and the target trajectory information of the target object; Target orientation information is obtained from the position information of the information carrier to be read point by point; when judging the matching of the target motion trajectory information with the preset motion trajectory information, the content information of the target is determined based on the content recognition method corresponding to the preset motion trajectory information, the target motion trajectory information and the target location information; and the content information of the target is corresponding to the speech output. Target voice information. The implementation of the embodiment of the present invention can be applied to the point reading of various text contents, easy to operate and assisted by a book-based point reading device, thereby improving the learning efficiency.

【技术实现步骤摘要】
一种智能点读方法及点读设备
本专利技术涉及点读
，尤其涉及一种智能点读方法及点读设备。
技术介绍
目前，市面上常用的点读方式有两种：第一种点读方式为利用传统的点读机对适用于该点读机的课本进行点读；第二种点读方式为利用学习设备(如家教机)上的点读类应用对存储于学习设备中的电子教材进行点读。上述第一种点读方式只能适用于固定的适用于该点读机的课本，并不具有普适性，并且，传统的点读机在点读之前需要用户手动配置需要存储的资料，这一过程十分繁琐。与此同时，上述第二种点读方式虽然可以对存储于学习设备中的海量电子教材进行点读，但是，这一方式需要用户长时间注视学习设备的电子显示屏，从而损害用户视力，并且，用户在使用学习设备点读时容易受到学习设备中安装的娱乐应用的诱惑，导致学习注意力不集中。可见，开发一种具有普适性、操作方便且不依赖于学习设备的点读设备成为了一个亟需解决的问题。
技术实现思路
本专利技术实施例公开一种智能点读方法及点读设备，能够适用于各类文本内容的点读、操作方便且以书本为主点读设备为辅来实现辅助学习，可以提高学习效率。本专利技术实施例第一方面公开一种智能点读方法，包括：利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；语音输出所述目标内容信息对应的目标语音信息。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述利用所述摄像头确定目标物体的姿态信息，包括：利用所述摄像头捕捉目标物体的实时图像信息；提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。作为一种可选的实施方式，在本专利技术实施例第一方面中，在所述获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，所述方法还包括：利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：当判断出所述目标运动轨迹信息与所述第二预设运动轨迹信息相匹配时，以所述第二预设运动轨迹信息对应的内容识别方式和所述目标运动轨迹信息为依据，将所述光点对应的位置的内容信息确定为目标内容信息。作为一种可选的实施方式，在本专利技术实施例第一方面中，所述语音输出所述目标内容信息对应的目标语音信息，包括：当预设数据库中存储所述目标内容信息对应的第一语音信息时，将所述第一语音信息确定为目标语音信息，并语音输出所述目标语音信息；当预设数据库中未存储所述目标内容信息对应的第一语音信息时，利用从文本到语音技术获取所述目标内容信息对应的第二语音信息，并将所述第二语音信息确定为目标语音信息，以及语音输出所述目标语音信息；在所述语音输出所述目标语音信息之后，所述方法还包括：获取用户根据所述目标语音信息输入的语音问题信息，并输出与所述语音问题信息相匹配的语音问题答案。本专利技术实施例第二方面公开一种点读设备，所述点读设备包括：确定单元，用于利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；获取单元，用于获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；判断单元，用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；所述确定单元，还用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；输出单元，用于语音输出所述目标内容信息对应的目标语音信息。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述确定单元用于利用所述摄像头确定目标物体的姿态信息的方式具体为：所述确定单元，用于利用所述摄像头捕捉目标物体的实时图像信息；并提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述判断单元用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：所述判断单元，用于判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；所述确定单元用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息的方式具体为：所述确定单元，用于当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。作为一种可选的实施方式，在本专利技术实施例第二方面中，所述点读设备还包括：投影单元，用于在所述获取单元获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；所述判断单元用于判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配的方式具体为：所述判断单元，用于判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；所述确定单元用于当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内本文档来自技高网...

【技术保护点】
1.一种智能点读方法，其特征在于，包括：利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；语音输出所述目标内容信息对应的目标语音信息。

【技术特征摘要】
1.一种智能点读方法，其特征在于，包括：利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述待点读信息载体至少包括书本或者练习册；所述目标物体至少包括用户的手或者用户握持的笔；所述姿态信息至少包括所述目标物体的目标指向信息以及所述目标物体的目标运动轨迹信息；获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息；判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配；当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息；语音输出所述目标内容信息对应的目标语音信息。2.根据权利要求1所述的方法，其特征在于，所述利用所述摄像头确定目标物体的姿态信息，包括：利用所述摄像头捕捉目标物体的实时图像信息；提取所述实时图像信息的图像特征，并根据所述图像特征确定所述目标物体的姿态信息。3.根据权利要求2所述的方法，其特征在于，所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：判断所述目标运动轨迹信息是否与第一预设运动轨迹信息相匹配；所述第一预设运动轨迹信息为画圈形式的运动轨迹信息；所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：当判断出所述目标运动轨迹信息与所述第一预设运动轨迹信息相匹配时，以所述第一预设运动轨迹信息对应的内容识别方式为依据，将以所述目标位置信息对应的位置为起点进行画圈得到的所述目标运动轨迹信息所圈选的内容信息确定为目标内容信息。4.根据权利要求1所述的方法，其特征在于，在所述获取所述目标指向信息在所述待点读信息载体的位置信息中指向的目标位置信息之后，所述方法还包括：利用所述点读设备的投影装置向所述目标位置信息对应的位置投影光点；所述判断所述目标运动轨迹信息是否与预设运动轨迹信息相匹配，包括：判断所述目标物体的运动轨迹信息是否与第二预设运动轨迹相匹配；所述第二预设运动轨迹为按压形式的运动轨迹；所述当判断出所述目标运动轨迹信息与所述预设运动轨迹信息相匹配时，以所述预设运动轨迹信息对应的内容识别方式、所述目标运动轨迹信息和所述目标位置信息为依据，确定目标内容信息，包括：当判断出所述目标运动轨迹信息与所述第二预设运动轨迹信息相匹配时，以所述第二预设运动轨迹信息对应的内容识别方式和所述目标运动轨迹信息为依据，将所述光点对应的位置的内容信息确定为目标内容信息。5.根据权利要求1至4任一项所述的方法，其特征在于，所述语音输出所述目标内容信息对应的目标语音信息，包括：当预设数据库中存储所述目标内容信息对应的第一语音信息时，将所述第一语音信息确定为目标语音信息，并语音输出所述目标语音信息；当预设数据库中未存储所述目标内容信息对应的第一语音信息时，利用从文本到语音技术获取所述目标内容信息对应的第二语音信息，并将所述第二语音信息确定为目标语音信息，以及语音输出所述目标语音信息；在所述语音输出所述目标语音信息之后，所述方法还包括：获取用户根据所述目标语音信息输入的语音问题信息，并输出与所述语音问题信息相匹配的语音问题答案。6.一种点读设备，其特征在于，所述点读设备包括：确定单元，用于利用点读设备的摄像头确定待点读信息载体的位置信息，以及利用所述摄像头确定目标物体的姿态信息；所述...

【专利技术属性】
技术研发人员：张卓，
申请(专利权)人：广东小天才科技有限公司，
类型：发明
国别省市：广东,44