点读场景中基于大数据分析的智能对象识别方法及系统技术方案

本申请提供一种点读场景中基于大数据分析的智能对象识别方法及系统，方法包括：检测到用户针对目标对象的指向性操作，指向性操作用于表征用户针对目标对象的点读意图；识别目标对象的物体类型；若物体类型属于非书本类实物，则获取预设的用户特征信息，通过家庭网关向服务器发送携带用户特征信息和物体类型的第一点读请求消息，第一点读请求消息用于指示适配用户特征信息和物体类型的第一目标点读音频；接收来自服务器的携带第一目标点读音频的第一点读响应消息；播放第一目标点读音频。本申请实施例能够采用视觉方案将点读笔的应用场景由纯书籍拓展到实物空间的任意物体，同时提高点读笔调用点读视频的灵活性和多样性。时提高点读笔调用点读视频的灵活性和多样性。时提高点读笔调用点读视频的灵活性和多样性。

【技术实现步骤摘要】
点读场景中基于大数据分析的智能对象识别方法及系统


[0001]本申请属于在线教育数据处理
，具体涉及一种点读场景中基于大数据分析的智能对象识别方法及系统。

技术介绍

[0002]目前，市场上的点读笔多数采用二维码方案，具体由点读笔扫描二维暗码、解码、调用文件以及播放，但实际应用场景中，儿童对事物的认知不仅限于书本类的图像信息，也会拿着点读笔去尝试点读除书本之外的其他物体，如杯子、电视、足球、餐桌等实物，目前二维码方案无法满足用户需求。

技术实现思路

[0003]本申请提供一种点读场景中基于大数据分析的智能对象识别方法及系统，以期采用视觉方案将点读笔的应用场景由纯书籍拓展到实物空间的任意物体，同时提高点读笔调用点读视频的灵活性和多样性。
[0004]第一方面，本申请提供一种智能点读方法，应用于智能点读笔，所述方法包括：
[0005]检测到用户针对目标对象的指向性操作，所述指向性操作用于表征用户针对目标对象的点读意图；
[0006]响应所述指向性操作，识别所述目标对象的物体类型；
[0007]若所述物体类型属于非书本类实物，则获取预设的用户特征信息，通过家庭网关向服务器发送携带所述用户特征信息和所述物体类型的第一点读请求消息，所述第一点读请求消息用于指示适配所述用户特征信息和所述物体类型的第一目标点读音频；
[0008]接收来自所述服务器的携带所述第一目标点读音频的第一点读响应消息；
[0009]播放所述第一目标点读音频。
[0010]可以看出，本申请实施例中，智能点读笔能够在检测到用户针对目标对象的指向性操作时，识别目标对象的物体类型，并在物体类型属于非书本类实物的情况下，获取预设的用户特征信息，通过家庭网关向服务器发送携带用户特征信息和物体类型的第一点读请求消息，接收来自服务器的携带第一目标点读音频的第一点读响应消息；播放第一目标点读音频。其中，指向性操作用于表征用户针对目标对象的点读意图，第一点读请求消息用于指示适配用户特征信息和物体类型的第一目标点读音频。可见，智能点读笔能够对非书本类实物进行物体类型的识别，并综合用户特征信息调用专属适配的第一目标点读音频实现点读功能，实现了将点读笔的应用场景由纯书籍拓展到实物空间的任意物体，同时提高点读笔调用点读视频的灵活性和多样性。
[0011]第二方面，本申请提供一种智能点读装置，包括处理单元和通信单元，其中，
[0012]所述处理单元，用于通过所述通信单元检测到用户针对目标对象的指向性操作，所述指向性操作用于表征用户针对目标对象的点读意图；响应所述指向性操作，识别所述目标对象的物体类型；若所述物体类型属于非书本类实物，则获取预设的用户特征信息，通
过家庭网关向服务器发送携带所述用户特征信息和所述物体类型的第一点读请求消息，所述第一点读请求消息用于指示适配所述用户特征信息和所述物体类型的第一目标点读音频；接收来自所述服务器的携带所述第一目标点读音频的第一点读响应消息；播放所述第一目标点读音频。
[0013]第三方面，本申请实施例提供了一种智能点读系统，包括智能点读笔、家庭网关、服务器以及家庭摄像头，其中，
[0014]所述智能点读笔用于执行如第一方面任一方法中所述智能点读笔所执行的步骤；
[0015]所述家庭网关用于执行如第一方面任一方法中所述家庭网关所涉及到的步骤中的操作；
[0016]所述服务器用于执行如第一方面任一方法中所述服务器所涉及到的步骤中的操作；
[0017]所述家庭摄像头用于执行如第一方面任一方法中所述家庭摄像头所涉及到的步骤中的操作。
[0018]第四方面，本申请实施例提供了一种计算机可读存储介质，其中，上述计算机可读存储介质存储用于电子数据交换的计算机程序，其中，上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
[0019]第五方面，本申请实施例提供了一种计算机程序产品，其中，上述计算机程序产品包括计算机程序，上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
附图说明
[0020]图1是本申请实施例提供的一种智能点读系统的架构示意图；
[0021]图2是本申请实施例提供的一种智能点读笔的结构示意图；
[0022]图3是本申请实施例提供的一种智能点读方法的流程示意图；
[0023]图4是本申请实施例提供的一种智能点读装置的功能单元组成框图。
具体实施方式
[0024]为了使本
的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行准确、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
[0025]本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或模块的过程、方法、系统、产品或设备没有限定于已列出的步骤或模块，而是可选地还包括没有列出的步骤或模块，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或模块。
[0026]在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和
隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
[0027]如图1所示，本申请实施例提供了一种智能点读系统10的架构示意图，该智能点读系统10包括智能点读笔100、家庭网关200、服务器300以及家庭摄像头400，其中，智能点读笔100通过家庭网关200分别与服务器300、家庭摄像头400通信连接，此外，智能点读笔100还可以与智能手机、笔记本等电子设备进行通信连接，并支持用户通过电子设备对智能点读笔200的参数、功能等进行灵活设置，家庭网关200例如可以是路由器等设备，家庭摄像头400例如可以是联网的智能摄像设备。
[0028]具体实现中，智能点读笔100、家庭摄像头400作为家庭智能设备，可以统一由网关实现互联，并通过智能手机的应用程序实现便捷的管理和设置，组成家庭场景的智能控制系统，具体组网方式、设置方式均不做唯一限定。
[0029]请参阅图2，图2是本申请实施例提供的一种智能点读笔100的结构示意图，如图所示，所述智能点读笔100包括处理器110、存储器120、通信接口130、摄像头140以及一个或多个程序121，其中，处理器110通过总线分别与存储器120、通信接口130、摄像头140通信连接，所述一个或多个程序121本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种智能点读方法，其特征在于，应用于智能点读笔，所述方法包括：检测到用户针对目标对象的指向性操作，所述指向性操作用于表征用户针对目标对象的点读意图；响应所述指向性操作，识别所述目标对象的物体类型；若所述物体类型属于非书本类实物，则获取预设的用户特征信息，通过家庭网关向服务器发送携带所述用户特征信息和所述物体类型的第一点读请求消息，所述第一点读请求消息用于指示适配所述用户特征信息和所述物体类型的第一目标点读音频；接收来自所述服务器的携带所述第一目标点读音频的第一点读响应消息；播放所述第一目标点读音频。2.根据权利要求1所述的方法，其特征在于，所述用户特征信息包括年龄段信息和/或性别信息；所述目标点读音频为第一目标点读音频子集中适配所述年龄段信息和/或所述性别信息的点读音频，所述第一目标点读音频子集为第一点读音频集合中适配所述物体类型的点读音频子集，所述第一目标点读音频子集包括根据年龄段信息和/或性别信息预设的多个点读音频，所述第一点读音频集合包括根据非书本类实物的物体类型预设的多个第一点读音频子集；所述第一点读音频集合包括物体类型和第一点读音频子集之间的对应关系；所述第一点读音频子集包括特征组与点读音频之间的对应关系，所述特征组包括年龄段信息和/或性别信息。3.根据权利要求1所述的方法，其特征在于，所述识别所述目标对象的物体类型，包括：获取所述目标对象的参考图像；根据所述参考图像识别所述目标对象的物体类型。4.根据权利要求3所述的方法，其特征在于，所述根据所述参考图像识别所述目标对象的物体类型，包括：向所述服务器发送携带所述参考图像的识别请求消息，所述识别请求消息用于指示所述目标对象的物体类型；接收来自所述服务器的携带所述目标对象的物体类型的识别响应消息，获取所述目标对象的物体类型。5.根据权利要求4所述的方法，其特征在于，所述目标对象的物体类型是所述服务器通过执行以下操作而确定的：提取所述参考图像中所述目标对象的影像区域的图像特征信息，所述图像特征信息包括形状、纹理和颜色；将所述图像特征信息作为模型输入导入预先训练好的物体类型识别模型，识别出所述目标对象的物体类型，所述物体类型识别模型为基于神经网络算法构建的图像识别模型。6.根据权利要求4或5所述的方法，其特征在于，所述获取所述目标对象的参考图像，包括：通过所述智能点读笔的摄像头采集所述目标对象的第一图像；判断所述第一图像中所述目标对象的第一影像的完整度是否大于或等于预设完整度；若是，则确定所述第一图像为参考图像；
若否，则通过所述家庭网关向家庭摄像头发送图像协助请求消息，所述图像协助请求消息用于指示至少包含所述智能点读笔和/或所述用户的影像的至少一个...

【专利技术属性】
技术研发人员：肖泽青，
申请(专利权)人：长沙师范学院，
类型：发明
国别省市：