一种基于虚拟现实播放点读物的方法、设备及存储介质技术

本申请实施例涉及人工智能及云技术领域，以及提供一种基于虚拟现实播放点读物的方法、设备及存储介质，该方法包括：当确定触摸对象在所述点读物上的移动状态为静止状态时，获取所述触摸对象在所述点读物上触摸点的第一位置；若确定所述第一位置所在区域中包括目标对象，则获取所述触摸对象映射到点读物的目标区域；获取所述触摸对象对应所述目标区域内的多个关键点；根据多个关键点确定所述触摸点的目标位置；确定所述目标位置对应所述点读物的点读目标，播放与所述点读目标对应的数字内容。本方案能够准确的识别用户的点读意图，且无需绑定固定的数字内容，不需要配备专用设备实现点读，通用性较高，不断的优化学习，提供更多的点读场景。点读场景。点读场景。

【技术实现步骤摘要】
一种基于虚拟现实播放点读物的方法、设备及存储介质


[0001]本申请实施例涉及人工智能
，尤其涉及一种基于虚拟现实播放点读物的方法、设备及存储介质。

技术介绍

[0002]在基于点读绘本进行点读学习领域，一般是在该点读绘本中采用磁性辅助设备或者配套使用点读笔，需要预先将点读绘本中的各个文字或图案与对应的数字内容进行绑定，才能在点读笔点到某些文字或图案时，将绑定的数字内容进行播放。
[0003]但是，目前的点读方式只能依赖于预先设置的固定设备和固定的数字内容，即只能针对固定的内容进行点读，并不能扩展到任意知识的数字内容，存在较大局限性和依赖性，并不能实现智能化的学习，仅仅为简单的点读交互。因此，目前的点读方式单一且无法扩展数字内容。

技术实现思路

[0004]本申请实施例提供了一种基于虚拟现实播放点读物的方法、设备及存储介质，能够结合人工智能技术准确的识别用户的点读意图，且无需绑定固定的数字内容，也不需要配备专用设备实现点读，通用性较高，还能不断的优化学习，提供更多的点读场景。
[0005]第一方面中，本申请本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于虚拟现实播放点读物的方法，其特征在于，所述方法包括：当确定触摸对象在点读物上的移动状态为静止状态时，获取所述触摸对象在所述点读物上触摸点的第一位置；若确定所述第一位置所在区域中包括目标对象，则获取所述触摸对象映射到所述点读物的目标区域；获取所述触摸对象对应所述目标区域内的多个关键点；根据所述多个关键点确定所述触摸点的目标位置；确定所述目标位置对应所述点读物的点读目标，播放与所述点读目标对应的数字内容。2.根据权利要求1所述的方法，其特征在于，所述方法通过神经网络模型实现时，所述获取所述触摸对象对应所述目标区域内的多个关键点；根据所述多个关键点确定所述触摸点的目标位置，包括：提取所述目标区域内的多个关键点的第一特征和第二特征；将所述第一特征按照所述第二特征的尺寸进行放大，得到第三特征；将所述第二特征和所述第三特征融合，以得到目标特征图；对所述目标特征图进行有限次反卷积操作，得到多个预测关键点；将所述多个预测关键点中权重最大的目标关键点的位置作为所述触摸点的目标位置。3.根据权利要求2所述的方法，其特征在于，所述确定所述目标位置对应所述点读物的点读目标之后，所述播放与所述点读目标对应的数字内容之前，所述方法还包括：向服务器发送请求消息，所述请求消息用于请求获取与所述点读目标对应的数字内容；从所述服务器获取与所述点读目标对应的数字内容。4.根据权利要求1-3中任一项所述的方法，其特征在于，所述获取所述触摸对象映射到所述点读物的目标区域之前，所述方法还包括：确定目标时间窗口内的多个帧图像，所述目标时间窗口的结束时刻为所述当前帧的起始播放时刻；获取所述多个帧图像中每两个在时域上相邻的帧图像之间的像素差值；若每个像素差值均小于预设阈值，则确定所述触摸对象在所述目标时间窗口内的移动状态为静止状态；确定所述当前帧为所述触摸对象在所述点读物上的一次有效交互点。5.根据权利要求4所述的方法，其特征在于，所述获取所述多个帧图像中每两个在时域上相邻的帧图像之间的像素差值；若每个像素差值均小于预设阈值，则确定所述触摸对象在所...

【专利技术属性】
技术研发人员：项小明，张力，徐浩，董胜，
申请(专利权)人：腾讯科技深圳有限公司，
类型：发明
国别省市：