网页操作方法和装置制造方法及图纸

本申请公开了网页操作方法和装置。该方法的一具体实施方式包括：获取摄像装置拍摄的图像和陀螺仪传感器产生的该移动设备的旋转数据；对该图像进行解析，生成手持该移动设备的用户在三维坐标系中的三维坐标；将该三维坐标转换为二维坐标系中的二维坐标；基于该二维坐标和该旋转数据，对该显示屏幕中所显示的网页进行操作。该实施方式提高了虚拟现实环境下的网页交互的灵活性。

Web page operation method and device

The present invention discloses a web page operation method and device. One embodiment of the method comprises: a rotation of the mobile device data acquisition camera images and gyro sensor produced; analysis of the image, the generation of handheld mobile device users in 3D coordinates in three-dimensional coordinate system; the three-dimensional coordinate transformation of two-dimensional coordinates in a two-dimensional coordinate system; the two-dimensional coordinates and the rotation based on the data on the display screen in \operation. The implementation improves the flexibility of web page interaction in virtual reality.

【技术实现步骤摘要】
网页操作方法和装置
本申请涉及计算机
，具体涉及互联网
，尤其涉及网页操作方法和装置。
技术介绍
虚拟现实技术是一种可以创建和体验虚拟世界的计算机仿真技术，可以利用计算机技术生成一种模拟环境，通过多源信息融合的交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该模拟环境中。目前，虚拟现实技术已经应用于多种场景。然而，在利用虚拟现实环境的网页交互场景中，现有的方式仅支持在虚拟现实环境下对网页的浏览，无法实现对网页的操作(例如光标移动、悬浮、网页滚动等)，导致虚拟现实环境下与网页的交互的灵活性较低。
技术实现思路
本申请实施例的目的在于提出一种改进的网页操作方法和装置，来解决以上
技术介绍
部分提到的技术问题。第一方面，本申请实施例提供了一种网页操作方法，该移动设备与摄像装置相连接，且移动设备安装有陀螺仪传感器，该方法包括：获取摄像装置拍摄的图像和陀螺仪传感器产生的移动设备的旋转数据；对图像进行解析，生成手持移动设备的用户在三维坐标系中的三维坐标，其中，三维坐标系为现实空间中以指定点作为原点而预先建立的坐标系；将三维坐标转换为二维坐标系中的二维坐标，其中，二维坐标系是基于移动设备的显示屏幕而预先建立的坐标系；基于二维坐标和旋转数据，对显示屏幕中所显示的网页进行操作。在一些实施例中，图像中呈现有手持移动设备的用户的人像；以及对图像进行解析，生成手持移动设备的用户在三维坐标系中的三维坐标，包括：将图像中的人像与预先获取的上一帧图像中的人像进行比较，确定用户的在三维坐标系的位移信息；基于位移信息和预先确定的、用户在上一帧图像拍摄时位于三维坐标系中的原始三维坐标，生成用户在三维坐标系中的三维坐标。在一些实施例中，摄像装置安装在移动设备中，图像呈现有至少一个物体的影像；以及对图像进行解析，生成手持移动设备的用户在三维坐标系中的三维坐标，包括：从图像中提取特征向量，将特征向量输入至预先训练的图像识别模型，得到对至少一个物体中的各个物体的影像的识别结果，其中，图像识别模型用于表征特征向量与识别结果的对应关系；对于每一个物体的影像，将该影像与预先获取的上一帧图像中的、具有相同识别结果的物体的影像进行比较，确定该物体在三维坐标系的位移信息；基于各个物体的在三维坐标系的位移信息和预先确定的、上一帧图像拍摄时手持移动设备的用户位于三维坐标系中的原始三维坐标，生成用户在三维坐标系中的三维坐标。在一些实施例中，基于二维坐标和旋转数据，对显示屏幕中所显示的网页进行操作，包括：将显示屏幕所显示的网页中的、二维坐标所指示的位置的元素确定为目标元素，确定目标元素是否为支持点击的元素；响应于确定目标元素是支持点击的元素，确定是否已呈现预设的、与目标元素相关联的悬浮界面；响应于确定已呈现悬浮界面，确定悬浮界面的呈现时长；响应于确定呈现时长不小于预设时长阈值，触发对目标元素的点击事件，并呈现与目标元素相关联的点击界面。在一些实施例中，基于二维坐标和旋转数据，对显示屏幕中所显示的网页进行操作，还包括：响应于确定未呈现悬浮界面，呈现悬浮界面。在一些实施例中，基于二维坐标和旋转数据，对显示屏幕中所显示的网页进行操作，包括：对旋转数据进行解析，生成四元数数据；基于四元数数据，对显示屏幕中所显示的网页进行滚动。第二方面，本申请实施例提供了一种网页操作装置，该移动设备与摄像装置相连接，且该移动设备安装有陀螺仪传感器，该装置包括：获取单元，配置用于获取摄像装置拍摄的图像和陀螺仪传感器产生的移动设备的旋转数据；解析单元，配置用于对图像进行解析，生成手持移动设备的用户在三维坐标系中的三维坐标，其中，三维坐标系为现实空间中以指定点作为原点而预先建立的坐标系；转换单元，配置用于将三维坐标转换为二维坐标系中的二维坐标，其中，二维坐标系是基于移动设备的显示屏幕而预先建立的坐标系；操作单元，配置用于基于二维坐标和旋转数据，对显示屏幕中所显示的网页进行操作。在一些实施例中，图像中呈现有手持移动设备的用户的人像；以及解析单元包括：第一比较模块，配置用于将图像中的人像与预先获取的上一帧图像中的人像进行比较，确定用户的在三维坐标系的位移信息；第一生成模块，配置用于基于位移信息和预先确定的、用户在上一帧图像拍摄时位于三维坐标系中的原始三维坐标，生成用户在三维坐标系中的三维坐标。在一些实施例中，摄像装置安装在移动设备中，图像呈现有至少一个物体的影像；以及解析单元包括：第一提取模块，配置用于从图像中提取特征向量，将特征向量输入至预先训练的图像识别模型，得到对至少一个物体中的各个物体的影像的识别结果，其中，图像识别模型用于表征特征向量与识别结果的对应关系；第二比较模块，配置用于对于每一个物体的影像，将该影像与预先获取的上一帧图像中的、具有相同识别结果的物体的影像进行比较，确定该物体在三维坐标系的位移信息；第二生成模块，配置用于基于各个物体的在三维坐标系的位移信息和预先确定的、上一帧图像拍摄时手持移动设备的用户位于三维坐标系中的原始三维坐标，生成用户在三维坐标系中的三维坐标。在一些实施例中，操作单元包括：第二提取模块，配置用于将显示屏幕所显示的网页中的、二维坐标所指示的位置的元素确定为目标元素，确定目标元素是否为支持点击的元素；第一确定模块，配置用于响应于确定目标元素是支持点击的元素，确定是否已呈现预设的、与目标元素相关联的悬浮界面；第二确定模块，配置用于响应于确定已呈现悬浮界面，确定悬浮界面的呈现时长；触发模块，配置用于响应于确定呈现时长不小于预设时长阈值，触发对目标元素的点击事件，并呈现与目标元素相关联的点击界面。在一些实施例中，操作单元还包括：呈现模块，配置用于响应于确定未呈现悬浮界面，呈现悬浮界面。在一些实施例中，操作单元包括：解析模块，配置用于对旋转数据进行解析，生成四元数数据；滚动模块，配置用于基于四元数数据，对显示屏幕中所显示的网页进行滚动。本申请实施例提供的网页操作方法和装置，通过移动设备对摄像装置拍摄的图像进行解析生成手持上述移动设备的用户在三维坐标系中的三维坐标，而后将三维坐标转换为二维坐标系中的二维坐标，最后基于二维坐标和从陀螺仪传感器获取的旋转数据对显示屏幕中所显示的网页进行操作，从而可以实现在虚拟现实环境下对网页进行交互，提高了虚拟现实环境下的网页交互的灵活性。附图说明通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：图1是本申请可以应用于其中的示例性系统架构图；图2是根据本申请的网页操作方法的一个实施例的流程图；图3是根据本申请的一个摄像装置的示意图；图4是根据本申请的网页操作方法的一个应用场景的示意图；图5是根据本申请的网页操作方法的又一个实施例的流程图；图6是根据本申请的网页操作装置的一个实施例的结构示意图；图7是适于用来实现本申请实施例的移动设备的计算机系统的结构示意图。具体实施方式下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关专利技术，而非对该专利技术的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关专利技术相关的部分。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说本文档来自技高网...

【技术保护点】
一种用于移动设备的网页操作方法，其特征在于，所述移动设备与摄像装置相连接，且所述移动设备安装有陀螺仪传感器，所述方法包括：获取所述摄像装置拍摄的图像和所述陀螺仪传感器产生的所述移动设备的旋转数据；对所述图像进行解析，生成手持所述移动设备的用户在三维坐标系中的三维坐标，其中，所述三维坐标系为现实空间中以指定点作为原点而预先建立的坐标系；将所述三维坐标转换为二维坐标系中的二维坐标，其中，所述二维坐标系是基于所述移动设备的显示屏幕而预先建立的坐标系；基于所述二维坐标和所述旋转数据，对所述显示屏幕中所显示的网页进行操作。

【技术特征摘要】
1.一种用于移动设备的网页操作方法，其特征在于，所述移动设备与摄像装置相连接，且所述移动设备安装有陀螺仪传感器，所述方法包括：获取所述摄像装置拍摄的图像和所述陀螺仪传感器产生的所述移动设备的旋转数据；对所述图像进行解析，生成手持所述移动设备的用户在三维坐标系中的三维坐标，其中，所述三维坐标系为现实空间中以指定点作为原点而预先建立的坐标系；将所述三维坐标转换为二维坐标系中的二维坐标，其中，所述二维坐标系是基于所述移动设备的显示屏幕而预先建立的坐标系；基于所述二维坐标和所述旋转数据，对所述显示屏幕中所显示的网页进行操作。2.根据权利要求1所述的网页操作方法，其特征在于，所述图像中呈现有手持所述移动设备的用户的人像；以及所述对所述图像进行解析，生成手持所述移动设备的用户在三维坐标系中的三维坐标，包括：将所述图像中的人像与预先获取的上一帧图像中的人像进行比较，确定所述用户的在三维坐标系的位移信息；基于所述位移信息和预先确定的、所述用户在所述上一帧图像拍摄时位于所述三维坐标系中的原始三维坐标，生成所述用户在所述三维坐标系中的三维坐标。3.根据权利要求1所述的网页操作方法，其特征在于，所述摄像装置安装在所述移动设备中，所述图像呈现有至少一个物体的影像；以及所述对所述图像进行解析，生成手持所述移动设备的用户在三维坐标系中的三维坐标，包括：从所述图像中提取特征向量，将所述特征向量输入至预先训练的图像识别模型，得到对所述至少一个物体中的各个物体的影像的识别结果，其中，所述图像识别模型用于表征特征向量与识别结果的对应关系；对于每一个物体的影像，将该影像与预先获取的上一帧图像中的、具有相同识别结果的物体的影像进行比较，确定该物体在所述三维坐标系的位移信息；基于各个物体的在所述三维坐标系的位移信息和预先确定的、所述上一帧图像拍摄时手持所述移动设备的用户位于所述三维坐标系中的原始三维坐标，生成所述用户在所述三维坐标系中的三维坐标。4.根据权利要求1所述的网页操作方法，其特征在于，所述基于所述二维坐标和所述旋转数据，对所述显示屏幕中所显示的网页进行操作，包括：将所述显示屏幕所显示的网页中的、所述二维坐标所指示的位置的元素确定为目标元素，确定所述目标元素是否为支持点击的元素；响应于确定所述目标元素是支持点击的元素，确定是否已呈现预设的、与所述目标元素相关联的悬浮界面；响应于确定已呈现所述悬浮界面，确定所述悬浮界面的呈现时长；响应于确定所述呈现时长不小于预设时长阈值，触发对所述目标元素的点击事件，并呈现与所述目标元素相关联的点击界面。5.根据权利要求4所述的网页操作方法，其特征在于，所述基于所述二维坐标和所述旋转数据，对所述显示屏幕中所显示的网页进行操作，还包括：响应于确定未呈现所述悬浮界面，呈现所述悬浮界面。6.根据权利要求1所述的网页操作方法，其特征在于，所述基于所述二维坐标和所述旋转数据，对所述显示屏幕中所显示的网页进行操作，包括：对所述旋转数据进行解析，生成四元数数据；基于所述四元数数据，对所述显示屏幕中所显示的网页进行滚动。7.一种用于移动设备的网页操作装置，其特征在于，所述移动设备与摄像装置相连接，且所述移动设备安装有陀螺仪传感器，所述装置包括：获取单元，配置用于获取所述摄像装置拍摄的图像和所述陀螺仪传...

【专利技术属性】
技术研发人员：李晓男，王阳，
申请(专利权)人：百度在线网络技术北京有限公司，
类型：发明
国别省市：北京,11