基于虚拟实验的远程实时指导方法技术

本发明专利技术公开了一种基于虚拟实验的远程实时指导方法，包括：获取学生端的实验操作视频，将所述实验操作视频发送到教师端；接收来自教师端根据所述实验操作视频做出的远程指导，所述远程指导包括标注、手势动作、语音指导；将所述标注在所述实验操作视频中进行展示，将所述手势动作在虚拟实验中进行还原，将所述语音指导通过音频设备播放。教师端在接收到实验操作视频后，连接进入学生端的视频流，观看学生的虚拟实验操作视频，对学生的虚拟实验进行实时指导，指导可以包括标注的方式、手势动作和语音指导，能够有效提升学生和教师的交互体验。

【技术实现步骤摘要】
基于虚拟实验的远程实时指导方法
本专利技术涉及计算机视觉
，特别涉及一种基于虚拟实验的远程实时指导方法。
技术介绍
随着虚拟现实技术的不断发展，在教育领域也有了各种应用。虚拟实验可以用来替代初高中物理化学实验，虚拟实验具有节省材料、操作安全、试错成本低等特点，有很强的实用性，易于在初高中进行推广使用。而虚拟实验通常由学生一个人完成实验，在虚拟实验中因信息沟通不畅，学生做实验时缺乏交流，从而无法高效地完成实验。
技术实现思路
本专利技术旨在至少解决现有技术中存在的技术问题之一。为此，本专利技术提出一种基于虚拟实验的远程实时指导方法，能够远程实时指导虚拟实验的进行，提升虚拟实验中的沟通效率，高效地完成虚拟实验。本专利技术还提出一种基于虚拟实验的远程实时指导系统。本专利技术还提出一种具有上述基于虚拟实验的远程实时指导方法的教学平台系统。本专利技术还提出一种计算机可读存储介质。第一方面，本实施例提供了一种基于虚拟实验的远程实时指导方法，包括以下步骤：获取学生端的实验操作视频，将所述实验操作视频发送到教师端；接收来自教师端根据所述实验操作视频做出的远程指导，所述远程指导包括标注、手势动作、语音指导；将所述标注在所述实验操作视频中进行展示，将所述手势动作在虚拟实验中进行还原，将所述语音指导通过音频设备播放。根据本专利技术实施例的基于虚拟实验的远程实时指导方法，至少具有如下有益效果：首先获取来自学生端的实验操作视频，将实验操作视频发送到教师端，接收来自教师端根据实验操作视频做出的远程指导，远程指导包括对视频的标注、手势动作和语音指导，标注可以是包括划线、批语，也可以是指出实验操作过程中的错误动作；手势动作可以在虚拟实验中进行还原，当学生在学生端进行虚拟实验时，教师端可以实时获取学生端的视频流，可以在教师端直接指出学生在虚拟实验中出现的问题，可以是操作错误，也可以是某些危险操作，教师端能够实时与学生端进行互动，能够有效提升学生完成虚拟实验的质量，而且教师端可以是设置在与学生端物理距离很远的位置，只需要保持学生端和教师端的通信连接即可，使教师可以不受物理距离的限制实时参与到学生的虚拟实验中，一个教师也可以同时观看多个学生的虚拟实验视频，对多个学生进行指导，具有非常好的推广使用价值；当然教师端也可以传输教师的语音指导，通过语音指导能够使教师和学生更好地进行交互实验，能够有效提升学生做虚拟实验的质量。根据本专利技术的一些实施例，在所述将所述实验操作视频发送到教师端之后，包括步骤：向所述教师端发送请求指导信息。学生端可以主动向教师端发出请求指导信息，请求信息可以以通知消息的方式展示在教师端，教师端在接收到请求指导信息后，连接进入学生端的视频流，观看学生的虚拟实验操作视频，对学生的虚拟实验进行实时指导，指导可以包括标注的方式、手势动作和语音指导，能够有效提升学生和教师的交互体验，提升学生进行虚拟实验的质量。根据本专利技术的一些实施例，在所述接收来自教师端根据所述实验操作视频做出的远程指导之后，包括步骤：根据所述语音指导进行语音回复，将所述语音回复发送到所述教师端。可以理解的是，学生在接收到教师端的远程指导后，对远程指导的标注、手势动作还有教师的语音指导还是会存在一些疑问，学生端可以对远程指导的疑问进行语音回复，并将语音回复发送到教师端，教师可以与学生在教师端和学生端之间进行语音交流，能够有效提升虚拟实验中的交流体验，使学生能够高效完成实验。根据本专利技术的一些实施例，所述虚拟实验通过VR设备进行展示。学生进行虚拟实验，通过VR设备观看实验场景，在接受到来自教师端的远程指导，将远程指导的手势动作在虚拟实验中还原，相较于常规的通过视频交互的方法，本实施例的交互体验更好，学生能够沉浸式地参与到虚拟实验中。第二方面，本实施例提供了一种基于虚拟实验的远程实时指导方法，包括以下步骤：接收来自学生端的实验操作视频；根据所述实验操作视频向学生端发出远程指导，所述远程指导包括标注、手势动作、语音指导。根据本专利技术实施例的基于虚拟实验的远程实时指导方法，至少具有如下有益效果：教师端在接收到来自学生端的实验操作视频后，根据实验操作视频向学生端发出远程指导，远程指导包括标注、手势动作、语音指导，通过标注的方式能够直接指出学生在虚拟实验中存在的问题，手势动作可以直观地在虚拟实验中还原，能够很好地指导学生进行虚拟实验，提升学生虚拟实验的质量。根据本专利技术的一些实施例，所述教师端包括手势识别装置，所述手势识别装置用于识别操作者的手势动作。使用手势识别装置识别使用者的手势动作，并将远程指导发送到学生端，在学生端的虚拟实验中还原手势动作，能够使用手势动作对学生的虚拟实验进行指导，能够提供更好的交互体验。第三方面，本实施例提供了一种基于虚拟实验的远程实时指导系统，包括：学生端，包括操作平台、VR设备和音频设备，所述操作平台与所述VR设备、所述音频设备通信连接；教师端，包括指导平台、手势识别装置、麦克风，所述指导平台与所述手势识别装置、所述麦克风通信连接。根据本专利技术实施例的基于虚拟实验的远程实时指导系统，至少具有如下有益效果：基于虚拟实验的远程实时指导系统包括学生端和教师端，其中学生端包括操作平台、VR设备和音频设备，操作平台与VR设备、音频设备通信连接；教师端，包括指导平台、手势识别装置、麦克风，指导平台与手势识别装置、麦克风通信连接。本实施例提供的基于虚拟实验的远程实时指导系统能够有效提升学生做虚拟实验的交互体验，从而学生能够更加高质量地完成虚拟实验。第四方面，本实施例提供了一种教学平台系统，包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的基于虚拟实验的远程实时指导方法。根据本专利技术实施例的教学平台系统，至少具有如下有益效果：教学平台系统应用了如第一方面所述的基于虚拟实验的远程实时指导方法，教师端能够远程实时指导虚拟实验的进行，提升虚拟实验中的沟通效率，高效地完成虚拟实验。第五方面，本实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行如第一方面所述的基于虚拟实验的远程实时指导方法。本专利技术的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本专利技术的实践了解到。附图说明本专利技术的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中摘要附图要与说明书附图的其中一幅完全一致：图1是本专利技术一个实施例提供的基于虚拟实验的远程实时指导方法的流程图。具体实施方式为了使本专利技术的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本专利技术进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本专利技术，并不用于限定本专利技术。需要说明的是，虽然在系统示意图中进行了功能模块本文档来自技高网...

【技术保护点】
1.一种基于虚拟实验的远程实时指导方法，其特征在于，包括以下步骤：/n获取学生端的实验操作视频，将所述实验操作视频发送到教师端；/n接收来自教师端根据所述实验操作视频做出的远程指导，所述远程指导包括标注、手势动作、语音指导；/n将所述标注在所述实验操作视频中进行展示，将所述手势动作在虚拟实验中进行还原，将所述语音指导通过音频设备播放。/n

【技术特征摘要】
1.一种基于虚拟实验的远程实时指导方法，其特征在于，包括以下步骤：
获取学生端的实验操作视频，将所述实验操作视频发送到教师端；
接收来自教师端根据所述实验操作视频做出的远程指导，所述远程指导包括标注、手势动作、语音指导；
将所述标注在所述实验操作视频中进行展示，将所述手势动作在虚拟实验中进行还原，将所述语音指导通过音频设备播放。


2.根据权利要求1所述的基于虚拟实验的远程实时指导方法，其特征在于，在所述将所述实验操作视频发送到教师端之后，包括步骤：
向所述教师端发送请求指导信息。


3.根据权利要求1所述的基于虚拟实验的远程实时指导方法，其特征在于，在所述接收来自教师端根据所述实验操作视频做出的远程指导之后，包括步骤：
根据所述语音指导进行语音回复，将所述语音回复发送到所述教师端。


4.根据权利要求1所述的基于虚拟实验的远程实时指导方法，其特征在...

【专利技术属性】
技术研发人员：李勇恒，
申请(专利权)人：佛山科学技术学院，
类型：发明
国别省市：广东;44