一种远程教学系统技术方案

本发明专利技术公开了一种远程教学系统，包括摄像头、处理器、VR模块以及图像处理合成模块，摄像头、VR模块与图像处理合成模块均与处理器连接，所述处理器通过5G模块无线连接远程服务器。本发明专利技术通过采集教师或者学生的行为，分析其是否符合需要关注来对视频进行进一步的处理以实现对个别视频的强化以提高沉浸程度，符合人类实际的对周围课堂环境的关注规律。

【技术实现步骤摘要】
一种远程教学系统
本专利技术涉及远程教学领域，具体涉及一种远程教学系统。
技术介绍
随着互联网技术的发展，特别是网络通信技术、图像处理技术、智能硬件以及虚拟现实技术等的不断成熟，学校课堂传统教学的形式已经满足不了学生的个性化教学需求，特别是在特殊天气或者各种流行性病毒肆虐的情况下，远程教育需求越来越多、越来越迫切，然而，类似于音视频直播课、白板教学或者会议形式的教学与传统课堂现场教学的互动性以及及时性不能相提并论；为了改善上述问题，现有技术中也有采取图像识别的方法实现对学生或者教师的上课状态如情绪识别、板书追踪、上课行为分析等，以帮助老师提升教学质量，或者帮助学生提升学习效率。然而现有技术中的教学系统还是缺少课堂体验中的真实感以及互动感，也无法及时的获取周围同学或者老师的状态，同时也由于终端设备的不同，甚至会出现视频卡顿以及音视频不同步的现象。
技术实现思路
为解决
技术介绍
中的问题，本专利技术提供一种远程教学系统，该系统包括摄像头、处理器、VR模块以及图像处理合成模块，摄像头、VR模块与图像处理合成模块均与处理器连接；所述处理器通过5G模块无线连接远程服务器。优选的，所述VR模块包括与处理器连接的微型摄像头、用于录取学生或者教师语音数据的语音模块以及MEMS陀螺仪。优选的，所述处理器还与拍摄学生或者教师身体图像数据的摄像头连接。优选的，所述图像处理合成模块用于将微型摄像头拍摄的眼部位附近视频信号和摄像头拍摄的脸部以及身体视频信号合成，所述图像处理合成模块还用于将上述合成后的视频信号统一压缩成相同分辨率处理，然后将压缩处理后的合成视频信号通过处理器发送至远程服务器进行处理，所述图像处理合成模块可由DSP（DigitalSignalProcessing）芯片完成。优选的，所述远程服务器接收学生终端或者教师终端传输过来的压缩后的合成视频信号，并根据关注度情况接收学生或者教师终端传输过来的未经压缩的合成视频信号；所述远程服务器包括视频强化模块，所述视频强化模块将需要强化的视频信号进行重构强化；所述远程服务器还包括虚拟场景转换模块。优选的，所述虚拟场景转换模块将各个学生终端或者教师终端中的合成视频信号以及经过强化后的视频信号转换为虚拟场景数据，再将所述虚拟场景数据发送至各个学生终端或者教师终端。本专利技术还公开了一种远程教学方法，步骤如下：S1、教师设置教学模式，所述教学模式包括讲授模式、讨论模式、提问模式；S2、综合分析学生的行为数据，所述行为数据包括眼睛运动、头姿态、身体姿态、语音数据，判断是否触发关注信号；S3、如果触发关注信号，将所述触发关注信号发送至远程服务器；S4、所述远程服务器将触发关注信号的学生的合成视频信号进行重构强化并将其组合进虚拟场景数据中；S5、所述远程服务器将虚拟场景数据发送至各个学生终端和/或教师终端中显示。优选的，所述S1中的教学模式设置是在管理员模式下设置的，该模式下能够控制远程服务器中的学生数据是否发送以及如何发送，并具有全体静音或者个体禁言的功能。优选的，所述讲授模式中教师终端中的音视频数据同步传输，并且在虚拟场景数据中教师音视频数据处于突出位置，教师终端能够控制学生终端的音视频数据是否采集以及禁言功能是否开启等，并且能够控制远程服务器始终对教师的视频信息进行强化。优选的，所述讨论模式中学生终端和教师终端的音视频数据均同步采集。优选的，所述提问模式中学生终端获取学生是否请求提问，而教师终端控制是否接受或者接受哪个学生的提问。优选的，所述S2中的行为数据中的眼睛运动、头姿态由VR模块中的微型摄像头以及MEMS陀螺仪实现采集。优选的，所述S2中的身体姿态、语音数据由用于拍摄学生或者教师身体图像数据的摄像头以及语音模块实现音视频数据采集的。优选的，所述S2中的综合分析是指根据眼睛运动、头姿态、身体姿态以及语音数据中是否有一个或者多个数据是否异常以判断学生是否想参与讨论或者回答问题。优选的，所述S4中的合成视频信号为步骤S2中的微型摄像头拍摄的眼部位附近视频信号和摄像头拍摄的脸部以及身体视频信号合成后的视频信号，合成步骤由与处理器连接的图像处理合成模块实现，所述图像处理合成模块还用于将上述合成后的视频信号统一压缩成相同分辨率处理，然后将压缩处理后的合成视频信号通过处理器发送至远程服务器进行处理。优选的，所述S4中的远程服务器用于将未经强化的其他学生终端中的视频与强化视频数据组合在一起转化为虚拟场景数据。优选的，所述S4中的视频强化实质保留原始视频分辨率的基础上，将脸部特征进一步的重构强化；所述重构强化包括对比度、饱和度、亮度、视频扩大、颜艺化或者微距化等处理方式。优选的，所述S5中的虚拟场景数据是由虚拟场景转换模块实现，所述虚拟场景转换模块能将接收到的所有教师和学生的合成视频信号进行统一处理，并根据接收到的关注信号将相应学生的合成视频信号进行强化重构，其中将教师的合成视频信号置于虚拟场景中的“讲台”位置，将学生的合成视频信号排布在“课桌位置”。本专利技术通过采集教师或者学生的行为，分析其是否符合需要关注来对视频进行进一步的处理以实现对个别视频的强化以提高沉浸程度，符合人类实际的对周围课堂环境的关注规律，在学生终端或者教师终端录制的视频信息在不需要关注时可以进行压缩处理以减轻服务器以及VR模块的数据压力，能更流畅渲染VR场景。附图说明图1为一种远程教学方法的流程图。图2为一种远程教学系统的原理图。具体实施方式下面将结合本专利技术实施例中的附图，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。实施例一如图2所示，本实施例提供了一种远程教学系统，包括VR模块1、摄像头2、处理器3以及图像处理合成模块4，摄像头2、VR模块1与图像处理合成模块4均与处理器3连接。所述处理器3通过5G模块5无线连接远程服务器6。所述VR模块1包括与处理器3连接的微型摄像头1-1、MEMS陀螺仪1-2以及用于录取学生或者教师语音数据的语音模块1-3。所述处理器3还与拍摄学生或者教师身体图像数据的摄像头2连接。作为一种优选的实施方式，所述图像处理合成模块4用于将微型摄像头1-1拍摄的眼部位附近视频信号和摄像头2拍摄的脸部以及身体视频信号合成，所述图像处理合成模块4还用于将上述合成后的视频信号统一压缩成相同分辨率处理，然后将压缩处理后的合成视频信号通过处理器3发送至远程服务器6进行处理，所述图像处理合成模块4可由DSP（DigitalSignalProcessing）芯片完成。作为一种优选的实施方式，所述远程服务器6接收学生终端或者教师终端传输过来的压缩后的合成视频信号，并根据关注本文档来自技高网...

【技术保护点】
1.一种远程教学系统，其特征在于：该系统包括摄像头、处理器、VR模块以及图像处理合成模块，摄像头、VR模块与图像处理合成模块均与处理器连接；/n所述处理器通过5G模块无线连接远程服务器。/n

【技术特征摘要】
1.一种远程教学系统，其特征在于：该系统包括摄像头、处理器、VR模块以及图像处理合成模块，摄像头、VR模块与图像处理合成模块均与处理器连接；
所述处理器通过5G模块无线连接远程服务器。


2.根据权利要求1所述的远程教学系统，其特征在于：所述VR模块包括与处理器连接的微型摄像头、用于录取学生或者教师语音数据的语音模块以及MEMS陀螺仪。


3.根据权利要求1和2所述的远程教学系统，其特征在于：
所述图像处理合成模块用于将微型摄像头拍摄的眼部位附近视频信号和摄像头拍摄的脸部以及身体视频信号合成，所述图像处理合成模块还用于将上述合成后的视频信号统一压缩成相同分辨率处理，然后...

【专利技术属性】
技术研发人员：李琦，丁桂芝，牛明敏，王晓靖，张敏，余淼，
申请(专利权)人：郑州铁路职业技术学院，
类型：发明
国别省市：河南;41