一种远程会议系统和远程会议中的实物展示方法技术方案

本发明专利技术涉及一种远程会议系统和远程会议中的实物展示方法，包括近端设备和远端设备，近端设备和远端设备均包括主机和外设；外设包括摄像模块、麦克风和调节装置；摄像模块与调节装置连接，摄像模块用于获取实物的3D虚拟图像和用户手势，主机识别用户手势并通过形成指令操控3D虚拟图像；主机还通过识别语音并形成指令控制调节装置；3D图像获取装置包括3D扫描仪或者3D深度感知摄像头；方便整个会议或者教学活动的顺利开展，提高了沟通效率；不用单独通过键盘或者鼠标等其他不方便操作的外设操作，避免了不断中止教学讲解或者会议程序，使远程会议或者远程教学活动开展的更加顺利和高效。

【技术实现步骤摘要】
一种远程会议系统和远程会议中的实物展示方法
本专利技术涉及远程会议
，更具体地说，涉及一种远程会议系统和远程会议中的实物展示方法。
技术介绍
进行远程会议时候，一般通过视频方式进行交流，当需要展示实物为立体图形时，展示者往往需要调节摄像头并不断转动翻转实物，方便其余远端设备的用户观察实物，十分的不方便。
技术实现思路
本专利技术要解决的技术问题在于，针对现有技术的上述缺陷，提供一种远程会议系统和远程会议中的实物展示方法。本专利技术解决其技术问题所采用的技术方案是：构造一种远程会议系统，包括近端设备，和与所述近端设备远程连接的远端设备，所述远端设备具体为一个或多个，所述近端设备和所述远端设备均包括主机，和与所述主机连接的外设；所述外设包括显示模块、摄像模块、拾音模块、麦克风、扬声器和调节装置；其中：所述摄像模块设置在所述调节装置上，所述摄像模块包括3D图像获取装置和深度镜头，所述3D图像获取装置用于获得实物的3D虚拟图像；所述主机通过所述深度镜头获取用户手势，识别用户手势并通过对应手势的指令操控所述3D虚拟图像；主机还通过所述麦克风获取语音信息，识别语音并通过对应语音的指令控制所述调节装置；所述3D图像获取装置包括3D扫描仪或者3D深度感知摄像头。优选的，所述主机还用于远程声像调节，具体的，近端设备的所述主机对远端设备的所述外设输出音视频，远端设备的所述外设通过所述显示模块显示图像，通过所述扬声器的播放声音，再通过所述拾音模块对所述扬声器播放的声音进行采集，获取声音数据，通过所述摄像模块对所述显示模块播放的视频进行采集，获取视频数据，并将视频数据和声音数据发送至近端设备的所述主机，工作人员根据视频数据和声音数据对远端设备的所述显示模块和所述扬声器调试。优选的，所述主机还用于会议记录，具体的，将所述麦克风获取的语音储存为音频文件，通过语音识别将音频文件转换成文本文件，通过声纹识别对每段语音的发言人进行识别，并对每段语音转换成的文本标注对应的发言人信息。一种远程会议中的实物展示方法，基于前述的远程会议系统，包括以下步骤：步骤一：当要展示实物时，近端设备的用户通过语音发出指令，近端设备的所述主机通过所述麦克风获取语音，识别用户语音并通过对应语音的指令控制所述调节装置调节所述摄像模块位置，通过所述摄像模块获取所述实物影像信息，并实时传输至远端设备；步骤二：当要展示立体实物的3D虚拟图像时，通过3D扫描仪或者3D深度感知摄像头获取实物的图片数据；当需要调节所述摄像模块的位置或者角度时，近端设备的用户通过语音发出指令，近端设备的所述主机通过麦克风获取语音，识别用户语音并通过对应语音的指令控制所述调节装置调节所述摄像模块位置，通过所述摄像模块同时配合人为翻转实物的方向和角度，获取立体实物各个角度的图形信息，并对立体实物图形信息进行编辑处理，形成虚拟实物立体图像；步骤三：当实物的3D虚拟图像不清晰时，执行第一步；步骤四：当要操控实物的3D虚拟图像时，所述主机通过所述深度镜头或3D深度感知摄像头获取用户手势，识别用户手势并通过对应手势的指令操控所述3D虚拟图像；步骤五：当要展示平面实物的平面图像时，近端设备的所述主机通过所述摄像模块获取平面实物的平面展示图像。优选的，当所述3D图像获取装置采用3D深度感知摄像头时；若展示的实物为立体物，则所述主机通过3D深度感知摄像头获取实物的3D虚拟图像，并通过所述深度镜头获取用户的手势发出对应的指令控制所述3D虚拟图像的状态；若要远程展示实际实物，则通过手来翻转实物的角度，所述主机通过获取语音指令发出控制所述调节装置，以此调节所述3D深度感知摄像头的位置，并配合用户对实物的手动翻转展示实物详细结构信息；当所述显示模块分屏同时展示实物的3D虚拟图像和实物影像时，主机具有同时通过语音控制实物展示和通过手势控制3D虚拟图像的功能。优选的，当需要展示的实物为平面的纸质表格文档时，所述主机通过所述摄像模块获取纸质表格文档的图像；所述主机对图像进行字段扫描，根据扫描的表格首行和/或首列字段调出对应的预制模板文件，将扫描出的字段对应填入模板文件，形成表格文件，并将该表格文件发送至所有远端设备；当近端设备需要展示表格时，近端设备的主机打开表格文件，远端设备的主机同步打开表格文件，近端设备的主机获取用户对表格的控制指令并将其发送至远端设备的主机，远端设备和近端设备根据指令实时更新表格展示状态。优选的，对表格图像进行扫描时，首先找到最大包围框，对最大包围框内多个包围框进行定位，确定表格的行列，对表格的各行列的字段进行扫描；调出预制模板，根据扫描出的表格行列信息和首行和/或首列的文字信息，对图像表格与预制模板匹配，确定表格的类型，根据确定的表格类型新建对应的模板表格文件；将识别出的其余行列的字段填入模板格式文件的对应区域，并对文件进行保存，同时将文件分别发送给所有远端设备。优选的，对表格图像进行扫描时，需要对图像进行校正时，具体的，先找出图像中的最长直线，然后确定最长直线接近水平线还是竖直线，然后找出最长直线与水平线/竖直线的夹角，确定图像的倾向角度，由此对图像的角度进行旋转校正。优选的，所述主机获取到多个图像文件时，扫描最大包围框之外的标题文字信息，若检测到标题文字信息一致，且模板相同，则将具有相同模板的图像文件的待识别区域进行字段扫描，并根据接收顺序将扫描字段依次填入同一模板格式文件并进行保存。优选的，所述目标远端设备获取表格展示指令和表格编辑指令，将所述表格展示指令和表格编辑指令通过近端设备的所述主机发送至其余远端设备，所述远端设备根据所述表格展示指令和表格编辑指令对所述表格进行更新，确认其余所述远端设备均完成更新后，目标远端设备再根据所述表格展示指令和表格编辑指令对所述表格进行更新。本专利技术的有益效果在于：通过获取语音信息，识别语音并形成指令控制所述调节装置，通过调节装置调节摄像模块的位置，配合用户手动转动实物可以获取实物不同角度的影像，并将影像实时传输到远端设备，便于讲解。通过调节装置和3D深度感知摄像头配合可以获取实物的3D虚拟图像，并将3D虚拟图像传输至远端设备，在3D虚拟图像获取完成后，3D深度感知摄像头还可以通过获取用户手势，识别用户手势并通过对应指令操控所述3D虚拟图像，并将所述3D虚拟图像的变化同步传输至远端设备，可以减少展示着手指对实物影像的干扰，使远端设备的用户能够更清楚仔细的观察实物。3D深度感知摄像头本身具有智能捕捉实物或者讲解人员的作用，同时配合语音控制调节装置调整3D深度感知摄像头的位置和角度，能够更加高效的开展会议或者教学活动。在远程会议或者远程教学环境中，通过手势控制3D虚拟图像，或者通过语音控制摄像装置的位置和角度，方便整个会议或者教学活动的顺利开展，提高了沟通效率；采用本远程会议系统和方法，不用单独通过键盘或者鼠标等其他不方便操作的外设操作，避免了不断中止教学讲解或者会议本文档来自技高网...

【技术保护点】
1.一种远程会议系统，其特征在于，包括近端设备，和与所述近端设备远程连接的远端设备，所述远端设备具体为一个或多个，所述近端设备和所述远端设备均包括主机(1)，和与所述主机(1)连接的外设(2)；/n所述外设(2)包括显示模块(21)、摄像模块(22)、拾音模块(23)、麦克风(24)、扬声器(25)和调节装置(26)；其中：/n所述摄像模块(22)设置在所述调节装置(26)上，所述摄像模块(22)包括3D图像获取装置(221)和深度镜头(222)，所述3D图像获取装置(221)用于获取实物的3D虚拟图像；/n所述主机(2)通过所述深度镜头(222)获取用户手势，识别用户手势并通过对应手势的指令操控所述3D虚拟图像；主机(2)还通过所述麦克风(24)获取语音信息，识别语音并通过对应语音的指令控制所述调节装置(26)；/n所述3D图像获取装置(221)包括3D扫描仪或者3D深度感知摄像头；/n所述主机(1)还用于远程声像调节，具体的，近端设备的所述主机(1)对远端设备的所述外设(2)输出音视频，远端设备的所述外设(1)通过所述显示模块(21)显示图像，通过所述扬声器(25)的播放声音，再通过所述拾音模块(23)对所述扬声器(25)播放的声音进行采集，获取声音数据，通过所述摄像模块(22)对所述显示模块(21)播放的视频进行采集，获取视频数据，并将视频数据和声音数据发送至近端设备的所述主机(1)，工作人员根据视频数据和声音数据对远端设备的所述显示模块(21)和所述扬声器(25)调试。/n...

【技术特征摘要】
1.一种远程会议系统，其特征在于，包括近端设备，和与所述近端设备远程连接的远端设备，所述远端设备具体为一个或多个，所述近端设备和所述远端设备均包括主机(1)，和与所述主机(1)连接的外设(2)；
所述外设(2)包括显示模块(21)、摄像模块(22)、拾音模块(23)、麦克风(24)、扬声器(25)和调节装置(26)；其中：
所述摄像模块(22)设置在所述调节装置(26)上，所述摄像模块(22)包括3D图像获取装置(221)和深度镜头(222)，所述3D图像获取装置(221)用于获取实物的3D虚拟图像；
所述主机(2)通过所述深度镜头(222)获取用户手势，识别用户手势并通过对应手势的指令操控所述3D虚拟图像；主机(2)还通过所述麦克风(24)获取语音信息，识别语音并通过对应语音的指令控制所述调节装置(26)；
所述3D图像获取装置(221)包括3D扫描仪或者3D深度感知摄像头；
所述主机(1)还用于远程声像调节，具体的，近端设备的所述主机(1)对远端设备的所述外设(2)输出音视频，远端设备的所述外设(1)通过所述显示模块(21)显示图像，通过所述扬声器(25)的播放声音，再通过所述拾音模块(23)对所述扬声器(25)播放的声音进行采集，获取声音数据，通过所述摄像模块(22)对所述显示模块(21)播放的视频进行采集，获取视频数据，并将视频数据和声音数据发送至近端设备的所述主机(1)，工作人员根据视频数据和声音数据对远端设备的所述显示模块(21)和所述扬声器(25)调试。


2.一种远程会议中的实物展示方法，基于权利要求1所述的远程会议系统，其特征在于，包括以下步骤：
步骤一：当要展示实物时，近端设备的用户通过语音发出指令，近端设备的所述主机(1)通过所述麦克风(24)获取语音，识别用户语音并通过对应语音的指令控制所述调节装置(26)调节所述摄像模块(22)位置，通过所述摄像模块(22)获取所述实物影像信息，并实时传输至远端设备；
步骤二：当要展示立体实物的3D虚拟图像时，通过3D扫描仪或者3D深度感知摄像头获取实物的图片数据；当需要调节所述摄像模块(22)的位置或者角度时，近端设备的用户通过语音发出指令，近端设备的所述主机(1)通过麦克风(24)获取语音，识别用户语音并通过对应语音的指令控制所述调节装置(26)调节所述摄像模块(22)位置，通过所述摄像模块(22)同时配合人为翻转实物的方向和角度，获取立体实物各个角度的图形信息，并对立体实物图形信息进行编辑处理，形成虚拟实物立体图像；
步骤三：当实物的3D虚拟图像不清晰时，执行第一步；
步骤四：当要操控实物的3D虚拟图像时，所述主机(1)通过所述深度镜头(222)或3D深度感知摄像头获取用户手势，识别用户手势并通过对应手势的指令操控所述3D虚拟图像；
步骤五：当要展示平面实物的平面图像时，近端设备的所述主机(1)通过所述摄像模块(22)获取平面实物的平面展示图像。


3.根据权利要求2所述的远程会议中的实物展示方法，其特...

【专利技术属性】
技术研发人员：贾涛，
申请(专利权)人：深圳市黑金工业制造有限公司，
类型：发明
国别省市：广东;44