一种远程在线标记方法及系统技术方案

本申请公开了一种远程在线标记方法及系统。本方法首先建立与终端MR设备之间的通信关系，基于通信关系获取MR设备所采集的现场实时视频数据，并进行视频图像显示；然后在视频图像显示界面中对现场实时画面进行标记处理，得到标记后的图像信息；最后将标记后的图像信息通过通信关系同步给MR设备进行展示。本发明专利技术可以与终端MR设备进行图像、语音等实时交互，帮助现场人员通过MR设备得到远程指导人员的有效指导。效指导。效指导。

【技术实现步骤摘要】
一种远程在线标记方法及系统


[0001]本专利技术涉及通信
，特别涉及一种远程在线标记方法及系统。

技术介绍

[0002]在进行远程设备操控时，传统通常是通过设备现场所拍摄的画面发送到远程指导人员端显示，远程指导人员看到的是平面的显示图像，并且指导也只能通过语音进行，在复杂检修场景中，远程指导人员通过语音图像与现场人员进行交流时，容易出现对设备指导定位不精准从而产生误操作事件。
[0003]然而，现有通过传输现场语音和视频不能很好的将指导建议反馈给现场人员，现场人员需要更加精准的指导。

技术实现思路

[0004]基于此，本申请实施例提供了一种远程在线标记方法及系统，可以与终端MR设备进行图像、语音等实时交互，帮助现场人员通过MR设备得到远程指导人员的有效指导。
[0005]第一方面，提供了一种远程在线标记方法，该方法包括：
[0006]建立与终端MR设备之间的通信关系，基于所述通信关系获取MR设备所采集的现场实时视频数据，并进行视频图像显示；
[0007]在视频图像显示界面中对现场实时画面进行标记处理，得到标记后的图像信息；
[0008]将所述标记后的图像信息通过所述通信关系同步给MR设备进行展示。
[0009]可选地，所述建立与终端MR设备之间的通信关系，包括：
[0010]建立与终端MR设备之间http协议通信。
[0011]可选地，建立与终端MR设备之间的通信关系之后，所述方法还包括：
[0012]获取MR设备所采集的现场实时音频数据；基于所述现场实时音频数据在视频图像显示界面中对现场实时画面进行标记处理。
[0013]可选地，在视频图像显示界面中对现场实时画面进行标记处理至少包括：
[0014]对现场实时画面进行画框、标记箭头、标记颜色处理。
[0015]可选地，在视频图像显示界面中对现场实时画面进行标记处理包括：
[0016]通过程序语言完成标记功能。
[0017]第二方面，提供了一种远程在线标记系统，该系统包括：
[0018]获取模块，用于建立与终端MR设备之间的通信关系，基于所述通信关系获取MR设备所采集的现场实时视频数据，并进行视频图像显示；
[0019]标记模块，用于在视频图像显示界面中对现场实时画面进行标记处理，得到标记后的图像信息；
[0020]同步模块，用于将所述标记后的图像信息通过所述通信关系同步给MR设备进行展示。
[0021]可选地，获取模块建立与终端MR设备之间的通信关系，包括：
[0022]建立与终端MR设备之间http协议通信。
[0023]可选地，所述获取模块还包括：
[0024]获取MR设备所采集的现场实时音频数据；基于所述现场实时音频数据在视频图像显示界面中对现场实时画面进行标记处理。
[0025]可选地，标记模块在视频图像显示界面中对现场实时画面进行标记处理至少包括：
[0026]对现场实时画面进行画框、标记箭头、标记颜色处理。
[0027]可选地，标记模块在视频图像显示界面中对现场实时画面进行标记处理包括：
[0028]通过程序语言完成标记功能。
[0029]本申请实施例提供的技术方案带来的有益效果至少包括：
[0030](1)在远程辅助系统上，通过程序语言编写，将现场画面做动态标记，使现场人员可以通过MR设备直接观看到标记后的画面，得到更精准的指导。
[0031](2)基于MR设备有效的提升了远程与现场之间的信息传输的实时性与全面性，提升了整体的工作效率。
附图说明
[0032]为了更清楚地说明本专利技术的实施方式或现有技术中的技术方案，下面将对实施方式或现有技术描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是示例性的，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图引申获得其它的实施附图。
[0033]图1为本申请实施例提供的一种远程在线标记方法的架构图；
[0034]图2为本申请实施例提供的一种远程在线标记方法流程图。
具体实施方式
[0035]为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
[0036]在本专利技术的描述中，术语“包括”、“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包括了一系列步骤或单元的过程、方法、系统、产品或设备不必限于已明确列出的那些步骤或单元，而是还可包含虽然并未明确列出的但对于这些过程、方法、产品或设备固有的其它步骤或单元，或者基于本专利技术构思进一步的优化方案所增加的步骤或单元。
[0037]目前的远程辅助系统仅可以与终端MR设备进行图像、语音等实时交互，但仅通过传输现场语音和视频不能很好的将指导建议反馈给现场人员，现场人员需要更加精准的指导。本申请在远程辅助系统基础上，将现场画面做动态标记，使现场人员可以通过MR设备直接观看到标记后的画面，得到更精准的指导。
[0038]如图1，其示出了远程在线标记方法的架构图，本申请公开了一种远程在线标记方法，可应用于图1中的远程辅助系统中，通过远程辅助系统实现标记图像信息，以及与MR端设备的具体信息交互。具体地，请参考图2，其示出了本申请实施例提供的一种远程在线标
记方法的流程图，该方法可以包括以下步骤：
[0039]步骤101，建立与终端MR设备之间的通信关系，基于通信关系获取MR设备所采集的现场实时视频数据，并进行视频图像显示。
[0040]在本步骤中，通过远程辅助系统与终端MR设备之间的通信协议，将现场的视频图像传输到远程辅助系统界面上。
[0041]在本申请可选的实施例中，不单获取现场的视频图像，还包括获取MR设备所采集的现场实时音频数据；标记人员可以基于现场实时音频数据在视频图像显示界面中对现场实时画面进行标记处理。
[0042]步骤102，在视频图像显示界面中对现场实时画面进行标记处理，得到标记后的图像信息。
[0043]在远程辅助系统界面上，通过程序语言完成标记功能，远程指导人员在现场实时画面上选取标记功能的各种标记进行标记处理，标记至少包括画框、箭头、标记颜色等。
[0044]其中，程序的实现主要基于UnityAPI
‑
Vector2进行实现，以箭头和圆圈为例：箭头：Vector2.Angle(point.startPoint,Vector2.right)；圆圈：newVector2(Mathf.Abs(point.x
‑
startPoint.x),Mathf.Abs(point.y
‑
startPoint.y))。
[0045]步骤103，将标记后的图像信息通过通信关系同步给MR设备进行展示。
[0046]本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种远程在线标记方法，其特征在于，所述方法包括：建立与终端MR设备之间的通信关系，基于所述通信关系获取MR设备所采集的现场实时视频数据，并进行视频图像显示；在视频图像显示界面中对现场实时画面进行标记处理，得到标记后的图像信息；将所述标记后的图像信息通过所述通信关系同步给MR设备进行展示。2.根据权利要求1所述的方法，其特征在于，所述建立与终端MR设备之间的通信关系，包括：建立与终端MR设备之间http协议通信。3.根据权利要求1所述的方法，其特征在于，建立与终端MR设备之间的通信关系之后，所述方法还包括：获取MR设备所采集的现场实时音频数据；基于所述现场实时音频数据在视频图像显示界面中对现场实时画面进行标记处理。4.根据权利要求1所述的方法，其特征在于，在视频图像显示界面中对现场实时画面进行标记处理至少包括：对现场实时画面进行画框、标记箭头、标记颜色处理。5.根据权利要求1所述的方法，其特征在于，在视频图像显示界面中对现场实时画面进行标记处理包括：通过程序语言完成标记功能。6.一种远程在线标记系...

【专利技术属性】
技术研发人员：赵凤艳，张洪军，王军，张振，
申请(专利权)人：北京尚优力达科技有限公司，
类型：发明
国别省市：