AR远程专家协助方法及系统技术方案

本发明专利技术公开AR远程专家协助方法包括：生成专家数据关联集合、获取当前的现场对象识别数据，获取专家呼叫信息，操作端根据专家呼叫信息向专家端发送呼叫请求，在呼叫请求中包括现场对象识别数据、专家端返回维修信息。操作端接收到专家协助数据及维修标记信息。操作端通过AR眼镜播放专家协助数据及维修标记信息，使维修标记信息叠加于当前视野画面上。通过AR设备接收操作者(维修者)现场的维修图像，通过远程呼叫专家，不限于本地资源，从专家端获取与现场维修设备匹配的维修信息，操作者(维修者)所佩戴的AR设备可对上述维修信息及内容播放，从而便于操作者(维修者)的维修操作，维修效率高，且成本低。

Ar remote expert assistance method and system

【技术实现步骤摘要】
AR远程专家协助方法及系统
本专利技术属于AR技术及相关应用的
，尤其涉及AR远程专家协助方法及系统。
技术介绍
现有的设备维修及维护时，多依赖于维修者的经验对设备或机器维修，其维修的效率多取决于熟练程度。在需要对新设备或陌生设备维修时，只能通过维修手册对维修操作给予指导。但现场的设备情况通常较为复杂，很难通过查阅维修手册解决。针对上述问题，现有技术通过电话求助的方式对现场的维修操作给予协助，但该方式，由于其现场维修者很难对设备情况描述清楚，同时对较为复杂的设备的维修需要较长的维修过程，从而无法通过远程同步视频的方式给予有效解决，维修成本高，维修效率低。
技术实现思路
本专利技术实施方式提供AR远程专家协助方法及系统，用于至少解决上述技术问题之一。第一方面，本专利技术提供了AR远程专家协助方法，该方法实施于包括操作端和专家端的系统中，该方法包括：步骤S101，建立现场对象识别数据与专家信息的关联，该关联生成专家数据关联集合。步骤S102，操作端根据操作端所设置的AR眼镜端扫描当前视野且获取当前视本文档来自技高网...

【技术保护点】
1.AR远程专家协助方法，该方法实施于包括操作端和专家端的系统中，其特征在于，包括：/n步骤S101，建立现场对象识别数据与专家信息的关联，该关联生成专家数据关联集合；/n步骤S102，所述操作端根据操作端所设置的AR眼镜端扫描当前视野且获取当前视野图像，AR眼镜端识别所述当前视野图像获取当前的现场对象识别数据；/n步骤S103，所述操作端根据所述当前的现场对象识别数据检索所述专家数据关联集合，获取与所述现场对象识别数据对应的专家信息，所述专家信息中包括专家呼叫信息；/n步骤S104，所述操作端根据所述专家呼叫信息向专家端发送呼叫请求，在所述呼叫请求中包括所述现场对象识别数据；/n步骤S105...

【技术特征摘要】
1.AR远程专家协助方法，该方法实施于包括操作端和专家端的系统中，其特征在于，包括：
步骤S101，建立现场对象识别数据与专家信息的关联，该关联生成专家数据关联集合；
步骤S102，所述操作端根据操作端所设置的AR眼镜端扫描当前视野且获取当前视野图像，AR眼镜端识别所述当前视野图像获取当前的现场对象识别数据；
步骤S103，所述操作端根据所述当前的现场对象识别数据检索所述专家数据关联集合，获取与所述现场对象识别数据对应的专家信息，所述专家信息中包括专家呼叫信息；
步骤S104，所述操作端根据所述专家呼叫信息向专家端发送呼叫请求，在所述呼叫请求中包括所述现场对象识别数据；
步骤S105，所述专家端应答所述操作端的呼叫请求且与所述操作端建立通信；专家端获取所述操作端的当前视野图像，根据所述当前视野图像获取视野区域标识点坐标信息；专家端根据所述现场对象识别数据生成专家协助数据；专家端根据所述当前视野图像生成维修标记信息，根据所述维修标记信息及所述视野区域标识点坐标信息获取维修标记信息；专家端将所述专家协助数据及所述维修标记信息推动至所述操作端；
步骤S106，所述操作端接收到所述专家协助数据及所述维修标记信息；所述操作端通过AR眼镜播放所述专家协助数据及所述维修标记信息，使所述维修标记信息叠加于当前视野画面上。


2.根据权利要求1所述的AR远程专家协助方法，其中，
所述步骤S103中包括，所述专家端为多个，所述专家信息为多个专家信息，每个所述专家信息中对应一个专家呼叫信息；
所述步骤S104中包括，操作端根据所述多个专家呼叫信息向多个专家端发送呼叫请求，在所述呼叫请求中包括所述现场对象识别数据。


3.根据权利要求2所述的AR远程专家协助方法，所述步骤S105中还包括，
所述步骤S105中还包括，所述专家端为多个，各专家端将本地的维修标记信息及所述视野区域标识点坐标信息推送至所述操作端，所述各专家端的本地的维修标记信息或所述视野区域标识点坐标信息中包括各专家端的标识信息；
所述步骤S106中还包括，所述操作端将从多个所述专家端接收的各专家视野区域标识点坐标信息通过均值化获取均值后的标准坐标信息；根据标准坐标信息及所述各专家视野区域标识点坐标信息获取各坐标点偏差值，根据所述各坐标点偏差值校正各专家端本地的维修标记信息；所述操作端根据所述专家端的标识信息及各专家端本地的维修标记信息生成各专家端的标识符；
所述操作端通过AR眼镜播放所述多个专家端的协助数据、校正后的所述各专家端本地的维修标记信息及所述各专家端的标识符，使所述多个专家端的协助数据、校正后的所述各专家端本地的维修标记信息及所述各专家端的标识符叠加于当前视野画面上。


4.根据权利要求3所述的AR远程专家协助方法，
所述步骤S105中还包括，所述专家端为多个，多个所述专家端将本地所采集的实时音频文件传递至操作端；
所述步骤S106中还包括，所述操作端将从所述多个专家端所采集的本地音频文件分别缓存至多声道存储器中；将所述缓存于多声道存储器中的多个本地音频文件按时间帧合成为本地合成音频；所述操作端通过AR眼镜播放所述本地合成音频。


5.根据权利要4所述的AR远程专家协助方法，
所述步骤S105中还包括，若当前网速小于设定网速，所述专家端按设定采集时间间隔采集并将本地所采集的实时音频文件传递至操作端；
所述步骤106中还包括，所述操作端从所述多个专家端接收多个时间间隔所采集的多时间段实时音频文件，所述操作端从已接收的设定个数的所述多时间段实时音频文件中获取其占用存储空间最大的时间段音频文件作为标准实时音频文件；
所述操作端判断所述当前接收的当前时间段音频文件的占用存储空间是否小于所述标准实时音频文件的占用存储空间，若否，则将当前时间段音频文件根据采集时间顺序排列到播放队列中；
若是，则接收下一时间段的音频文件，将所述下一时间段的音频文件合并当前时间段音频文件获取合并时间段音频文件；若合并时间段音频文件小于所述标准实时音频文件的占用存储空间则返回本步骤，直至合并时间段音频文件大于或等于所述标准实时音频文件的占用存储空间；若合并时间段音频文件小...

【专利技术属性】
技术研发人员：黄建红，张东，陈术尧，
申请(专利权)人：浙江赛伯乐众智网络科技有限公司，
类型：发明
国别省市：浙江;33