基于AR与VR的汽车远程交互诊断方法、系统及其存储介质技术方案

本发明专利技术公开了一种基于AR与VR的汽车远程交互诊断方法、系统及其存储介质，该方法包括：获取汽车诊断信息、汽车以及汽车现场操作过程的音频信息，以及利用全景摄像头采集汽车以及现场操作过程的视频图像信息，加载到VR应用软件生成前端VR呈现程序上报远程服务器；利用AR设备呈现汽车以及现场操作过程的立体情景，并根据汽车诊断信息和前端VR呈现程序判断汽车故障类型并根据汽车故障类型匹配故障排除方案，下发故障排除方案以及对应的方案VR呈现程序，引导对汽车进行诊断以及故障排除。本申请准确、高效、便捷地实现汽车远程交互式诊断，提升用户远程维修诊断的体验。升用户远程维修诊断的体验。升用户远程维修诊断的体验。

【技术实现步骤摘要】
基于AR与VR的汽车远程交互诊断方法、系统及其存储介质


[0001]本申请涉及汽车远程诊断
，特别是一种基于AR与VR的汽车远程交互诊断方法、系统及其存储介质。

技术介绍

[0002]汽车远程诊断技术是汽车诊断技术未来的发展方向。汽车远程诊断系统是汽车诊断技术结合互联网，实现远程汽车故障诊断和修复，减少汽车的维修成本的系统。现有汽车诊断系统称为“车载自动诊断系统”，简称OBD，是英文On
‑
Board Diagnostics的缩写。它是在汽车运行过程中不断监测汽车电子器件工作情况，当发现异常的时候，根据特定的算法判断出具体的故障，并以代码的方式存储下来，同时启动对应的故障运行模块功能，并且通过故障灯提醒驾驶员，请驾驶员将汽车驾驶到修理厂进行维修，维修人员可以利用汽车故障自诊断功能调出故障码，快速对故障进行定位和修复。具体的，现代汽车电子控制单元(ECU)都具有故障自诊断的功能，在汽车运行中能够对各个传感器，执行器和连接线路进行不断的监测。它们共用汽车电子控制系统的信号输入电路。汽车运行时，电子控制系统输入和输出信号的电压或者电流值都有一定的变化范围，当某一个信号超出了预设的范围值，并且这一现象在一定的时间内不会消失，故障自诊断系统便判断为这一个信号对应的电路或者元器件出现故障，并将这一故障以代码的形式存入内部存储器，同时点亮仪表盘上的故障指示灯。
[0003]VR技术、AR技术正逐步向工业制造领域渗透和应用，为工业领域的研发、生成、管理、服务、销售和售后市场等各环节带来了深刻变革，将对智能制造产生不可估量的影响。VR/AR技术在汽车后市场维保方向的应用趋势将是：结合5G+云平台技术，将车企的主机厂、配件供应商、工厂4S店、品牌维修中心及汽修连锁店等各个B端的用户，甚至也包含维修技师和购车用户这样的C端用户，进行一个汽车后市场数字化维修资源的整合，可以根据不同终端用户的使用需求，设置不同的权限，在终端用户需要的时候，就可以方便快捷地去获取和利用这些VR/AR资源，并且支持多样化的移动终端，包括：VR/AR终端、PC端、网页端、手机移动端等等。基于AR技术和VR技术发展，人们开发了用于辅助汽车远程诊断的系统，如北美宝马公司宣布推出的用于宝马中心、4S店和车间等场景的全套AR解决方案，包括技术信息系统TIS 2.0、技术支持与科研辅助线上平台TSARA以及TSARAVision智能眼镜(硬件采用RealWear HMT
‑
1，并搭载Ubimax FrontlineVR软件)。用于帮助技术人员快速获得信息和实时的远程支持，远程专家以AR形式将技术指示和示意图投射在现场技术人员的显示屏中，也可以通过智能眼镜看到现场情况，并截屏和放大查看以做出判断。同时现场人员可通过语音控制调阅文档，不需要双手点击操作，从而节省时间，提高工作效率，这种信息交流方式比发送电子表格和照片或通过电话解释复杂的技术问题更高效。
[0004]然而，现有汽车远程诊断系统往往是将现场汽车诊断信息和现场音频/视频信息上传到服务器端，在服务器端通过AR技术或者VR技术呈现汽车检测情况，以便于后端技术人员能够远程地进行汽车检测、诊断以及维修，然后通过音频、视频等方式实时指导现场人
员对汽车进行故障检测、诊断以及维修。由于AR、VR进行数据交互较为复杂，不可避免地存在数据偏差，从而使得远程辅助工作无法顺利进行，影响了用户体验。

技术实现思路

[0005]本专利技术的主要目的在于提出一种基于AR与VR的汽车远程交互诊断方法、系统及其存储介质，旨在解决现有的汽车远程诊断系统运行存在数据偏差而影响工作效率的技术问题。
[0006]为了解决上述技术问题，本专利技术提供了一种基于AR与VR的汽车远程交互诊断方法，所述方法包括：
[0007]获取汽车诊断信息、汽车以及汽车现场操作过程的音频信息，以及利用全景摄像头采集汽车以及现场操作过程的视频图像信息；
[0008]将所述汽车诊断信息、所述音频信息、所述视频图像信息加载到VR应用软件生成前端VR呈现程序，并将所述汽车诊断信息、所述音频信息、所述视频图像信息以及所述前端VR呈现程序上报远程服务器；
[0009]在所述远程服务器根据所述视频图形信息、所述音频信息利用AR设备呈现汽车以及现场操作过程的立体情景，并根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案，下发所述故障排除方案以及对应的方案VR呈现程序；
[0010]接收到所述故障排除方案和所述方案VR呈现程序，根据所述故障排除方案提供的信息和所述方案VR呈现程序的引导对汽车进行诊断以及故障排除。
[0011]进一步的，所述将所述汽车诊断信息、所述音频信息、所述视频图像信息加载到VR应用软件生成前端VR呈现程序，并将所述汽车诊断信息、所述音频信息、所述视频图像信息以及所述前端VR呈现程序上报远程服务器的步骤之前，所述方法还包括：
[0012]在现场使用的移动终端和所述远程服务器上安装所述VR应用软件。
[0013]进一步的，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案包括：
[0014]根据所述汽车诊断信息、所述音频信息、所述视频图像信息判断所述前端VR呈现程序是否匹配，若是不匹配，下发重新采集所述汽车诊断信息、所述音频信息、所述视频图像信息的提示。
[0015]进一步的，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案包括：
[0016]根据所述汽车诊断信息、所述音频信息、所述视频图像信息判断所述前端VR呈现程序是否匹配，若匹配，根据所述汽车诊断信息结合故障诊断码确定所述汽车故障类型，并根据所述汽车故障类型在故障解决数据库中匹配对应的故障排除方案。
[0017]进一步的，所述下发所述故障排除方案以及对应的方案VR呈现程序包括：
[0018]下发所述故障排除方案，包括用于消除汽车故障的数据、算法、操作指令或者进一步进行汽车诊断的算法、操作指令；
[0019]根据所述音频信息、所述视频图像信息或者所述前端VR呈现程序将所述故障排除方案生成所述方案VR呈现程序，所述方案VR呈现程序包括故障排除指导程序、再诊断操作
指定程序。
[0020]进一步的，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案包括：
[0021]根据所述汽车诊断信息和所述音频信息、所述视频图像信息判断所述前端VR呈现程序是否匹配，若匹配，在所述远程服务器和所述移动终端同时记录对应的汽车信息，当移动终端所采集的所述汽车诊断信息于所述汽车信息匹配时，所述远程服务器和所述移动终端调取对应的记录信息。
[0022]进一步的，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案，下发所述故障排除方案以及对应本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于AR与VR的汽车远程交互诊断方法，其特征在于，所述方法包括：获取汽车诊断信息、汽车以及汽车现场操作过程的音频信息，以及利用全景摄像头采集汽车以及现场操作过程的视频图像信息；将所述汽车诊断信息、所述音频信息、所述视频图像信息加载到VR应用软件生成前端VR呈现程序，并将所述汽车诊断信息、所述音频信息、所述视频图像信息以及所述前端VR呈现程序上报远程服务器；在所述远程服务器根据所述视频图形信息、所述音频信息利用AR设备呈现汽车以及现场操作过程的立体情景，并根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案，下发所述故障排除方案以及对应的方案VR呈现程序；接收到所述故障排除方案和所述方案VR呈现程序，根据所述故障排除方案提供的信息和所述方案VR呈现程序的引导对汽车进行诊断以及故障排除。2.根据权利要求1所述的基于AR与VR的汽车远程交互诊断方法，其特征在于，将所述汽车诊断信息、所述音频信息、所述视频图像信息加载到VR应用软件生成前端VR呈现程序，并将所述汽车诊断信息、所述音频信息、所述视频图像信息以及所述前端VR呈现程序上报远程服务器的步骤之前，所述方法还包括：在现场使用的移动终端和所述远程服务器上安装所述VR应用软件。3.根据权利要求1所述的基于AR与VR的汽车远程交互诊断方法，其特征在于，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案包括：根据所述汽车诊断信息、所述音频信息、所述视频图像信息判断所述前端VR呈现程序是否匹配，若是不匹配，下发重新采集所述汽车诊断信息、所述音频信息、所述视频图像信息的提示。4.根据权利要求1所述的基于AR与VR的汽车远程交互诊断方法，其特征在于，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障类型并根据所述汽车故障类型匹配故障排除方案包括：根据所述汽车诊断信息、所述音频信息、所述视频图像信息判断所述前端VR呈现程序是否匹配，若匹配，根据所述汽车诊断信息结合故障诊断码确定所述汽车故障类型，并根据所述汽车故障类型在故障解决数据库中匹配对应的故障排除方案。5.根据权利要求1所述的基于AR与VR的汽车远程交互诊断方法，其特征在于，所述下发所述故障排除方案以及对应的方案VR呈现程序包括：下发所述故障排除方案，包括用于消除汽车故障的数据、算法、操作指令或者进一步进行汽车诊断的算法、操作指令；根据所述音频信息、所述视频图像信息或者所述前端VR呈现程序将所述故障排除方案生成所述方案VR呈现程序，所述方案VR呈现程序包括故障排除指导程序、再诊断操作指定程序。6.根据权利要求1所述的基于AR与VR的汽车远程交互诊断方法，其特征在于，根据所述汽车诊断信息和所述前端VR呈现程序判断汽车故障...

【专利技术属性】
技术研发人员：陈文瑾，陈洁，陈栋梁，
申请(专利权)人：深圳市希车智能科技有限公司，
类型：发明
国别省市：