基于增强现实设备的跨终端设备数据通信系统技术方案

本发明专利技术提供了一种基于增强现实设备的跨终端设备数据通信系统，涉及增强现实技术领域。通过增强现实设备采集音/视频、图片、文字等数据，由跨终端设备数据通信系统将音/视频、图片、文字等数据传输到数据中心进行解析和存储，并传输到PC/平板/手机等智能设备终端，完成与远程专家的通讯和信息交互；实现了增强现实设备与智能设备终端的互联互通，可通过音/视频、图片以及文字等方式进行标记和指导，从而更加直观、精确、高效的完成运维操作，可视化度高，交互性佳。交互性佳。交互性佳。

【技术实现步骤摘要】
基于增强现实设备的跨终端设备数据通信系统


[0001]本专利技术涉及增强现实
，具体涉及一种基于增强现实设备的跨终端设备数据通信系统。

技术介绍

[0002]近年来，设备制造商之间的合作不断加强，如国产C919飞机研制的公司有70多家参与，超过40％的零部件靠进口，且这类复杂装备的维护维修要求高，专家现场指导越来越难，成本不断增加，这给设备制造商和用户都提出了很多的挑战。
[0003]增强可视化技术利用虚实融合可以实现作业场景动态感知及信息立体呈现，在远程运维方面具有显著优势，具有很大的应用潜力。操作者通过增强现实设备可以与远处专家进行沟通，远程协作轻松解决现场故障，但是操作现场情况复杂，特别是狭小空间下的维修维护，操作者头戴增强现实设备进行操作的可达性、可视性、可操作性以及舒适性难以满足，导致远程运维效果不佳，跨终端设备交互手段弱。具体体现在运维操作不直观、精确度低、效率低，可视化度低，交互弱。
[0004]鉴于此，亟需提供一种基于增强现实设备的跨终端设备数据通信方案，解决现场运维可视化通信、标记与指导。

技术实现思路

[0005](一)解决的技术问题
[0006]针对现有技术的不足，本专利技术提供了一种基于增强现实设备的跨终端设备数据通信系统，解决了跨终端设备交互手段弱的问题。
[0007](二)技术方案
[0008]为实现以上目的，本专利技术通过以下技术方案予以实现：
[0009]一种基于增强现实设备的跨终端设备数据通信系统，所述系统包括增强现实设备、数据中心和智能设备终端；
[0010]所述增强现实设备使用增强现实眼镜采集音/视频信息，发送音/视频、文件、文字信息，接收智能设备终端的音/视频、文字、图片及文件信息；
[0011]所述数据中心用于接收增强现实设备和智能设备终端之间的交互数据，并对交互数据进行解析、处理、存储和传输；
[0012]所述智能设备终端通过接收数据中心传输的交互数据，能够实时的可视化增强现实设备数据，并对其进行标记，实现专家远程的运维诊断与维修指导。
[0013]优选的，所述数据中心采用键
‑
值对的形式，存储所有客户端的网络地址信息，其中，主键为智能设备终端ID，值为智能设备终端的网络地址，包含IP、TCP端口以及UDP端口。
[0014]优选的，所述音/视频信息的传输采用UDP协议，包括以下步骤：
[0015]S101：发送方向数据中心发送请求接收方的网络地址信息的数据报；
[0016]S102：数据中心通知接收方有关发送方的视频帧的发送请求数据报；
[0017]S103：接收方接收到该请求后，向发送方发送确认的数据报。
[0018]S104：发送方根据接收方的确认数据报中的网络地址信息，开始向接收方传输视频帧数据。
[0019]优选的，所述音/视频信息的传输采用自动分片的方法，将原先待传输的数据划分成一个个的小块，使用时间戳进行标记，对每一块进行编号并传输。
[0020]优选的，所述智能设备终端通过登录数据中心来实现网络地址信息的注册。
[0021]优选的，所述文字、图片及文件信息的传输采用TCP协议，数据中心分别同发送方与接收方建立TCP数据通道，负责接收发送方的字节流，转发给接收方。
[0022]优选的，所述文字、图片与文件传输包括数据的发送、数据的转发和数据的接收，其中数据的发送在发送端上进行，数据的转发在数据中心上进行，数据的接收在接收端上进行；
[0023]所述文字、图片和文件数据的发送主要包括以下步骤：
[0024]S200：获取需要发送的文字与文件数据；
[0025]S201：将待发送数据进行封装；
[0026]S202：将封装后的数据通过TCP端口发送至数据中心；
[0027]所述文字、图片和文件数据的转发主要包括以下步骤：
[0028]S300：数据中心获取发送端发送的数据；
[0029]S301：将数据进行解封；
[0030]S302：根据解封后数据信息，根据数据中接收端客户端的ID信息，查找服务器中保存的对应的IP地址和端口号，将数据重新对应封装；
[0031]S303：将封装完毕的数据写入数据中心的TCP发送端口，发送至文字、图片与文件传输的接收端；
[0032]所述文字、图片和文件数据的接收主要包括以下步骤：
[0033]S400：接收端监听发送端TCP端口，获取数据中心发送的数据；
[0034]S401：将数据进行解封；
[0035]S402：根据解封后的数据信息，执行对应操作，将接收到的数据进行保存。
[0036]优选的，所述音/视频信息的传输主要包括：音/视频的发送请求、请求转发、请求接收、数据的发送和数据的接收；其中音/视频的发送请求和数据的发送在发送端上进行，请求转发在数据中心上进行，请求接收和数据的接收在接收端上进行；
[0037]所述音/视频的发送请求主要包括以下步骤：
[0038]S500：封装音频与视频的发送请求；
[0039]S501：将请求进行封装，并将封装后的请求通过UDP端口发送至数据中心，其中请求类型为“query”；
[0040]S502：开启发送端的UDP端口监听；
[0041]所述音/视频的请求转发主要包括以下步骤：
[0042]S600：数据中心监听UDP端口，获取发送端的数据；
[0043]S601：将数据进行解封；
[0044]S602：根据解封后数据信息，查找数据中心对应接收端的IP地址和端口号，对请求重新封装，其中请求类型为“inform”；
[0045]S603：将封装完毕的数据写入数据中心的UDP发送端口，发送至接收端；
[0046]所述音/视频的请求接收主要包括以下步骤：
[0047]S700：接收端监听UDP端口，获取数据中心的数据；
[0048]S701：将数据进行解封；
[0049]S702：根据解封后的数据信息，获取发送端的IP地址和端口，同时将相应的数据进行封装，其中请求类型为“Accept”；
[0050]S703：将封装后的数据写入接收端的UDP端口，发送至数据中心；
[0051]所述音/视频的数据的发送主要包括以下步骤：
[0052]S800：发送端监听UDP端口，获取到接收端发送的数据；
[0053]S801：将数据进行解封；
[0054]S802：根据解封后的数据信信息，执行对应操作，将待发送的音/视频数据进行封装，其中智能设备终端发送音频的数据类型为“voice”，增强现实设备发送音频的数据类型为“voice_Holo”，智能设备终端和增强现实设备的视频数据类型均为“movie”；
[0055]S803：将封装后的数据写入发送端的UDP端口，发送至音/视频接收端；
[0056本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述系统包括增强现实设备、数据中心和智能设备终端；所述增强现实设备使用增强现实眼镜采集音/视频信息，发送音/视频、文件、文字信息，接收智能设备终端的音/视频、文字、图片及文件信息；所述数据中心用于接收增强现实设备和智能设备终端之间的交互数据，并对交互数据进行解析、处理、存储和传输；所述智能设备终端通过接收数据中心传输的交互数据，能够实时的可视化增强现实设备数据，并对其进行标记，实现专家远程的运维诊断与维修指导。2.如权利要求1所述的基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述数据中心采用键
‑
值对的形式，存储所有客户端的网络地址信息，其中，主键为智能设备终端ID，值为智能设备终端的网络地址，包含IP、TCP端口以及UDP端口。3.如权利要求1所述的基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述音/视频信息的传输采用UDP协议，包括以下步骤：S101：发送方向数据中心发送请求接收方的网络地址信息的数据报；S102：数据中心通知接收方有关发送方的视频帧的发送请求数据报；S103：接收方接收到该请求后，向发送方发送确认的数据报；S104：发送方根据接收方的确认数据报中的网络地址信息，开始向接收方传输视频帧数据。4.如权利要求1所述的基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述音/视频信息的传输采用自动分片的方法，将原先待传输的数据划分成一个个的小块，使用时间戳进行标记，对每一块进行编号并传输。5.如权利要求1所述的基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述智能设备终端通过登录数据中心来实现网络地址信息的注册。6.如权利要求1所述的基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述文字、图片及文件信息的传输采用TCP协议，数据中心分别同发送方与接收方建立TCP数据通道，负责接收发送方的字节流，转发给接收方。7.如权利要求1所述的基于增强现实设备的跨终端设备数据通信系统，其特征在于，所述文字、图片与文件传输包括数据的发送、数据的转发和数据的接收，其中数据的发送在发送端上进行，数据的转发在数据中心上进行，数据的接收在接收端上进行；所述文字、图片和文件数据的发送主要包括以下步骤：S200：获取需要发送的文字与文件数据；S201：将待发送数据进行封装；S202：将封装后的数据通过TCP端口发送至数据中心；所述文字、图片和文件数据的转发主要包括以下步骤：S300：数据中心获取发送端发送的数据；S301：将数据进行解封；S3...

【专利技术属性】
技术研发人员：张红旗，郭磊，吴钱昊，程五四，谢伶俐，田富君，周红桥，
申请(专利权)人：中国电子科技集团公司第三十八研究所，
类型：发明
国别省市：