一种多机位低延时视频回传及切换方法与系统技术方案

本申请涉及一种多机位低延时视频回传及切换方法与系统，属于视频流处理技术领域，方法通过视频采集终端获取多机位视频画面并对多机位视频画面进行多机位视频编码及编组，并将编组获得的视频流数据多径传输至视频流服务器；视频流服务器动态缓存视频流数据并生成对应的映射时序ID，根据时序ID创建访问接口；驾驶舱的运算单元通过访问接口从视频服务器中获取视频流数据，对视频流数据进行解码和拼接处理，形成对应完整的视频信息后进行显示。本申请方案能在非视距远程遥控驾驶时，提高了多机位低延时视频回传的实时性及视频画面切换效率，保证了非视距远程遥控驾驶作业画面的流畅性，提高了非视距远程遥控驾驶的体验。提高了非视距远程遥控驾驶的体验。提高了非视距远程遥控驾驶的体验。

【技术实现步骤摘要】
一种多机位低延时视频回传及切换方法与系统


[0001]本申请属于视频流处理
，具体涉及一种多机位低延时视频回传及切换方法与系统。

技术介绍

[0002]冶金是指开采、精选、烧结金属矿石并对其进行冶炼、加工成金属材料。因其行业的特殊性，工作场景内部作业面上，多为人工驾驶特种工程机械车辆，在此类特殊工况下进行危险性较大的工作。比如炉下清渣、煤场归堆、焦化沥青处理、船底清舱等，工作环境均存在高粉尘、热辐射、有毒有害气体、强酸强腐蚀、视野受限及人身伤害等诸多作业问题。目前为了很好的应对此类作业面内无人化应用的问题，开发了非视距远程联控系统进行非视距远程遥控驾驶作业，可以实现将人工从作业面撤离并且保持原有工作效率，实现减员增效目的。但在目前非视距远程遥控驾驶过程中，多个工程车辆视频回传的实时性较差，且在工程车辆较多时，如两辆及两辆以上的工程车辆进行视频画面切换时，切换效率不高，非视距远程遥控驾驶作业画面的流畅性较差。

技术实现思路

[0003]为此，本申请提供一种多机位低延时视频回传及切换方法与系统，有助于帮助解决目前工程车辆作业时存在视频回传实时性较差，且视频画面切换效率不高，作业画面的流畅性较差的问题。
[0004]为实现以上目的，本申请采用如下技术方案：
[0005]第一方面，本申请提供一种多机位低延时视频回传及切换方法，包括：
[0006]视频采集终端获取多机位视频画面并对多机位视频画面进行多机位视频编码及编组，并将编组获得的视频流数据多径传输至视频流服务器；
[0007]视频流服务器动态缓存视频流数据并生成对应的映射时序ID，根据时序ID创建访问接口；
[0008]遥控驾驶舱的运算单元通过访问接口从视频服务器中获取视频流数据，对视频流数据进行解码和拼接处理，形成对应完整的视频信息后进行显示。
[0009]进一步地，所述视频采集终端获取多机位视频画面并对多机位视频画面进行多机位视频编码及编组具体包括：
[0010]视频采集终端并通过高清串行视频信号接口获取设置在多辆工程机械车辆上的高清摄像头采集工程机械车辆作业视频画面形成的多机位视频画面，采用H.265编码方式对多机位视频画面进行图像压缩编码，形成视频流数据；通过编组操作对视频流数据进行编组操作；其中，多机位视频画面为6个高清串行视频信号。
[0011]进一步地，所述将编组获得的视频流数据多径传输至视频流服务器具体包括：编组完成后，视频采集终端重构RTP/RTCP协议，并通过重构的RTP/RTCP协议与视频服务器之间建立多机位链路通信形成多径传输途径，通过多径传输途径将编组后的视频流数据以视
频推流的方式传输至视频服务器；编组操作采用作业区域+公司名称+车辆编号+高清摄像头的机位的格式进行编组
[0012]进一步地，所述重构RTP/RTCP协议过程具体包括：配置RTP协议采用UDP通信方式，RTCP采用TCP通信方式；在应用层定制RTCP协议，以SR报文为主要通信报文方式，利用TCP协议的应答机制建立RTCP协议的同步控制协议数据单元；RTCP协议通过同步控制协议数据单元与RTP协议建立握手连接机制，对RTP协议传输的多媒体数据流进行同步/控制，在RTCP协议的数据包与RTP协议的数据包之间建立一一对应关系。
[0013]进一步地，所述多径传输途径为网络传输途径，包括WIFI网络、无线MESH网络和4G/5G网络。
[0014]进一步地，所述视频流服务器动态缓存视频流数据并生成对应的映射时序ID，根据时序ID创建访问接口具体包括：视频服务器采用循环链表的方式对每个视频推流传输的视频流数据进行数据缓存和数据循环覆盖，并生成视频流数据对应的映射时序ID；视频服务器根据映射时序ID建立链接访问通道，同时对连接访问通道进行MD5加密，生成视频服务器的API链接访问接口。
[0015]进一步地，所述驾驶舱的运算单元通过访问接口从视频服务器中获取视频流数据，对视频流数据进行解码和拼接处理，形成对应完整的视频信息后进行显示具体包括：通过驾驶舱的运算单元通过API链接访问接口从视频服务器读取视频流数据，通过NVDEC接口对视频流数据进行硬件解码，获取完整的多机位视频画面信息；对多机位视频画面信息进行图像畸变校正，获得纠偏后的多机位视频画面信息后对其进行图像旋转、裁剪及拼接处理，形成对应完整的视频信息；最后通过显示设备播放显示拼接处理后的视频信息。
[0016]第二方面，本申请提供了一种多机位低延时视频回传及切换系统，应用于第一方面提供的一种多机位低延时视频回传及切换方法，系统包括：
[0017]高清摄像头、视频采集终端、网络通信设备、视频流服务器和运算单元；
[0018]所述高清摄像头与视频采集终端连接，用于采集多辆工程机械车辆作业时的多机位视频画面；
[0019]所述视频采集终端与网络通信设备连接，用于接收高清摄像头采集的多机位视频画面并进行多机位视频编码及编组操作；
[0020]所述网络通信设备用于与视频服务器之间建立多机位链路通信，并将编组获得的视频流数据传输至视频服务器；
[0021]所述视频服务器用于动态缓存视频流数据并生成对应的映射时序ID，同时根据时序ID创建访问接口；
[0022]所述运算单元通过访问接口与视频服务器通信，用于从视频服务器中获取视频流数据，对视频流数据进行解码和拼接处理，形成对应完整的视频信息后进行显示。
[0023]本申请采用以上技术方案，至少具备以下有益效果：
[0024]通过本申请提供的多机位低延时视频回传及切换方法，方法通过视频采集终端获取多机位视频画面，并对多机位视频画面进行多机位视频编码及编组，将编组获得的视频流数据多径传输至视频流服务器；视频流服务器动态缓存视频流数据并生成对应的映射时序ID，根据时序ID创建访问接口；驾驶舱的运算单元通过访问接口从视频服务器中获取视频流数据，对视频流数据进行解码和拼接处理，形成对应完整的视频信息后进行显示。通过
上述方法流程，将编组处理后的视频流数据以多径传输的方式上传到视频服务器，实现多机位链路通信，提高了视频服务器获取多机位低延时视频回传的实时性，同时在两辆及两辆以上工程车辆的视频画面切换效率更高，保证了非视距远程遥控驾驶作业画面的流畅性，提高了非视距远程遥控驾驶的体验。同时视频流服务器动态缓存视频流数据并生成对应的映射时序ID，根据时序ID创建访问接口，运算单元通过访问接口来获取视频流数据，提高了数据通信的安全性。
[0025]应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。
附图说明
[0026]为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0027本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种多机位低延时视频回传及切换方法，其特征在于，包括：视频采集终端获取多机位视频画面并对多机位视频画面进行多机位视频编码及编组，并将编组获得的视频流数据多径传输至视频流服务器；视频流服务器动态缓存视频流数据并生成对应的映射时序ID，根据时序ID创建访问接口；驾驶舱的运算单元通过访问接口从视频服务器中获取视频流数据，对视频流数据进行解码和拼接处理，形成对应完整的视频信息后进行显示。2.根据权利要求1所述的一种多机位低延时视频回传及切换方法，其特征在于，所述视频采集终端获取多机位视频画面并对多机位视频画面进行多机位视频编码及编组具体包括：视频采集终端并通过高清串行视频信号接口获取设置在多辆工程机械车辆上的高清摄像头采集工程机械车辆作业视频画面形成的多机位视频画面，采用H.265编码方式对多机位视频画面进行图像压缩编码，形成视频流数据；通过编组操作对视频流数据进行编组操作；其中，多机位视频画面为6个高清串行视频信号。3.根据权利要求1所述的一种多机位低延时视频回传及切换方法，其特征在于，所述将编组获得的视频流数据多径传输至视频流服务器具体包括：编组完成后，视频采集终端重构RTP/RTCP协议，并通过重构的RTP/RTCP协议与视频服务器之间建立多机位链路通信形成多径传输途径，通过多径传输途径将编组后的视频流数据以视频推流的方式传输至视频服务器；编组操作采用作业区域+公司名称+车辆编号+高清摄像头的机位的格式进行编组。4.根据权利要求3所述的一种多机位低延时视频回传及切换方法，其特征在于，所述重构RTP/RTCP协议过程具体包括：配置RTP协议采用UDP通信方式，RTCP采用TCP通信方式；在应用层定制RTCP协议，以SR报文为主要通信报文方式，利用TCP协议的应答机制建立RTCP协议的同步控制协议数据单元；RTCP协议通过同步控制协议数据单元与RTP协议建立握手连接机制，对RTP协议传输的多媒体数据流进行同步/控制，在RTCP协议的数据包与RTP协议的数据包之间建立起一一对应关系。5.根据权利要求3所述的一种多机位低延时视频回传及切换方法，...

【专利技术属性】
技术研发人员：祝亚运，张浩，
申请(专利权)人：广东锰玛智行科技有限公司，
类型：发明
国别省市：