一种远程驾驶的视频传输方法、设备及介质技术

本申请公开了一种远程驾驶的视频传输方法、设备及介质，方法包括：通过设置于机器人上方的摄像头矩阵，采集机器人的环境图像序列；将环境图像序列进行拼接及排序，以得到机器人的环境视频；将环境视频进行编码压缩，以得到传输视频；通过推流端将传输视频发送至预部署的视频流服务器；根据接收到的播放请求，通过预先设置的拉流地址以及拉流端，拉取传输视频，进行解码播放。该方法通过将环境图像进行拼接之后再压缩传输，能够降低机器人的网络负担。通过远程驾驶使机器人脱困，从而保障了远程驾驶的安全性。通过服务器存储驾驶过程的全视频，还可用作机器人的强化学习资源以及出现事故的鉴责依据。事故的鉴责依据。事故的鉴责依据。

【技术实现步骤摘要】
一种远程驾驶的视频传输方法、设备及介质


[0001]本申请涉及视频传输领域，具体涉及一种远程驾驶的视频传输方法、设备及介质。

技术介绍

[0002]当前智能驾驶配货机器人在某些极端工作环境下，会出现宕机现象。为解决这种现象，前期可能需要大量各地的工作人员前往事发地点进行救援，费时费力。为减少人工工作量，远程驾驶应用应运而生，可以先由远端客服人员驾驶机器人尝试脱困。实在无法完成的脱困任务再转给人工前往救援，从而有效减少出勤次数。
[0003]现有技术中，远端机器人的环境图像在传输给驾驶人员时，经常会遇到网络卡顿导致的传播速度慢，或是无法多端同时观看环境图像或视频的问题。

技术实现思路

[0004]为了解决上述问题，本申请提出了一种远程驾驶的视频传输方法、设备及介质，其中方法包括：
[0005]通过设置于机器人上方的摄像头矩阵，采集所述机器人的环境图像序列；将所述环境图像序列进行拼接及排序，以得到所述机器人的环境视频；将所述环境视频进行编码压缩，以得到传输视频；通过推流端将所述传输视频发送至预部署的视频流服务器；根据本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种远程驾驶的视频传输方法，其特征在于，所述方法包括：通过设置于机器人上方的摄像头矩阵，采集所述机器人的环境图像序列；将所述环境图像序列进行拼接及排序，以得到所述机器人的环境视频；将所述环境视频进行编码压缩，以得到传输视频；通过推流端将所述传输视频发送至预部署的视频流服务器；根据接收到的播放请求，通过预先设置的拉流地址以及拉流端，拉取所述传输视频，进行解码播放。2.根据权利要求1所述的方法，其特征在于，所述将所述传输视频发送至预部署的视频流服务器之后，所述方法还包括：通过所述视频流服务器将所述传输视频转存至数据库；将所述数据库中的传输视频作为训练集输入至初始脱困模型进行训练，直至所述初始脱困模型的失误率低于预设阈值，以得到所述机器人的自动脱困模型。3.根据权利要求1所述的方法，其特征在于，所述通过推流端将所述传输视频发送至预部署的视频流服务器时，使用基于用户数据报协议的webRTC协议进行视频推送。4.根据权利要求1所述的方法，其特征在于，所述通过推流端将所述传输视频发送至预部署的视频流服务器之前，所述方法还包括：部署视频流服务器，并关闭所述视频流服务器的数据重发机制；设定所述视频流服务器的数据删除时间。5.根据权利要求1所述的方法，其特征在于，所述将所述环境图像序列进行拼接及排序，以得到所述机器人的环境视频，具体包括：将所述环境图像序列中的特定场景移除，并将所述摄像头矩阵中预设摄像头拍摄的场景进行拼接，以得到多个中间图像；按照预设规则，将第一中间图像尺寸缩小，并拼接至第二中间图像的预设区域中；所述预设规则至少包括预设摄像头编号、拼接规则、中间图像划分规则、预设区域坐标。6.根据权利要求1所述的方法，其特征在于，所述根据接收到的播放请求，通过预先设置的拉流地址以及...

【专利技术属性】
技术研发人员：张猛，王本强，谢超，马辰，
申请(专利权)人：山东新一代信息产业技术研究院有限公司，
类型：发明
国别省市：