当前位置: 首页 > 专利查询>辉达公司专利>正文

用于车辆环境可视化的优化可视化流式传输制造技术

技术编号:41382964 阅读:21 留言:0更新日期:2024-05-20 10:24
在各个示例中,传感器数据可由诸如在物理环境中行驶的车辆之类的自我对象的传感器捕获,并且传感器数据的表示可从自我对象流式传输到远程位置以促进各种远程体验,诸如流式传输到远程观看者(例如,朋友或亲戚)、流式传输到远程或车队操作者、流式传输到经配置以自停或召唤自我对象的移动应用、渲染物理环境的3D增强现实(AR)或虚拟现实(VR)表示,和/或其他。在一些实施例中,流包括用于控制数据收集、渲染、流内容或甚至车辆机动的一个或更多个命令信道,诸如在紧急情况、自停或召唤情境期间。

【技术实现步骤摘要】
【国外来华专利技术】


技术介绍

1、车辆环视系统(vehicle surround view systems)为车辆的占用者提供车辆周围区域的可视化。对于驾驶员而言,环视系统(surround view systems)为驾驶员提供观察周围区域的能力,而不需要重新定位(例如,转动他们的头部、离开驾驶员的座椅、倾斜某个方向等),所述周围区域包括盲点,在盲点处,驾驶员的视线被车辆的部分或环境中的其他对象遮挡。该可视化可辅助和促进各种驾驶操纵,诸如平滑地进入或离开停车点,而不撞击易受攻击的道路用户,诸如行人或诸如路缘或其他车辆之类的对象。越来越多的车辆,特别是豪华品牌或新车型,正在生产配备有环视系统。

2、现有的车辆环视系统通常利用鱼眼相机——通常安装在车身的前侧、左侧、后侧和右侧)——从多个方向感知周围区域。在特殊情况下,如长卡车或带拖车的车辆,可能会包括额外的相机。使用相机参数对齐帧并且使用混合技术组合重叠区域以提供水平360°环视可视化,将来自各个相机的帧拼接在一起。

3、由于噪声或各种白平衡配置,在两个图像被拼接在一起的地方可出现明显的接缝。虽然可使本文档来自技高网...

【技术保护点】

1.一种方法,包括:

2.如权利要求1所述的方法,其中对于一个或更多个时间切片中的至少一个时间切片,表示所述物理环境的所述数据流包括:所述物理环境的投影或拼接图像、所述物理环境的三维(3D)模型、或使用所述3D模型生成的环绕视图可视化。

3.如权利要求1所述的方法,其中所述自我对象是车辆,所述远程设备由远程车队操作者操作,并且由所述远程设备接收到的表示所述物理环境的所述数据流包括来自所述车辆外部的第一视频馈送和来自所述车辆的舱室内部的第二视频馈送。

4.如权利要求1所述的方法,其中来自所述远程设备的所述远程命令指定视窗,并且对于一个或更多个时间切片中的...

【技术特征摘要】
【国外来华专利技术】

1.一种方法,包括:

2.如权利要求1所述的方法,其中对于一个或更多个时间切片中的至少一个时间切片,表示所述物理环境的所述数据流包括:所述物理环境的投影或拼接图像、所述物理环境的三维(3d)模型、或使用所述3d模型生成的环绕视图可视化。

3.如权利要求1所述的方法,其中所述自我对象是车辆,所述远程设备由远程车队操作者操作,并且由所述远程设备接收到的表示所述物理环境的所述数据流包括来自所述车辆外部的第一视频馈送和来自所述车辆的舱室内部的第二视频馈送。

4.如权利要求1所述的方法,其中来自所述远程设备的所述远程命令指定视窗,并且对于一个或更多个时间切片中的至少一个时间切片,表示所述物理环境的所述数据流包括:使用由所述远程命令指定的所述视窗由所述自我对象生成的所述物理环境的环绕视图可视化。

5.如权利要求1所述的方法,其中表示所述物理环境的所述数据流包括由所述自我对象朝向一方向操纵的定向音频:i)所述方向与由所述自我对象在所述物理环境中检测的显著事件相关联,或ii)所述方向由所述远程命令指定。

6.如权利要求1所述的方法,其中由所述远程设备接收到的表示所述物理环境的所述数据流包括由所述自我对象渲染的、由所述自我对象捕获的lidar或radar数据的投影的视图。

7.如权利要求1所述的方法,其中表示所述物理环境的所述数据流包括通过视窗渲染的所述环境的可视化,所述视窗被定向成观看由所述自我对象在所述物理环境中检测到的显著事件。

8.如权利要求1所述的方法,其中表示所述物理环境的所述数据流的所述可视化包括在所述远程设备上被渲染的所述物理环境的三维增强现实或虚拟现实表示。

9.如权利要求1所述的方法,其中所述远程命令是召唤所述自我对象或者指示所述自我对象自停的命令,并且表示所述物理环境的所述数据流包括由所述自我对象在响应于所述远程命令而进行自操纵时生成的视频馈送。

10.如权利要求1所述的方法,其中所述方法由以下各项中的至少一个执行:用于自主或半自主机器的控制系统;用于自主或半自主机器的感知系统;用于执行模拟操作的系统;用于执行数字孪生操作的系统;用于执行光传输模拟的系统;用于执行3d资产的协作内容创建的系统;用于执行深度学习操作的系统;用于执行实时流式传输的系统;用于呈现增强现实内容、虚拟现实内容或混合现实内容中的一个或更多个的系统;使用边缘设备实现的系统;使用机器人实现的系统;用于执行会话ai操作的系统;用于生成合成数据的系统;结合一个或更多个虚拟机(vm)的系统;至少部分地在数据中心中实现的系统;或至少部分地使用云计算资源实现的系统。

11.一种处理器,包括:一个或更多个电路,所述一个或更多个电路用于:

12.如权利要求11所述的处理器,其中所述流进一步包括由所述自我对象朝向一方向操纵的定向音频:i)所述方向与由所述自我对象在所述物理环境...

【专利技术属性】
技术研发人员:N·阿瓦达南R·库马尔
申请(专利权)人:辉达公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1