当前位置: 首页 > 专利查询>苹果公司专利>正文

使用多个相机的扩展视场制造技术

技术编号:41240254 阅读:24 留言:0更新日期:2024-05-09 23:52
用于使用设备的多个相机提供扩展视场(FoV)的方法和装置。一种设备可包括捕获环境的视图的前置相机以及捕获更广角度视图的侧面相机。可处理来自该前置相机和该侧面相机的图像以提供具有扩展FoV的环境的立体视图。处理来自该前置相机的图像以提供立体图像,并根据该立体图像生成深度信息。将该深度信息扩展到第二层中,并为第三层设置中值深度。使该侧面相机图像不失真,然后将来自该侧面相机图像的像素信息重新投影到该第二层和该第三层中,并且对该第二层和该第三层进行模糊处理。

【技术实现步骤摘要】
【国外来华专利技术】


技术介绍

1、扩展现实(xr)系统诸如混合现实(mr)或增强现实(ar)系统将计算机生成的信息(称为虚拟内容)与真实世界图像或真实世界视图相结合,以增强或增加用户对世界的认识。因此,可利用xr系统为多个应用提供交互式用户体验,诸如将虚拟内容添加到观看者所处环境的实时视图中的应用、与虚拟训练环境交互的应用、游戏应用、远程控制无人机或其他机械系统的应用、观看数字媒体内容的应用、与因特网交互的应用等。

2、一些设备可包括捕获设备前方的环境的图像或视频的前向相机。这些图像或视频流可被组合并渲染以通过显示器提供环境的立体视图。然而,这些系统的视场(fov)限于前向相机的fov。


技术实现思路

1、描述了用于使用设备或系统的多个相机提供扩展视场(fov)的方法和装置的实施方案。一种设备可包括捕获设备前方的环境的图像或视频的前向相机。这些图像或视频流可被组合并渲染以通过显示器提供环境的立体视图。然而,这些系统的视场(fov)限于前向相机的fov。实施方案可使用来自设备或系统的一个或多个其他相机的输入来扩展设备本文档来自技高网...

【技术保护点】

1.一种系统,包括:

2.根据权利要求1所述的系统,其中为了将所述深度信息从所述一个或多个第一图像的一个或多个边缘向外扩展以生成扩展区,所述一个或多个处理器被配置为:

3.根据权利要求2所述的系统,其中根据所述一个或多个第一图像的内容动态地确定所述第一距离和所述第二距离。

4.根据权利要求2所述的系统,其中为了将所述深度信息从所述一个或多个第一图像的所述一个或多个边缘向外扩展第一距离以生成第二层,其中所述一个或多个第一图像是第一层,所述深度信息在图像修复步骤中扩展,其中来自所述深度图的所述边缘的深度信息远离所述深度图的中心以行和列方式向外传播。

...

【技术特征摘要】
【国外来华专利技术】

1.一种系统,包括:

2.根据权利要求1所述的系统,其中为了将所述深度信息从所述一个或多个第一图像的一个或多个边缘向外扩展以生成扩展区,所述一个或多个处理器被配置为:

3.根据权利要求2所述的系统,其中根据所述一个或多个第一图像的内容动态地确定所述第一距离和所述第二距离。

4.根据权利要求2所述的系统,其中为了将所述深度信息从所述一个或多个第一图像的所述一个或多个边缘向外扩展第一距离以生成第二层,其中所述一个或多个第一图像是第一层,所述深度信息在图像修复步骤中扩展,其中来自所述深度图的所述边缘的深度信息远离所述深度图的中心以行和列方式向外传播。

5.根据权利要求1所述的系统,其中所述一个或多个处理器被配置为在所述重新投影之前使所述一个或多个第二图像不失真。

6.根据权利要求1所述的系统,其中所述一个或多个处理器被配置为对所述扩展区进行模糊处理。

7.根据权利要求1所述的系统,其中所述一个或多个主相机包括设备上的两个前置相机,所述两个前置相机提供所述场景的立体图像,并且其中所述一个或多个次相机包括所述设备的至少两个侧上的至少一个相机。

8.根据权利要求7所述的系统,其中所述设备是头戴式设备(hmd),并且其中所述一个或多个处理器被配置为将所述扩展fov图像提供给所述hmd的显示面板以显示给用户。

9.根据权利要求7所述的系统,其中所述设备的所述至少两个侧上的所述相机包括与所述两个前置相机相比的更宽fov相机。

10.根据权利要求7所述的系统,其中由所述设备的第一侧上的...

【专利技术属性】
技术研发人员:K·伯格D·C·莱列斯库T·里克
申请(专利权)人:苹果公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1