The system includes a processor for capturing the first image of a scene through the first imaging device of the imaging device array, capturing the second image of the scene through the second imaging device of the imaging device array, performing image analysis of the first image and the second image, and determining that an object exists in the first image and that the object exists in the first image. In two images, the first image represents the first perspective of the object, and the second image represents the second perspective of the object different from the first perspective of the object. The object is classified using a classification based on a list of known objects, and the object part of the first image and the object part of the second image are weighted based on the classification. In the weighted compression of the first image and the second image, the first image and the second image are coded into multi-view image data, and the multi-view image data are stored in the non-transient computer readable medium based on the classification.
【技术实现步骤摘要】
【国外来华专利技术】多视角成像系统和方法相关申请的交叉引用本申请与2016年9月23日提交的名称为“MULTI-PERSPECTIVEIMAGINGSYSTEMANDMETHOD”的美国专利申请62/398,678相关,并且根据35U.S.C.§119(e)的规定要求该美国专利申请的优先权,该专利申请的全部内容均以引用方式并入本文以用于所有目的。
所描述的实施方案整体涉及从多个视角捕获和处理场景的图像的多视角成像系统。多视角成像系统可包含在车辆内。
技术介绍
常规来讲,车载相机是有限的设备,其可以安装在车辆的仪表板上以记录车辆外部的视图。然而,这些相机具有有限的视角、视场和分辨率。此外,它们可能会阻碍驾驶室的视野并且存储空间有限。通过车辆乘客的手持设备获得的车辆外部视图的图像可能是不合适且失焦的。简而言之,基于车辆的成像将受益于许多改进。
技术实现思路
一种系统包括用于执行图像捕获应用的处理器。图像捕获应用可从成像设备阵列接收图像,每个图像在大致相同的时间描绘对象的不同视角。图像捕获应用可对对象的图像进行分类和加权,并基于分类和/或权重来存储对象的图像。图像捕获应用可由计算设备执行,该计算设备捕获来自在车辆外部以特定布置进行布置的成像设备阵列的图像。根据一个实施方案,一种系统包括成像设备阵列、处理器和存储指令的非暂态计算机可读介质,当所述指令由处理器执行时,使处理器执行操作,包括:通过成像设备阵列的第一成像设备捕获场景的第一图像,通过成像设备阵列的第二成像设备捕获场景的第二图像,执行第一图像和第二图像的图像分析并确定第一图像中存在对象并且该对象存在于第二图像中,第一图像表示对象的 ...
【技术保护点】
1.一种系统,包括:成像设备阵列;处理器;和非暂态计算机可读介质,所述非暂态计算机可读介质存储指令,所述指令在由所述处理器执行时使所述处理器来执行以下操作,包括:通过所述成像设备阵列的第一成像设备捕获场景的第一图像;通过所述成像设备阵列的第二成像设备捕获所述场景的第二图像;执行所述第一图像和所述第二图像的图像分析并确定在所述第一图像中存在对象并且所述对象存在于所述第二图像,所述第一图像表示所述对象的第一视角,并且所述第二图像表示与所述对象的所述第一视角不同的所述对象的第二视角;使用基于已知对象的列表的分类对所述对象进行分类,并且基于所述分类对所述第一图像的对象部分和所述第二图像的对象部分进行加权;基于所述加权压缩所述第一图像和所述第二图像;将所述第一图像和所述第二图像编码为多视角图像数据;以及基于所述加权将所述多视角图像数据存储在所述非暂态计算机可读介质中。
【技术特征摘要】
【国外来华专利技术】2016.09.23 US 62/398,6781.一种系统,包括:成像设备阵列;处理器;和非暂态计算机可读介质,所述非暂态计算机可读介质存储指令,所述指令在由所述处理器执行时使所述处理器来执行以下操作,包括:通过所述成像设备阵列的第一成像设备捕获场景的第一图像;通过所述成像设备阵列的第二成像设备捕获所述场景的第二图像;执行所述第一图像和所述第二图像的图像分析并确定在所述第一图像中存在对象并且所述对象存在于所述第二图像,所述第一图像表示所述对象的第一视角,并且所述第二图像表示与所述对象的所述第一视角不同的所述对象的第二视角;使用基于已知对象的列表的分类对所述对象进行分类,并且基于所述分类对所述第一图像的对象部分和所述第二图像的对象部分进行加权;基于所述加权压缩所述第一图像和所述第二图像;将所述第一图像和所述第二图像编码为多视角图像数据;以及基于所述加权将所述多视角图像数据存储在所述非暂态计算机可读介质中。2.根据权利要求1所述的系统,所述操作还包括:对所述多视角图像数据进行解码并使用所述第一图像和所述第二图像显示所述场景的表示。3.根据权利要求1所述的系统,所述操作还包括:基于所述分类和所述加权中的一者以特定压缩级别压缩所述第一图像和所述第二图像。4.根据权利要求1所述的系统,所述操作还包括:基于所述分类和所述加权中的一者,以特定压缩级别压缩所述第一图像的所述对象部分和所述第二图像的所述对象部分。5.根据权利要求1所述的系统,所述操作还包括:基于所述分类和所述加权中的一者,以第一特定压缩级别压缩所述第一图像的所述对象部分和所述第二图像的所述对象部分,并且以第二特定压缩级别压缩所述第一图像的非对象部分和所述第二图像的非对象部分,所述第一特定压缩级别包括无损压缩级别,并且所述第二特定压缩级别包括有损压缩级别。6.根据权利要求1所述的系统,所述操作还包括:当所述加权不满足特定阈值时丢弃所述第一图像和所述第二图像。7.根据权利要求1所述的系统,所述系统还包括传感器设备,所述操作还包括:使用所述传感器设备确定从所述第一图像设备和所述第二成像设备到所述对象的距离以确定飞行时间;基于所述距离对所述第一图像的所述对象部分和所述第二图像的所述对象部分进行加权;以及基于所述加权压缩所述第一图像和所述第二图像,并且将所述第一图像和所述第二图像编码为所述多视角图像数据。8.根据权利要求1所述的系统,所述系统还包括全球定位系统GPS设备,所述操作还包括:使用所述GPS设备确定所述对象的位置;基于所述对象的所述位置加权所述第一图像的所述对象部分和所述第二图像的所述对象部分;以及基于所述加权压缩所述第一图像和所述第二图像,并且将所述第一图像和所述第二图像编码为所述多视角图像数据。9.根据权利要求1所述的系统,所述操作还包括:基于所述第一图像和所述第二图像确定用于所述对象的双向反射分布函数(BRDF)信息;基于所述BRDF信息对所述第一图像的所述对象部分和所述第二图像的所述对象部分进行加权;以及基于所述加权压缩所述第一图像和所述第二图像,并且将所述第一图像和所述第二图像编码为所述多视角图像数据。10.根据权利要求1所述的系统,所述操作还包括:激活所述成像设备阵列以响应于用户输入开始捕获图像,所述用户输入包括对触摸屏设备和麦克风中的一者的输入。11.根据权利要求1所述的系统,所述操作还包括:激活所述成像设备阵列以响应于用户输入开始捕获图像,所述用户输入包括在触摸屏上做出的手势和口头命令中的一者。12.根据权利要求...
【专利技术属性】
技术研发人员:D·E·波特尔,A·Y·张,
申请(专利权)人:苹果公司,
类型:发明
国别省市:美国,US
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。