捕获和编辑动态深度图像的技术制造技术

本文描述的实施方式涉及一种计算机实现的方法，该方法包括使用一个或多个相机捕获图像数据，其中，图像数据包括主图像和相关联的深度值。该方法进一步包括以图像格式对图像数据进行编码。所编码的图像数据包括以图像格式编码的主图像和图像元数据，该图像元数据包括设备元素，该设备元素包括指示图像类型的简档元素和第一相机元素，其中，第一相机元素包括图像元素和基于深度值的深度图。该方法进一步包括在编码之后，基于图像格式将图像数据存储在文件容器中。该方法进一步包括使主图像被显示。

【技术实现步骤摘要】
【国外来华专利技术】捕获和编辑动态深度图像的技术相关申请本申请要求于2019年4月1日提交的美国临时申请No.62/827,739的优先权的权益，其通过引用整体并入本文。
技术介绍
用户使用各种设备——例如，移动电话、可穿戴设备、智能电器、智能扬声器、平板电脑、计算机、独立相机等——来捕获图像。许多设备能够捕获具有增强信息的图像。例如，用户可以捕获静止图像和与静止图像中描绘的场景相关联的深度信息。在另一示例中，用户可以捕获静止图像以及该静止图像的一个或多个替代表示，例如，包括多个图像帧的突发模式图像。在又一示例中，用户可以捕获具有少量运动的图像，例如，在其期间相机被激活的0-3秒的短时段内捕获的运动。在又一个示例中，用户可以例如通过在捕获图像之前将对象插入场景来用虚拟对象来增强场景，从而获得增强现实(AR)图像。用户可以使用不同类型的设备——例如，移动电话、可穿戴设备、智能电器、智能扬声器、平板电脑、计算机、独立相机等——查看或编辑图像。不同的设备可以具有不同的图像显示能力，例如，二维或三维显示。用于图像编辑的不同软件应用可以包括不同的特征，例如，肖像效果(其中被标识为本文档来自技高网...

【技术保护点】
1.一种计算机实现的方法，包括：/n使用一个或多个相机捕获图像数据，其中，所述图像数据包括主图像和相关联的深度值；/n以图像格式对所述图像数据进行编码，其中，所编码的图像数据包括：/n以所述图像格式编码的所述主图像；以及/n图像元数据，所述图像元数据包括：/n设备元素，所述设备元素包括指示图像类型的简档元素；和/n第一相机元素，其中，所述第一相机元素包括图像元素和基于所述深度值的深度图；/n在所述编码之后，基于所述图像格式来将所述图像数据存储在文件容器中；以及/n使所述主图像被显示。/n

【技术特征摘要】
【国外来华专利技术】20190401 US 62/827,7391.一种计算机实现的方法，包括：
使用一个或多个相机捕获图像数据，其中，所述图像数据包括主图像和相关联的深度值；
以图像格式对所述图像数据进行编码，其中，所编码的图像数据包括：
以所述图像格式编码的所述主图像；以及
图像元数据，所述图像元数据包括：
设备元素，所述设备元素包括指示图像类型的简档元素；和
第一相机元素，其中，所述第一相机元素包括图像元素和基于所述深度值的深度图；
在所述编码之后，基于所述图像格式来将所述图像数据存储在文件容器中；以及
使所述主图像被显示。


2.根据权利要求1所述的计算机实现的方法，其中，所述深度图包括多个像素值，每个像素值指示距所述一个或多个相机中的特定相机的相应距离。


3.根据权利要求2所述的计算机实现的方法，其中，所述深度图进一步包括镜头焦点模型，所述镜头焦点模型定义与距所述特定相机的多个距离相对应的弥散圆的相应半径值。


4.根据权利要求3所述的计算机实现的方法，其中，所述多个距离包括近距离和远距离，其中所述近距离小于所述远距离。


5.根据权利要求4所述的计算机实现的方法，其中，所述多个距离进一步包括大于所述近距离且小于所述远距离的焦距。


6.根据权利要求2至5中的任一项所述的计算机实现的方法，进一步包括通过将所述深度值转换成整数格式并基于所述图像格式来压缩所转换的深度值来获得所述多个像素值。


7.根据权利要求2至6中的任一项所述的计算机实现的方法，其中，所述图像数据进一步包括一个或多个辅图像，其中，每个辅图像由与所述特定相机不同的所述一个或多个相机中的相应相机捕获。


8.根据权利要求7所述的计算机实现的方法，其中：
所述图像元数据进一步包括一个或多个附加的相机元素，其中，每个附加的相机元素对应于所述一个或多个辅图像中的至少一个图像并且包括相应的图像元素，所述相应的图像元素包括指向所述至少一个图像的指针，其中，所述一个或多个附加的相机元素在所述图像元数据中在所述第一相机元素之后被顺序地组织，并且
其中，将所述图像数据存储在所述文件容器中包括将以所述图像格式编码的所述主图像和所述一个或多个辅图像连结，其中，所述文件容器中的所述主图像和所述一个或多个辅图像的顺序与所述图像元数据中的所述一个或多个附加的相机元素的顺序相同。


9.根据权利要求1至6中的任一项所述的计算机实现的方法，其中，所述图像数据进一步包括一个或多个辅图像，所述一个或多个辅图像中的每一个由所述一个或多个相机中的相应相机捕获。


10.根据权利要求9所述的计算机实现的方法，其中，所述一个或多个辅图像包括由深度相机捕获的深度图像或视频。


11.一种计算机实现的方法，包括：
从文件容器获得图像数据，所述图像数据包括与主图像相对应的多个像素值以及包括镜头焦点模型的图像元数据；
使所述主图像被显示；
接收指示目标焦距的用户输入；
响应于所述用户输入，基于所述镜头焦距模型来修改所述主图像的一个或多个像素值以获得修改后的图像，其中，所述修改后的图像中在所述目标焦距处的对象处于对焦中；以及
使所述修改后的图像被显示。


12.根据权利要求11所述的计算机实现的方法，其中，所述镜头焦点模型定义与距捕获所述主图像的相机的多个距离相对应的弥散圆的相应半径值，并且其中，修改所述一个或多个像素值使所述主图像中的一个或多个对象...

【专利技术属性】
技术研发人员：米拉·勒翁，史蒂夫·佩里，法尔斯·阿尔哈森，阿柏·斯蒂芬斯，尼尔·瓦德瓦，
申请(专利权)人：谷歌有限责任公司，
类型：发明
国别省市：美国;US