形成具有感知深度的视频制造技术

一种用于提供具有感知深度的视频的方法，其包括：借助单个透视图像捕获装置捕获场景的视频图像序列；针对所述视频图像序列中的所述视频图像中的每一者确定所述图像捕获装置的相对位置；响应于所述图像捕获装置的所述所确定的相对位置而选择若干对立体视频图像；及基于所述若干对选定立体视频图像形成具有感知深度的视频。

【技术实现步骤摘要】
【国外来华专利技术】
本专利技术涉及一种用于从使用单个透视图像捕获装置所捕获的视频提供具有感知深度的视频的方法。
技术介绍
场景的立体图像一般通过组合具有同一场景的不同透视的两个或两个以上图像来产生。通常，立体图像借助具有分离一距离以提供对场景的不同透视的两个(或两个以上)图像捕获装置的图像捕获装置来同时捕获。然而，此立体图像捕获方法需要具有两个(或两个以上)图像捕获装置的较复杂的图像捕获系统。已提出用于产生立体视频的方法，其中使用单个图像捕获装置来捕获包括视 频图像时间序列的视频，且然后修改所述视频以产生具有感知深度的视频。在颁予N. Cafarell,Jr.的标题为“准立体系统(Quasi-stereoscopic systems) ”的美国专利2，865，988中揭示一种方法，其中从借助单个透视图像捕获装置所捕获的视频提供具有感知深度的视频。具有感知深度的视频通过以下方式产生将视频图像展示给观看者的左眼及右眼，其中展示给左眼的视频图像的定时与展示给右眼的视频图像的定时相差恒定帧偏移，使得一只眼比另一只眼在时间顺序上更早地接收到视频图像。由于相机的位置及场景内的物件的位置一般随时间而变化，因此观看者的大脑将所述时间感知差异解译为深度。然而，由于图像捕获装置及场景中的物件的运动量一般随时间而变化，因此对深度的感知通常不一致。颁予Dasso的标题为“电子三维观看系统(Electronic three-dimensionalviewingsystem) ”的美国专利5，701, 154也从借助单个透视图像捕获装置所捕获的视频提供具有感知深度的视频。所述具有感知深度的视频通过以下方式来产生在呈现给观看者的左眼与右眼的视频之间具有恒定帧偏移(例如，一个帧到五个帧)地将所述视频提供到观看者的左眼及右眼。在本专利中，呈现给左眼与右眼的视频图像还可为不同的，其中呈现给一只眼的视频图像与呈现给另一只眼的视频图像相比可为位置移位的、放大的或变亮的以进一步增强感知深度。然而，在恒定帧偏移的情况下，感知深度将由于在视频捕获期间存在的变化的运动而同样不一致。在颁予Nattress的标题为“用于组合具有计算机产生的3D图的图像序列的系统(System for combining a sequence of images with computer-generated 3Dgraphics) ”的美国专利申请案公开案2005/0168485中，描述一种用于组合图像序列与计算机产生的三维动画的系统。此专利申请案的方法包含，当按顺序捕获每一图像时测量图像捕获装置的位置以使得更易于识别所述图像捕获装置的透视且借此使得更易于将所捕获的图像与动画中的计算机产生的图像组合。在颁予Naske等人的标题为“用于2D/3D图像转换及最优化的方法及系统(Methodsand systems for 2D/3D image conversion and optimization)，，的美国专利申请案公开案2008/0085049中揭示一种用于在捕获后将借助单个透视图像捕获装置所捕获的视频转换为具有感知深度的视频的方法。在此方法中，将顺序视频图像彼此进行比较以确定在场景中的运动方向及速率。产生与所捕获的视频相比具有帧偏移的第二视频，其中当在顺序视频图像彼此的比较中检测到迅速运动或垂直运动时减小帧偏移以避免人为失真。然而，相机及场景中的物件的运动量仍将随时间而变化，且因此对深度的感知仍将不一致且将随在视频的捕获期间存在的运动而变化。在美国专利申请案公开案2009/0003654中，使用图像捕获装置的所测量位置来依据已借助不同位置中的图像捕获装置捕获的若干对图像确定范围映射图。仍需要从借助单个透视图像捕获装置所捕获的视频提供具有感知深度的视频，其中所述具有感知深度的视频在图像捕获装置或场景中的物件存在不一致运动时具有改进的图像质量及改进的深度感知。
技术实现思路
本专利技术提供一种用于提供具有感知深度的视频的方法，其包括 借助单个透视图像捕获装置捕获场景的视频图像序列；针对所述视频图像序列中的所述视频图像中的每一者确定所述图像捕获装置的相对位置；响应于所述图像捕获装置的所述所确定的相对位置而从所述视频图像序列中选择若干对立体视频图像；及基于所述若干对选定立体视频图像形成具有感知深度的视频。本专利技术具有以下优点可使用借助单个透视图像捕获装置捕获的场景的视频图像提供具有感知深度的视频图像。具有感知深度的视频响应于图像捕获装置的相对位置而形成以提供较一致的感知深度感觉。其具有又一优点当检测到与产生具有感知深度的视频图像不一致的图像捕获装置的运动时可提供不具有感知深度的图像。附图说明参考以下图式更好地理解本专利技术的实施例。图I是视频图像捕获装置的框图；图2A是在视野中具有三个物件的视频图像捕获装置的图解说明；图2B是借助来自图2A的视频图像捕获装置会捕获到的图像的图解说明；图3A是图2A的视频图像捕获装置的图解说明，其中所述视野已通过横向地移位所述视频图像捕获装置而改变；图3B是借助来自图3A的视频图像捕获装置会捕获到的图像的图解说明；图4A是图2A的视频图像捕获装置的图解说明，其中所述视野已通过使所述视频图像捕获装置旋转而改变；图4B是借助来自图4A的视频图像捕获装置会捕获到的图像的图解说明；图5A是展示图像的立体不匹配的来自图2B与图3B的重叠图像的图解说明；图5B是展示图像的立体不匹配的来自图2B与图4B的重叠图像的图解说明；图6A是根据本专利技术的一项实施例用于形成具有感知深度的视频的方法的流程图6B是根据本专利技术的又一实施例用于形成具有感知深度的视频的方法的流程图；图7是具有内建运动追踪装置的可抽换式存储器卡的图解说明；图8是具有内建运动追踪装置的可抽换式存储器卡的框图，所述可抽换式存储器卡包含在所述卡式可抽换式存储器卡内部形成具有感知深度的视频图像所需的组件；及图9是经受MPEG编码的视频帧序列的示意图。具体实施例方式产生具有感知深度的图像需要以观看者的左眼与右眼观看不同透视图像的方式来呈现具有不同透视的两个或两个以上图像。对于最简单的立体图像情形，以立体对的形式将具有不同透视的两个图像呈现给观看者，其中所述立体对由针对观看者的左眼的图像及针对观看者的右眼的图像组成。具有感知深度的视频由顺序地呈现给观看者的一系列立 体对组成。本专利技术提供一种用于从使用仅具有单个透视的视频图像捕获装置所捕获的视频产生具有感知深度的视频的方法。通常，所述单个透视由具有由一个透镜及一个图像传感器组成的一个电子图像捕获单元的视频图像捕获装置提供。然而，本专利技术相等地适用于具有一个以上电子图像捕获单元、一个以上透镜或一个以上图像传感器的视频图像捕获装置，限制条件为一次使用仅一个电子图像捕获单元或仅一个透镜及一个图像传感器来捕获视频。参考图1，在特定实施例中，其展示视频图像捕获装置10的组件，其中所述组件布置于提供结构支撑及保护的主体中。可使所述主体变化以满足特定用途及风格考虑的要求。安装于视频图像捕获装置10的主体中的电子图像捕获单元14具有至少拍摄透镜16及与拍摄透镜16对准的图像传感器18。来自场景的光沿光学路径20传播通过拍摄透镜16且照在图像传感器18上，从而产生模拟电子图像。所使用图像传感器的类型本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】2010.06.09 US 12/796,8631.一种用于提供具有感知深度的视频的方法，其包括 借助单个透视图像捕获装置捕获场景的视频图像序列； 针对所述视频图像序列中的所述视频图像中的每一者确定所述图像捕获装置的相对位置； 响应于所述图像捕获装置的所述所确定的相对位置而从所述视频图像序列中选择若干对立体视频图像；及 基于所述若干对选定立体视频图像形成具有感知深度的视频。2.根据权利要求I所述的方法，其中通过识别其中所述图像捕获装置的所述所确定的相对位置已改变一规定距离的若干对视频图像来选择所述若干对立体视频图像。3.根据权利要求2所述的方法，其中所述规定距离为在水平方向上的距离。4.根据权利要求2所述的方法，其中当所述图像捕获装置的所述所确定的相对位置的改变指示所述图像捕获装置的运动在垂直方向或旋转方向上时，减小所述规定距离。5.根据权利要求2所述的方法，其中当所述图像捕获装置的所述所确定的相对位置的改变指示所述图像捕获装置的运动超出经界定范围时，将所述规定距离减小到零。6.根据权利要求I所述的方法，其进一步包含分析所述所捕获的视频图像序列以确定所述场景中的物件移动，且其中所述若干对立体视频图像的所述选择进一步响应于所述所确定的物件移动。7.根据权利要求6所述的方法，其中通过使所述所捕获的视频图像序列中的对应物件的相对位置相关来确定所述场景中的所述物件移动。8.根据权利要求6所述的方法，其中所述若干对立体视频图像的所述选择包含 响应于所述图像捕获装置的所述所确定的相对位置而确定所述若干对立体视频图像的帧偏移； 当确定所述物件移动超出经界定范围时，减小所述帧偏移；及 使用所述经减小的帧偏移来选择若干对立体视频图像。9.根据权利要求8所述的方法，其中当物件移动量超出经界定范围时将所述帧偏移减小到零。10.根据权利要求I所述的方法，其中使用位置感测装置确定所述图像捕获装置的所述相对位置。11.根据权利要求10所述的方法，其中所述位置感测装置包含加速计或陀螺装置。12.根据权利要求10所述的方法，其中所述位置感测装置为全球定位系统装置。13.根据权利要求I所述的方法，其中通过分析所述所捕获的视频图像序列来确定所述图像捕获装置的所述相对位置。14.根据权利要求I所述的方法，其中通过形成适合于借助具有用于左眼及右眼的互补滤色器的眼镜观看的彩色立体图像来提供所述具有感知深度的视频。15.根据权利要求I所述的方法，其中通过存储每一视频帧的若干对立体图像来提供所述具有感知深度的视频。16.根据权利要求I所述的方法，其进一步包含在立体显示器上显示所述具有感知深度的视频。17.根据权利要求I所述的方法，其中所述若干对立体视频图像的所述...

【专利技术属性】
技术研发人员：约翰·诺尔沃尔德·博德，阿米特·辛哈厄，
申请(专利权)人：柯达公司，
类型：
国别省市：