2D到3D视频帧转换制造技术

一种广泛传播的3D视频和技术的采用由于缺乏高质量的3D内容而被阻碍。一种有效的处理此问题的解决方案是使用2D到3D的自动转换。但是，当前的转换方法虽然是通用的，却产生了带有伪影的低质量结果，其中伪影对于很多观看者来说是不可接受的。但是，使用精确深度创建3D立体视频的数据库非常困难。计算机生成的内容能够被用于生成用于2D到3D转换的高质量的3D视频参考数据库。所述方法将深度信息从3D参考数据库中的帧转移到目标帧，同时保持目标边界。该方法通过深度梯度计算深度图，并且输出立体视频。

【技术实现步骤摘要】
【国外来华专利技术】2D到3D视频帧转换专利技术描述我们呈现一种用于2D到3D视频转换的数据驱动技术。我们的技术基于从高质量的合成图像的数据库中转移深度梯度。可以从视频游戏中收集这些图像，视频游戏通常具有可用的各种各样的体裁，即运动及其子类、动作及其子类、正常图形等等……使用这些合成图像作为2D+深度仓库消除了对昂贵的立体相机的需求。这使得我们的技术比现有技术对于一般数据更加可扩展。此外，与以前的数据驱动技术不同，我们的方法不需要查询图像和数据库之间的全局相似性。相反，它仅需要局部块(部分)的相似性。这大大地减少了所需的2D+深度的数据库的规模，同时保持了相似的深度质量。结果更易于扩展到更加通用的数据，并且更易于适应消费品。介绍随着大部分的大制作以这种格式发行，立体3D(S3D)电影正在变得流行。但是，在实践中，大多数电影是以2D摄制的，然后将它们通过手动地绘制深度图并且渲染相应视图上转换为S3D。这个过程产生了非常好的结果，但是非常昂贵并且耗时。现场实况的S3D制作更加困难。手动的上转换是不可能的。直接地摄制立体的现场实况(例如足球比赛)需要在体育场内放置多个立体装备。这是非常有挑战性的，并且很少被尝试本文档来自技高网...

【技术保护点】
1.一种从视频流中处理2D视频图像用于将2D视频图像转换为3D图像的方法，所述方法包括：提供视频帧的参考数据库，所述数据库中的每个入口包括2D图像及用于所述2D图像的相应深度信息；将输入视频帧提交给所述参考数据库；在所述参考数据库中将输入视频帧与2D图像相匹配，并且选择用于所述2D图像的相应深度信息；以及将选中的深度信息应用于被匹配的输入视频帧，以生成2D加深度信息的帧。

【技术特征摘要】
【国外来华专利技术】2015.08.03 US 62/200,3111.一种从视频流中处理2D视频图像用于将2D视频图像转换为3D图像的方法，所述方法包括：提供视频帧的参考数据库，所述数据库中的每个入口包括2D图像及用于所述2D图像的相应深度信息；将输入视频帧提交给所述参考数据库；在所述参考数据库中将输入视频帧与2D图像相匹配，并且选择用于所述2D图像的相应深度信息；以及将选中的深度信息应用于被匹配的输入视频帧，以生成2D加深度信息的帧。2.根据权利要求1所述的方法，包括：将所述输入视频帧分为多个部分；其中，所述在所述参考数据库中将输入视频帧与2D图像相匹配包括：在所述参考数据库中，将所述输入视频帧的一部分与所述2D图像的一部分相匹配。3.根据权利要求2所述的方法，其中，所述部分为n×n个像素的区块。4.根据任一前述权利要求所述的方法，其中，所述方法还包括在所述参考数据库中将所述输入视频帧的另一部分与另一2D图像的一部分相匹配，以便将所述输入视频帧的多个部分与多个2D图像的相应部分相匹配。5.根据权利要求2至4中的任意一项所述的方法，其中，所述将选中的深度信息应用于被匹配的输入视频帧包括将所述2D图像的被匹配部分的深度信息应用于所述被匹配的输入视频帧的相应被匹配部分。6.根据权利要求5所述的方法，其中，将选中的深度信息应用于被匹配的输入视频帧包括将所述2D图像的被匹配部分的一个或多个相应像素映射到所述输入视频帧的被匹配部分的相应像素。7.根据任一前述权利要求所述的方法，所述方法包括：使用视觉技术识别用于与所述输入视频帧相匹配的候选2D图像。8.根据权利要求7所述的方法，其中，所述视觉技术包括使用所述帧的GIST和颜色信息。9.根据任一前述权利要求所述的方法，其中，所述深度信息为深度梯度。10.根据任一前述权...

【专利技术属性】
技术研发人员：M·M·赫菲达，K·A·A·卡拉加里，M·A·A·M·埃尔克哈利比，W·毛图希克，P·蒂迪克，A·卡斯帕，
申请(专利权)人：M·M·赫菲达，K·A·A·卡拉加里，M·A·A·M·埃尔克哈利比，W·毛图希克，P·蒂迪克，A·卡斯帕，
类型：发明
国别省市：卡塔尔,QA