一种深度融合方法及其装置。该深度融合方法，适于二维转三维的影像处理装置。该深度融合方法包括如下步骤。取得一影像画面中多个区块各自的动态深度值。取得各区块的原始静态深度值。将各区块的原始静态深度值进行转换，以取得各区块的转换静态深度值。以区块为基础，混合各区块的动态深度值及转换静态深度值，以取得各区块的融合深度值。另外，一种深度融合装置亦被提出。
【技术实现步骤摘要】
本专利技术涉及一种影像处理及其装置，特别是涉及一种二维转三维的影像处理装置中的深度融合(depth fusion)方法及其装置。
技术介绍
随着显示技术的进步，可提供3D影像画面的显示器如雨后春笋般地涌现。此种立体显示器所需的影像信息包括2D影像画面及其深度信息。藉由2D影像画面及其深度信息，立体显示器可重建对应的3D影像画面。因此，如何取得2D影像画面的深度信息便成为一个重要的课题。一般而言，取得影像画面的深度信息的方法可利用计算影像画面中移动物体的变化来取得。在现有技术中，有利用移动(motion)及画面(pictorial)深度值线索(cues)来取得融合深度值，其是根据镜头移动(camera motion)的分析全面地(globally)来改变每一深度产生时的权重。根据上述概念，现有技术提出多种深度融合方法，但其可能产生诸多如下问题。现有技术中有利用基于影像深度(image-based depth)及基于感知深度(consciousness-based depth)的方法来取得的融合深度值。但此一方式在镜头移动现象发生时，其所得的融合深度值并非正确。另一方面，针对画面中的移动物体，现有技术中有利用基于移动分割(motion based segmentation)的方法来分析移动物体,其利用一组一致的动作和位置参数来定义一个可分割出的区域，以分析该移动物体。虽然基于上述移动分割方法分析得到的物体区域较为完整，但是如果基于影像深度或者基于感知深度的深度融合方法，其分割区域的方式与基于移动分割方法不同时，将使得该移动物体的区域内的深度值错误地被分割为多个部份。
技术实现思路
本专利技术提供一种深度融合方法，可有效产生影像画面各区块的融合深度值。本专利技术提供一种深度融合装置，利用所述深度融合方法，可有效产生影像画面各区块的融合深度值。本专利技术提供一种深度融合(depth fusion)方法,适于二维转三维(2D-to_3D)的影像处理装置。深度融合方法包括如下步骤。取得一影像画面中多个区块各自的动态深度值。取得各区块的原始静态深度值。将各区块的原始静态深度值进行转换，以取得各区块的转换静态深度值。以区块为基础，混合各区块的动态深度值及转换静态深度值，以取得各区块的融合深度值。在本专利技术的一实施例中，上述将各该区块的原始静态深度值进行转换，以取得各该区块的转换静态深度值的步骤，是依据各该区块的一狭域移动向量与该影像画面的一全域移动向量间的差异来进行。在本专利技术的一实施例中，上述的取得区块的动态深度值的步骤包括如下步骤。取得各区块的狭域移动向量(local motion vector)。根据各区块的狭域移动向量，计算影像画面的全域移动向量(global motion vector)。计算各区块的狭域移动向量与全域移动向量的移动差值，以产生多个相对移动向量。根据相对移动向量，取得各区块的动态深度值。在本专利技术的一实施例中，上述的将各区块的原始静态深度值进行转换以获得各区块的转换静态深度值的步骤包括如下步骤。根据各区块的相对移动向量来决定各区块的一转换参数值。使用各区块的转换参数值以将区块的原始静态深度值转换为转换静态深度值。在本专利技术的一实施例中，上述的使用各区块的转换参数值以将区块的该原始静态深度值转换为转换动态深度值的步骤如下步骤。将转换参数值大于一临界值的各区块的原始静态深度值当中取出一最大者作为一最大静态深度值。根据各区块的转换参数值、各区块的原始静态深度值以及影像画面的最大静态深度值，计算各区块的转换静态深度值。在本专利技术的一实施例中，上述的深度融合方法利用下列公式计算转换静态深度值。Di’ = alpha_blk*k*Dimax+(l-alpha_blk)*Di。其中，Di 为原始静态深度值,Di’ 为转换静态深度值，alpha_blk为转换参数值，以及k为一调整参数，O < k彡I。在本专利技术的一实施例中，上述的取得各区块的原始静态深度值的步骤包括根据各区块的基于影像的深度线索信息(image-based depth cues information)及影像画面的基于感知的深度线索信息(consciousness-based depth cues information)来决定各区块的原始静态深度值。本专利技术提供一种深度融合装置，适于二维转三维的影像处理装置。深度融合装置包括一动态深度撷取单元、一静态深度撷取单元以及一深度混合单元。动态深度撷取单元取得一影像画面中多个区块各自的动态深度值。静态深度撷取单元取得各区块的原始静态深度值，并将各区块的原始静态深度值进行转换，以取得各区块的转换静态深度值。深度混合单元以区块为基础，混合 各区块的动态深度值及转换静态深度值，以取得各区块的融合深度值。在本专利技术的一实施例中，上述的静态深度撷取单元是依据各该区块的一狭域移动向量与该影像画面的一全域移动向量间的差异，来将各该区块的该原始静态深度值进行转换，以取得各该区块的该转换静态深度值。在本专利技术的一实施例中，上述的动态深度撷取单元包括一动态估计单元以及一动态深度产生单元。动态估计单元取得各区块的狭域移动向量，并根据各区块的狭域移动向量，计算影像画面的全域移动向量。动态估计单元计算各区块的狭域移动向量与全域移动向量的移动差值，以产生多个相对移动向量。动态深度产生单元根据相对移动向量，取得各区块的动态深度值。在本专利技术的一实施例中，上述的静态深度撷取单元，包括一静态深度转换单元。静态深度转换单元根据各区块的相对移动向量来决定各区块的一转换参数值。静态深度转换单元使用各区块的转换参数值以将区块的原始静态深度值转换为转换静态深度值。在本专利技术的一实施例中，上述的静态深度转换单元将转换参数值大于一临界值的各区块的原始静态深度值当中取出一最大者作为一最大静态深度值。静态深度转换单元根据各区块的转换参数值、各区块的原始静态深度值以及影像画面的最大静态深度值，计算各区块的转换静态深度值。在本专利技术的一实施例中，上述的静态深度转换单元根据下列公式计算转换静态深度值:Di，= alpha_blk*k*Dimax+(l-alpha_blk)*Di。其中 Di 为原始静态深度值，Di，为转换静态深度值，alpha_blk为转换参数值，以及k为一调整参数，O < k < I。在本专利技术的一实施例中，上述的静态深度撷取单元包括一静态深度取得单元。静态深度取得单元根据各区块的基于影像的深度线索信息及影像画面的基于感知的深度线索信息来决定各区块的原始静态深度值。基于上述，在本专利技术的范例实施例中，在融合深度之前，所述方法会先转换原始静态深度值，并以区块为基础，混合各区块的动态深度值及转换后的静态深度值，因此可有效产生影像画面各区块的融合深度值。为使本专利技术的上述特征和优点能更明显易懂，下文特举实施例，并结合附图详细说明如下。附图说明图1绘示本专利技术一实施例的深度融合装置的方块示意图。图2绘示本专利技术一实施例的深度融合方法的步骤流程图。图3绘示本专利技术一实施例的动态深度值Dm的取得方法的步骤流程图。图4绘示本专利技术一实施例的转换静态深度值Di’的取得方法的步骤流程图。图5绘示本专利技术一实施例的转换参数值alpha_blk与相对移动向量I |MV_MV_cam本文档来自技高网...
【技术保护点】
一种深度融合方法，适于二维转三维的影像处理装置，该深度融合方法包括：取得一影像画面中多个区块各自的动态深度值；取得各该区块的原始静态深度值；将各该区块的原始静态深度值进行转换，以取得各该区块的转换静态深度值；以及以区块为基础，混合各该区块的动态深度值及转换静态深度值，以取得各该区块的融合深度值。
【技术特征摘要】
1.一种深度融合方法，适于二维转三维的影像处理装置，该深度融合方法包括 取得一影像画面中多个区块各自的动态深度值； 取得各该区块的原始静态深度值； 将各该区块的原始静态深度值进行转换，以取得各该区块的转换静态深度值；以及以区块为基础，混合各该区块的动态深度值及转换静态深度值，以取得各该区块的融合深度值。2.如权利要求1所述的深度融合方法，其中将各该区块的原始静态深度值进行转换，以取得各该区块的转换静态深度值的步骤是依据各该区块的一狭域移动向量与该影像画面的一全域移动向量间的差异来进行。3.如权利要求1所述的深度融合方法，其中取得这些区块的动态深度值的步骤包括 取得各该区块的狭域移动向量； 根据各该区块的狭域移动向量，计算该影像画面的全域移动向量； 计算各该区块的狭域移动向量与该全域移动向量的移动差值，以产生多个相对移动向量；以及 根据这些相对移动向量，取得各该区块的动态深度值。4.如权利要求3所述的深度融合方法，其中将各该区块的该原始静态深度值进行转换以获得各该区块的转换静态深度值的步骤包括 根据各该区块的该相对移动向量来决定各该区块的一转换参数值；以及 使用各该区块的该转换参数值以将该区块的该原始静态深度值转换为该转换静态深度值。5.如权利要求4所述的深度融合方法，其中使用各该区块的该转换参数值以将该区块的该原始静态深度值转换为该转换动态深度值的步骤 将转换参数值大于一临界值的各该区块的原始静态深度值当中取出一最大者作为一最大静态深度值；以及 根据各该区块的该转换参数值、各该区块的该原始静态深度值以及该影像画面的该最大静态深度值，计算各该区块的该转换静态深度值。6.如权利要求5所述的深度融合方法，其中Di’= alpha_blk*k*Dimax+(l-alpha_blk)*Di， 其中Di为该原始静态深度值，Di’为该转换静态深度值，alpha_blk为该转换参数值，以及k为一调整参数,O < k ^ I07.如权利要求1所述的深度融合方法，其中取得各该区块的该原始静态深度值的步骤包括 根据各该区块的基于影像的深度线索信息及该影像画面的基于感知的深度线索信息来决定各该区块的该原始静态深度值。8.一种深度融合装置，适...
【专利技术属性】
技术研发人员：汪淳，刘广智，姜建德，
申请(专利权)人：联咏科技股份有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。