用于处理视频图像的方法和系统技术方案

本发明专利技术提供用于处理视频图像的方法和系统。描述了生成位差地图的方法。该方法用于可在限定屏幕平面的屏幕上显示的图像序列，该序列包括可被观看者在不同于屏幕平面的图像平面上感知的可立体观看的第一对象，该对象包括可被观看者的一眼观看的第一图像和可被该观看者的另一眼观看的第二图像，该方法包括：对第一图像帧执行第一边缘像素检测处理以识别第一图像帧内的边缘；从检测到的边缘识别第一图像的特征像素；生成包括特征像素的像素块；利用来自第一图像帧的像素块对第二图像的搜索区域执行块匹配，其中从第一帧生成的像素块被与搜索区域进行相关；以及通过识别第一图像帧的特征像素相对于第二图像帧中的相应特征像素的相对位移生成位差地图。

【技术实现步骤摘要】

本专利技术涉及用于处理视频图像的方法和装置。
技术介绍
为了增强观看者在观看视频素材时的体验，可以应用已知的技术以便给予观看者视频素材内的某些图像具有三维(3D)质量的印象。这是通过将视频布置为包括立体图像的序列来实现的，其中观看者通过一只眼睛看到第一图像，并且通过另一只眼睛看到第二图像。如果第一图像和第二图像是同一对象的图像，但这些图像对于观看者看到的观看平面(例如电视显示屏或影院屏幕)而言相互之间有水平位移，则观看者通过感知到有对象的单个图像并且此图像具有某个程度的深度(即位于观看平面的前方或后方)来调和此视觉信息。通过将两个图像布置成同一对象的图像但是是从略微不同的角度捕捉的，可以增强3D效果。因为人类眼睛间隔开了一小段距离，所以这模仿了当通过双眼观看真实对象时观看者看到的信息，从而观看者将显示的图像感知为3D对象。与传统的二维QD)视频序列不同，为了让观看者观看3D图像，其眼睛必须指向略微不同的方向，这是因为同一对象的位移版本的水平位移。当观看立体图像时，观看者的眼睛可能发生不自然的运动。例如，观看者的眼睛可能不自然地分散，可能太过聚拢，或者可能在垂直方向上分散(由于图像本文档来自技高网...

【技术保护点】
１．一种为可在限定屏幕平面的屏幕上显示的图像序列生成位差地图的方法，其中所述图像序列包括可被观看者在不同于所述屏幕平面的图像平面上感知到的可立体观看的第一对象，该可立体观看的对象包括可被观看者的一只眼睛观看的第一图像和可被该观看者的另一只眼睛观看的第二图像，所述方法包括：对所述第一图像帧执行第一边缘像素检测处理以识别所述第一图像帧内的边缘；从检测到的边缘中识别所述第一图像的特征像素；生成包括所述特征像素的像素的块；利用来自所述第一图像帧的像素的块对所述第二图像的搜索区域执行块匹配，其中从所述第一帧生成的像素的块被与所述搜索区域进行相关；以及通过识别所述第一图像帧的特征像素相对于所述第二图像帧中...

【技术特征摘要】
2010.02.26 GB 1003289.41.一种为可在限定屏幕平面的屏幕上显示的图像序列生成位差地图的方法，其中所述图像序列包括可被观看者在不同于所述屏幕平面的图像平面上感知到的可立体观看的第一对象，该可立体观看的对象包括可被观看者的一只眼睛观看的第一图像和可被该观看者的另一只眼睛观看的第二图像，所述方法包括对所述第一图像帧执行第一边缘像素检测处理以识别所述第一图像帧内的边缘；从检测到的边缘中识别所述第一图像的特征像素；生成包括所述特征像素的像素的块；利用来自所述第一图像帧的像素的块对所述第二图像的搜索区域执行块匹配，其中从所述第一帧生成的像素的块被与所述搜索区域进行相关；以及通过识别所述第一图像帧的特征像素相对于所述第二图像帧中的相应特征像素的相对位移，来生成位差地图。2.根据权利要求1所述的方法，包括通过将预先限定的指示出所述可立体观看的第一对象的深度的深度参数与由所述位差地图标识的对象位置相关联，来从所述位差地图生成深度地图，该深度地图提供对所述屏幕平面与所述图像平面之间的距离的指示。3.根据权利要求2所述的方法，包括依据由所述深度地图或所述位差地图指示的所述可立体观看的第一对象的位差来将所述可立体观看的第一对象与图形指示物相关联。4.根据权利要求2所述的方法，包括如果所述深度等于或大于预定的视差阈值则将所述可立体观看的第一对象与所述图形指示物相关联。5.根据权利要求3或4所述的方法，其中，所述图形指示物包括向所述3D图像施加颜色。6.根据权利要求1所述的方法，包括对所述第二图像帧执行第二边缘像素检测处理以识别所述第二图像帧内的边缘，根据识别出的边缘和所生成的位差地图确定所述第一图像帧中的预测边缘像素，并且当所述预测边缘像素和所述第一图像中检测到的边缘像素的位置在预定的阈值距离内时证实所述位差地图。7.根据权利要求1所述的方法，其中，在边缘像素检测步骤之前，向所述第一图像帧和所述第二图像帧中的至少一个帧的自相关版本应用亚谐求和处理以确定存在于该至少一个帧中的重复图案的基本频率的大小，并且所述边缘像素检测处理和位差处理步骤是依据所述至少一个图像帧的基本频率的大小来执行的。8.根据权利要求1所述的方法，其中，所述位差地图包括相应特征像素之间的水平位移，并且所述边缘检测处理使用Sobel边缘检测技术。9.根据权利要求1所述的方法，其中，所述第一边缘检测处理包括将所述第一图像分成多个像素块并且确定每个像素块中的边缘的数目的步骤，其中如果边缘的数目低于阈值，则认为没有边缘位于该像素块中。10.根据权利要求9所述的方法，其中，所述阈值与该像素块中的垂直像素数目相同。11.根据权利要求9或10中任一个所述的方法，其中，如果在一像素块中检测到的边缘的数目高于第二阈值，则认为该像素块中的边缘的数目是所述第二阈值。12.一种用于图像的图形用户界面，一可立体观看的第一对象位于该图像中，该图形用户界面包括依据由深度地图或位差地图指示的所述可立体观看的第一对象的位差来将所述可立体观看的第一对象与图形指示物相关联，其中所述图形指示物包括向所述3D图像施加颜色。13.一种用于图像的图形用户界面，一可立体观看的第一对象位于该图像中，该图形用户界面包括如果所述第一对象的深度地图指示的深度等于或大于预定的视差阈值，则将所述可立体观看的第一对象与图形指示物相关联，其中所述图形指示物包括向所述3D...

【专利技术属性】
技术研发人员：乔纳森·理查德·索尔佩，
申请(专利权)人：索尼公司，
类型：发明
国别省市：JP