立体影像串流处理装置与立体影像串流处理处理方法制造方法及图纸

本发明专利技术揭示了一种立体影像串流处理装置与立体影像串流处理方法。立体影像串流处理装置包含解压缩器，解压缩立体影像串流以获得系列影像帧、合并帧格式与影像解析度；运动估计与运动补偿模组，基于系列影像帧施行运动估计程序与运动补偿程序以获得一系列补偿帧，并根据合并帧格式与影像解析度将系列补偿帧划分为一系列左影像帧与一系列右影像帧；缩放率决定器，根据合并帧格式、影像解析度与显示器解析度决定水平缩放率与垂直缩放率；以及缩放器，根据水平缩放率与垂直缩放率缩放左影像帧与右影像帧，以获得左缩放帧与右缩放帧。

【技术实现步骤摘要】
立体影像串流处理装置与立体影像串流处理处理方法
本专利技术与影像串流处理相关，尤与立体影像串流处理相关。
技术介绍
在一般的立体影像串流处理程序中，立体影像串流会先透过解压缩器解压缩以获得一系列影像帧。为了获得较好的影像品质，在进行一运动估计程序与运动补偿程序前，该系列影像帧会先经过缩放处理至最后显示所需的解析度(亦即显示器解析度)，换句话说，经过该运动估计程序与该运动补偿程序所产生的一系列补偿帧则不会再进行缩放处理。然而，每幅影像帧均为包含多张色彩像素的图片，因此该系列的影像帧的数据量很大，经过缩放处理后一般会让数据量变得更大，造成在施行运动估计程序与运动补偿程序时，大量占用频宽使用量。因此，如何降低频宽使用量便成为业界所努力的目标之一。
技术实现思路
因此，本专利技术的目在于提供一种能降低频宽使用量的立体影像串流处理装置。本专利技术揭示一种立体影像串流处理装置，包含一解压缩器，解压缩该立体影像串流以获得一系列影像帧、一合并帧格式以及一影像解析度；一运动估计与运动补偿模组，基于该系列影像帧施行一运动估计程序与一运动补偿程序以获得一系列补偿帧，并根据该合并帧格式与该影像解析度将该系列补偿帧划分为一系列左影像帧与一系列右影像帧；一缩放率决定器，根据该合并帧格式、该影像解析度以及一显示器解析度决定一水平缩放率与一垂直缩放率；以及一缩放器，根据该水平缩放率与该垂直缩放率缩放该系列左影像帧与该系列右影像帧，以获得一系列左缩放帧与一系列右缩放帧。本专利技术另揭示一种立体影像串流处理方法，包含解压缩一立体影像串流以获得一系列影像帧、一合并帧格式以及一影像解析度；基于该系列影像帧施行一运动估计程序与一运动补偿程序以获得一系列补偿帧，并根据该合并帧格式与该影像解析度将该系列补偿帧划分为一系列左影像帧与一系列右影像帧；根据该合并帧格式、该影像解析度以及一显示器解析度决定一水平缩放率与一垂直缩放率；以及根据该水平缩放率与该垂直缩放率缩放该系列左影像帧与该系列右影像帧，以获得一系列左缩放帧与一系列右缩放帧。有关本专利技术的特征、实作与功效，兹配合附图作较佳实施例详细说明如下。附图说明图1显示本专利技术实施例一立体影像串流处理装置的方块图；图2显示本专利技术实施例一立体影像串流处理方法的流程图；图3显示合并帧格式的示意图；图4显示本专利技术实施例一运动估计与运动补偿模组的方块图；以及图5显示本专利技术本专利技术实施例一缩放率决定器的方块图。符号说明10立体影像流处理装置110解压缩器120运动估计与运动补偿模组130缩放率决定器140缩放器SIS立体影像流MFF合并帧格式IR影像解析度VF影像帧CF补偿帧LIF左影像帧RIF右影像帧Fi-1在前帧Fi+1在后帧MV运动向量Fi内插帧DR显示器解析度SRH水平缩放率SRV垂直缩放率LSF左缩放帧RSF右缩放帧S210～S250步骤具体实施方式图1为本专利技术实施例一立体影像串流处理装置10的方块图。立体影像串流处理装置10包含有一解压缩器110、一运动估计与运动补偿(motionestimationandmotioncompensation；MEMC)模组120、一缩放率决定器130以及一缩放器140。实作上，解压缩器110、运动估计与运动补偿模组120与缩放器140可由一特殊应用集成电路(Application-SpecificIntegratedChip；ASIC)来实现，缩放率决定器130可由一或多个处理器执行一存储器中储存的指令来实现，然而本专利技术并不以此为限。图2为本专利技术实施例一立体影像串流处理方法20的流程图，请一并参考图1与图2。影像数据包含一系列影像帧VF，为了加速储存或传输，影像数据通常会根据一影像压缩标准被压缩以降低其数据大小，一立体影像串流SIS包含压缩后的影像数据以及相关于该影像数据的资讯，例如合并帧格式MFF以及影像解析度IR，解压缩器110用来解压缩立体影像串流SIS以获得一系列影像帧VF、合并帧格式MFF以及影像解析度IR(步骤S210)。解压缩器110例如可为一MPEG-4或H.264解压缩器，但本专利技术不以此为限。合并帧格式MFF例如可为一并排模式(sidebyside)或一上下模式(topandbottom)。举例来说，并排模式下的影像帧VF的左半部分为左眼影像，右半部分为右眼影像，如图3所示，在其他实施例中，并排模式下的影像帧VF的左半部分亦可为右眼影像，右半部分可为左眼影像；另举例来说，下上模式下的影像帧VF的上半部分为左眼影像，下半部分为右眼影像，如图3所示，在其他实施例中，上下模式下的影像帧VF的上半部分亦可为右眼影像，下半部分可为左眼影像。影像解析度IR例如为SD(720*480)、HD(1280*720)、FullHD(1920*1080)、4K(2840*2160)，但本专利技术不以此为限。运动估计与运动补偿模组120自解压缩器110接收该系列影像帧VF与合并帧格式MFF，并基于该系列影像帧VF施行一运动估计程序与一运动补偿程序以获得一系列补偿帧CF(步骤S220)，并根据合并帧格式MFF与影像解析度IR将该系列补偿帧CF划分为一系列左影像帧LIF与一系列右影像帧RIF(步骤S230)。详细来说，请参考图4，图4为本专利技术实施例一运动估计与运动补偿模组120的方块图。运动估计与运动补偿模组120包含一运动估计模组122、一运动补偿模组124与一划分模组126。运动估计模组122先进行一运动估计程序以决定该系列影像帧VF中一在前帧Fi-1与一在后帧Fi+1的一运动向量MV，运动补偿模组124则根据运动向量MV施行一运动补偿程序，以由该在前帧Fi-1与该在后帧、Fi+1合成一内插帧Fi，并插入该内插帧Fi至该系列影像帧VF中以获得该系列补偿帧CF。其中，该运动估计程序与该运动补偿程序为已知技术，在此不多赘述。接着，划分模组126根据合并帧格式MFF与影像解析度IR将该系列补偿帧CF划分为一系列左影像帧LIF、RIF与一系列右影像帧RIF。举例来说，当合并帧格式MFF为并排模式且影像解析度IR为fx*fy时，划分模组126将一补偿帧CFi划分为一解析度为(fx/2)*fy的左影像帧LIFi以及一解析度为(fx/2)*fy的右影像帧RIFi。举例来说，当合并帧格式MFF为并排模式且影像解析度IR为1920*1080时，在一实施例中，划分模组126将一补偿帧CFi的左半部分划分为一解析度为960*1080的左影像帧LIFi，划分模组126另将补偿帧CFi的右半部分划分为一解析度为960*1080的右影像帧RIFi；在另一实施例中，划分模组126将一补偿帧CFi的右半部分划分为一解析度为960*1080的左影像帧LIFi，划分模组126另将补偿帧CFi的左半部分划分为一解析度为960*1080的右影像帧RIFi。另举例来说，当合并帧格式MFF为上下模式且影像解析度IR为fx*fy时，划分模组126将一补偿帧CF划分为一解析度为fx*(fy/2)的左影像帧LIFi以及一解析度为fx*(fy/2)的右影像帧RIFi。举例来说，当合并帧格式MFF为上下模式且影像解析度IR为1920*1080时，在一实施例中，划分模组126将一补偿帧CFi的上半部分划分为一解析度为1920*540的左影像帧本文档来自技高网...

【技术保护点】
一种立体影像串流处理装置，包含：一解压缩器，解压缩该立体影像串流以获得一系列影像帧、一合并帧格式以及一影像解析度；一运动估计与运动补偿模组，基于该系列影像帧施行一运动估计程序与一运动补偿程序以获得一系列补偿帧，并根据该合并帧格式与该影像解析度将该系列补偿帧划分为一系列左影像帧与一系列右影像帧；一缩放率决定器，根据该合并帧格式、该影像解析度以及一显示器解析度决定一水平缩放率与一垂直缩放率；以及一缩放器，根据该水平缩放率与该垂直缩放率缩放该系列左影像帧与该系列右影像帧，以获得一系列左缩放帧与一系列右缩放帧。

【技术特征摘要】
2016.12.05 US 62/429,8761.一种立体影像串流处理装置，包含：一解压缩器，解压缩该立体影像串流以获得一系列影像帧、一合并帧格式以及一影像解析度；一运动估计与运动补偿模组，基于该系列影像帧施行一运动估计程序与一运动补偿程序以获得一系列补偿帧，并根据该合并帧格式与该影像解析度将该系列补偿帧划分为一系列左影像帧与一系列右影像帧；一缩放率决定器，根据该合并帧格式、该影像解析度以及一显示器解析度决定一水平缩放率与一垂直缩放率；以及一缩放器，根据该水平缩放率与该垂直缩放率缩放该系列左影像帧与该系列右影像帧，以获得一系列左缩放帧与一系列右缩放帧。2.如权利要求1所述的立体影像串流处理装置，其特征在于，该合并帧格式包含一并排模式与一上下模式中至少之一。3.如权利要求2所述的立体影像串流处理装置，其特征在于，该运动估计与运动补偿模组更包括一划分模组，其中当该合并帧格式为该并排模式且该影像解析度为fx*fy时，该划分模组化将一补偿帧划分为一解析度为(fx/2)*fy的一左影像帧以及一解析度为(fx/2)*fy的一右影像帧。4.如权利要求2所述的立体影像串流处理装置，其特征在于，该运动估计与运动补偿模组还包括一划分模组，其中当该合并帧格式为该上下模式且该影像解析度为fx*fy时，该划分模组化将一补偿帧划分为一解析度为fx*(fy/2)的一左影像帧以及一解析度为fx*(fy/2)的一右影像帧。5.如权利要求2所述的立体影像串流处理装置，其特征在于，该缩放率决定器包括：一水平缩放率决定单元，其中当该合并帧格式为该并排模式时，该水平缩放率决定单元根据该影像解析度fx*fy与该显示器解析度为dx*dy，得出该水平缩放率为2*dx/fx；以及一垂直缩放率决定单元，其中当该合并帧格式为该并排模式时，该垂直缩放率决定单元根据该影像解析度为fx*fy与该显示器解析度为dx*dy，得出该垂直缩放率为dy/fy。6.如权利要求2所述的立体影像串流处理装置，其特征在于，该缩放率决定器包括：一水平缩放率决定单元，其中当该合并帧格式为该上下模式时，该水平缩放率决定单元根据该影像解析度为fx*fy与该显示器解析度为dx*dy，得出该水平缩放率为dx/fx；以及一垂直缩放率决定单元，其中当该合并帧格式为该上下模式时，该垂直缩放率决定单元根据该影像解析度为...

【专利技术属性】
技术研发人员：陈仲怡，张洵豪，曾宇晟，
申请(专利权)人：晨星半导体股份有限公司，
类型：发明
国别省市：中国台湾,71