当前位置: 首页 > 专利查询>索尼公司专利>正文

图像数据发送设备、图像数据发送方法、图像数据接收设备以及图像数据接收方法技术

技术编号:7869047 阅读:132 留言:0更新日期:2012-10-15 02:49
为了在发送在显示叠加信息的时段期间内顺序更新的视差信息时,减少视差信息的数据量。发送包括在字幕显示时段期间顺序更新的视差信息的片段。在接收侧,将在左眼字幕和右眼字幕之间提供的视差可以结合图像的内容的改变而动态地改变。基于第一帧的视差信息值、以及在间隔时段已经被乘以倍数值的预定定时处的视差信息值,更新该视差信息。发送的数据量可以减少,并且在接收侧,可以大大节省用于保存视差信息的存储器的量。

【技术实现步骤摘要】
【国外来华专利技术】送要被添加到叠加信息的视差信息。基于显示叠加信息的第一帧的视差信息初始值和间隔时段已经被乘以倍数值的预定定时处的视差信息值来来更新视差信息。所以,可以根据立体图像中的改变动态地改变要在左眼叠加信息和右眼叠加信息之间添加的视差。并且,不是发送所有每一帧的视差信息,所以可以大大地节省用于保存视差信息的存储器的量。注意,对于本专利技术,例如,图像数据处理单元可以使得视差信息经历插值处理(interpolation processing),且产生并使用任意巾贞间隔的视差信息。在这种情况下,即使假设在每一预定定时从发送侧发送视差信息,也可以用合适的间隔(例如,每一帧)控制向叠加信息提供的视差。在这种情况下,插值处理可以是线性插值,或者可以涉及时间方向(帧方向)上的低带滤波处理。所以,即使假设在每一预定定时从发送侧发送视差信息,也可以平滑在时间方向上在插值处理之后的视差信息的变化,并且可以抑制应用到叠加信息的视差的转变在每一预定定时变得不连续的不自然的感觉。并且,对于本专利技术,可以在视差信息中添加例如增量时段的信息和增量时段的数目的信息,所述增量时段的信息用来计算间隔时段已经被乘以倍数值的预定定时,图像数据处理单元用所述叠加信息的显示起始时间点作为基准,基于所述增量时段的信息和所述数目的信息,获得预定定时。在这种情况下,图像数据处理单元可以顺序地获得从叠加信息的显示起始时间点开始的预定定时。例如,从某一预定定时开始,通过使用作为下一预定定时的信息的增量时段信息和数目信息,将增量时段*数目的时间添加到该某一预定定时的时间,可以容易地获得下一预定定时。注意提供叠加信息的显示起始时间点,作为插入到包含视差信息的PES流的首部部分的PTS。有益效果根据本专利技术,在发送侧,不发送所有每一帧的视差信息,所以可以减少发送数据量,且在接收侧,可以大大的节省用于保存视差信息的存储器的量。附图说明图I是示出作为本专利技术实施例的图像发送/接收系统的配置示例的框图。图2是示出在广播站的发送数据生成单元的配置示例的框图。图3是示出1920*1080像素格式的图像数据的图。图4是用于描述“顶底”格式、“并排”格式和“帧顺序”格式的图,所述“顶底”格式、“并排”格式和“帧顺序”格式是立体图像数据(3D图像数据)的发送格式。图5是用于描述检测右眼图像中关于左眼图像的视差矢量的示例的图。图6是用于描述通过块匹配获得视差矢量的图。图7是示出在使用用于每一像素(pixel)的视差矢量的值作为每一像素(eachpixel)的亮度值的情况下的图像的示例的图。图8是示出用于每一块(Block)的视差矢量的示例的图。图9是用于描述在发送数据生成单元的视差信息产生单元执行的缩小化处理的图。 图10是示出包括视频基本流、字幕基本流和音频基本流的传输流(位流数据)的构造示例的图。图11是示出配置字幕数据的PCS (page_composition_segment)的结构的图。图12是示出“segment_type”值和片断类型间的相关性的图。图13是用于描述指示用于3D (Component_type=0xl5, 0x25)的新定义的字幕的格式的信息的图。图14是概念性地示出在立体图像数据发送格式是并排格式的情况下产生用于立体图像的字幕数据的方法的图。图15是概念性地示出在立体图像数据发送格式是顶底格式的情况下产生用于立体图像的字幕数据的方法的图。图16是概念性的示出在立体图像数据发送格式是帧顺序格式的情况下产生用于 立体图像的字幕数据的方法的图。图17是示出SCS (子区域组分片断)的结构示例(语法)的图。图18是示出SCS中包含的“Subregion_payload() ”的结构示例(语法)的图。图19是示出SCS的主要数据规定(语义)的图。图20是示出更新用于每一基本片断时段(BSP)的视差信息的示例的图。图21 是不出 “disparity_temporal_extension O ” 的结构不例(语法)的图。图22是示出“disparity_temporal_extensionO ”的结构示例中主要的数据规定(语义)的图。图23是示出更新用于每一基本片断时段(BSP)的视差信息的示例的图。图24是示意性地示出从广播站经由机顶盒到电视接收器,或直接从广播站到电视接收器的立体图像数据和字幕数据(包含显示控制信息)的流的图。图25是示意性地示出从广播站经由机顶盒到电视接收器,或直接从广播站到电视接收器的立体图像数据和字幕数据(包含显示控制信息)的流的图。图26是示意性地示出从广播站经由机顶盒到电视接收器,或直接从广播站到电视接收器的立体图像数据和字幕数据(包含显示控制信息)的流的图。图27是示出图像上的屏幕说明(图形信息)的显示示例,及背景、特写(closeup)观看对象和屏幕说明的透视的图。图28是示出屏幕上的屏幕说明的显示示例,及用于显示屏幕说明的左眼屏幕说明LGI和右眼屏幕说明RGI的显示示例的图。图29是示出形成立体图像显示系统的机顶盒的配置示例的框图。图30是示出形成机顶盒的位流处理单元的配置示例的框图。图31是示出通过执行涉及在形成在屏幕说明显示时段内顺序更新的视差信息的视差信息的多帧上的低通滤波处理的插值处理而生成任意帧之间的视差信息(插值的视差信息)的示例的图。图32是示出形成立体图像显示系统的电视接收器的配置示例的框图。图33是示出在广播站的发送数据生成单元的配置示例的框图。图34是示出屏幕说明数据流的配置示例和屏幕说明单元(caption)的显示示例的图。图35是示出在屏幕说明编码器生成的屏幕说明数据流的配置示例和此情况下视差矢量的产生示例的图。图36是示出在屏幕说明编码器生成的屏幕说明数据流的另一配置示例和此情况下视差矢量的产生示例的图。图37是示出在屏幕说明编码器生成的屏幕说明数据流的配置示例和此情况下视差矢量的产生示例的图。图38是示出在屏幕说明编码器生成的屏幕说明数据流的另一配置示例和此情况下视差矢量的产生示例的图。图39是用于描述移动叠加在第一和第二视图上的每一屏幕说明单元的位置的情况的图。图40是示出在屏幕说明文本数据组的PES流中包含的控制码的包结构的图。 图41是示出在屏幕说明管理数据组的PES流中包含的屏幕说明码的包结构的图。图42是示出屏幕说明数据流(PES流)中的数据组的结构的图。图43是示意性地示出将视差矢量(视差信息)插进屏幕说明管理数据组的PES流中的情况下屏幕说明管理数据的结构的图。图44是示意性地示出将视差矢量(视差信息)插进屏幕说明管理数据组的PES流中的情况下屏幕说明数据的结构的图。图45是示意性地示出将视差矢量(视差信息)插进屏幕说明文本数据组的PES流中的情况下屏幕说明数据的结构的图。图46是示意性地示出将视差矢量(视差信息)插进屏幕说明文本数据组的PES流中的情况下屏幕说明管理数据的结构的图。图47是示出在屏幕说明数据流中包含的数据单元(data_unit)的结构(语法)的图。图48是示出数据单元的类型,及数据单元参数及其功能的图。图49是示出用于扩展的显示控制的数据单元(data_unit)的结构(语法)的图。图50是示出屏幕说明管理数据组的PES流具有的扩展的显示控制的数据单元中的 “Ad本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】2010.11.10 JP 2010-252322;2010.12.28 JP 2010-293671.一种图像数据发送设备,包括 图像数据输出单元,配置为输出左眼图像数据和右眼图像数据; 叠加信息数据输出单元,配置为输出要叠加到所述左眼图像数据和所述右眼图像数据上的叠加信息的数据; 视差信息输出单元,配置为输出要添加到所述叠加信息的视差信息;以及数据发送单元,配置为发送所述左眼图像数据、所述右眼图像数据、所述叠加信息数据、以及所述视差信息; 所述图像数据发送设备进一步包括视差信息更新单元,配置为基于显示所述叠加信息的第一帧的视差信息初始值、和在间隔时段已经被乘以倍数值的预定定时处的视差信息值,更新所述视差信息。2.如权利要求I所述的图像数据发送设备,进一步包括配置为改变间隔时段已经被乘以倍数值的预定定时的调整单元。3.如权利要求I所述的图像数据发送设备,其中关于与间隔时段已经被乘以倍数值的预定定时相对应的每个帧,将指示是否存在所述视差信息的更新的标记信息添加到所述视Hfs 息。4.如权利要求I所述的图像数据发送设备,其中所述视差信息已经被添加了用于计算间隔时段已经被乘以倍数值的预定定时的单位时段的信息、以及所述单位时段的数目的信肩、O5.如权利要求I所述的图像数据发送设备,其中增量时段的所述信息是其中通过以90KHz时钟测量所述增量时段所获得的值表达为24位长度的信息,或者所述增量时段表达为帧计数的信息。6.如权利要求I所述的图像数据发送设备,其中所述视差信息是对应于在相同的屏幕中显示的特定叠加信息的视差信息,和/或共同地对应于在相同的屏幕中显示的多个叠加Ih息的视差息。7.如权利要求I所述的图像数据发送设备,其中所述视差信息具有子像素精度。8.如权利要求I所述的图像数据发送设备,其中所述视差信息包括空间独立的多个区域。9.如权利要求I所述的图像数据发送设备,其中所述视差信息已经被添加了用于指定帧周期的信息。10.如权利要求I所述的图像数据发送设备,其中所述视差信息已经被添加了指示关于所述视差信息的一致性水平的信息,所述一致性水平在显示所述叠加信息时必需的。11.如权利要求I所述的图像数据发送设备,其中所述数据发送单元在所述显示时段开始之前,发送在所述叠加信息的显示时段要添加到所述叠加信息的视差信息。12.如权利要求I所述的图像数据发送设备,其中所述叠加信息的数据是DVB格式的字幕数据; 并且其中所述数据发送单元执行其中包括所述字幕数据的字幕数据流中所包括的所述视差信息的发送。13.如权利要求12所述的立体图像数据发送设备,其中所述视差信息是区域的增量或所述区域中包括的子区域的增量中的视差信息。14.如权利要求12所述的图像数据发送设备,其中所述视差信息是包括所有区域的页增量中的视差信息。15.如权利要求I所述的图像数据发送设备,其中所述叠加信息的数据是ARIB格式的屏幕说明数据; 并且其中所述数据发送单元执行其中包括所述屏幕说明数据的屏幕说明数据流中所包括的所述视差信息的发送。16.如权利要求I所述的图像数据发送设备,其中所述叠加信息的数据是CEA格式的隐藏屏幕说明数据; 并且其中所述数据发送单元执行其中包括所述隐藏屏幕说明数据的视频数据流的用户数据区域中所包括的所述视差信息的发送。17.如权利要求16所述的图像数据发送设备,其中将所述叠加信息的数据插入基于位于所述用户数据区域中的CEA表的扩展命令中。18.如权利要求16所述的图像数据发送设备,其中所述叠加信息的数据插入位于所述用户数据区域中的所述隐藏屏幕说明数据中。19.一种图像数据发送方法,包括 图像数据输出步骤,输出左眼图像数据和右眼图像数据; 叠加信息数据输出步骤,输出要叠加到所述左眼图像数据和所述右眼图像数据上的叠加信息的数据; 视差信息输出步骤,输出要添加到所述叠加信息的视差信息;以及 数据发送步骤,发送所述左眼图像数据、所述右眼图像数据、所述叠加信息数据、以及所述视差信息; 所述方法进一步包括视差信息更新步骤,其基于显示所述叠加信息的第一帧的视差信息初始值、和在间隔时段已经被乘以倍数值的预定定时处的视差信息值,更新所述视差信肩、O20.一种图像数据接收设备,包括 数据接收单元,配置为接收左眼图像数据和右眼图像数据、要叠加到所述左眼图像数据和所述右眼图像数据上的叠加信息数据、以及要添加到所述叠加信息的视差信息, 所述视差信息是基于显示所述叠加信息的第一帧的视差信息初始值、和在间隔时段已经被乘以倍数值的预定定时处的视差信息值,更新的;并且所述图像数据接收设备进一步包括 图像数据处理单元,配置为基于所述左眼图像数据、所述右眼图像数据、所述叠加信息数据、以及所述视差信息,获得在其上已经叠加所述叠加信息的左眼图像数据以及在其上已经叠加所述叠加信息的右眼图像数据。21.如权利要求20所述的图像数据接收设备,其中所述图像数据处理单元使视差信息经历插值处理,并且生成和使用任意帧间距的视差信息。22.如权利要求21所述的图像数据接收设备,其中所述插值处理涉及时间方向上的低带滤波处理。23.如权利要求20所述的图像数据接收设备,其中所述视差信息已经被添加了用于计算间隔时段已经被乘以倍数值的预定定时的增量时段的信息,以及所述增量时段的数目的信息; 并且其中所述图像数据处理单元用所述叠加信息的显示起始时间点作为基准,基于所述增量时段的信息和所述数目的信息,获得所述预定定时。24.如权利要求23所述的立体图像数据接收设备,其中提供所述叠加信息的所述显示起始时间点,作为插入在包括所述视差信息的PES流的首部部分中的PTS (呈现时间戳)。25.一种图像数据接收方法,包括 数据接收步骤,接收左眼图像数据和右眼图像数据、要叠加到所述左眼图像数据和所述右眼图像数据上的叠加信息数据、以及要添加到所述叠加信息的视差信息, 所述视差信息是基于显示所述叠加信息的第一帧的视差信息初始值、和在间隔时段已经被乘以倍数值的预定定时处的视差信息值,更新的;以及所述图像数据接收方法进一步包括 图像数据处理步骤,基于所述左眼图像数据、所述右眼图像数据、所述叠加信息数据、以及所述视差信息,获得在其上已经叠加所述叠加信息的左眼图像数据以及在其上已经叠加所述叠加信息的右眼图像数据。图像数据发送设备、图像数据发送方法、图像数据接收设备以及图像数据接收方法技术领域 本发明涉及图像数据发送设备、图像数据发送方法、图像数据接收设备以及图像数据接收方法,并且更具体地,涉及与左眼图像数据和右眼图像数据一起发送诸如屏幕说明(caption)的叠加(superimposed)信息数据的图像数据发送设备等。背景技术例如,在PTLl中提出了一种使用电视广播无线电波的立体图像数据的发送方法。使用这一发送方法,发送具有用于左眼的图像数据和用于右眼的图像数据的立体图像数据,并且执行使用双眼视差(binocular disparity)的立体图像显示。图95示出对象的左右图像在屏幕上的显示位置及其立体图像的回放位置之间的关系。例如,关于如图所示在屏幕上左图像La移动到右侧并且右图像Ra移动到左侧而显示的对象A,左右视线在屏幕表面的前方相交,所以其立体图像的回放位置在屏幕表面前方。DPa表不关于对象A在水平方...

【专利技术属性】
技术研发人员:塚越郁夫
申请(专利权)人:索尼公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1