记录设备和方法、再现设备和方法、程序和记录再现设备技术

本技术涉及记录设备、记录方法、再现设备、再现方法、程序和记录/再现设备，其中来自在成像时使用的多个相机的信息提供到再现侧设备。本技术的一个方面的记录设备提供有编码单元和记录控制单元。所述编码单元使用H.264/MPEG-4MVC以编码由第一相机拍摄的图像和第二相机拍摄的图像，并且对于非基视视频流的每一帧记录SEI，所述SEI包括对于第一相机和第二相机的以下的至少一个：光轴间隔信息、会聚角信息以及焦距信息。该记录控制单元具有记录单元，将基视视频流和对于其记录了SEI的非基视视频流记录到记录介质上。

Recording apparatus and method, reproducing apparatus and method, program, and recording and reproducing apparatus

The present invention relates to a recording apparatus, recording method, reproduction apparatus, reproduction method, program, and recording / reproducing apparatus, wherein information from a plurality of cameras used in imaging is provided to the playback side device. A recording device of an aspect of the present technology provides a coding unit and a recording control unit. The image encoding unit using H.264/MPEG-4MVC encoding to shot by the first camera and the second camera image, and for each frame of video recording SEI non base flow, the SEI includes the first camera and the second camera following at least one axis: interval information, convergence angle information and information focus. The recording control unit has a recording unit that records the base video stream and the non base video stream recorded with the SEI to the recording medium.

【技术实现步骤摘要】
【国外来华专利技术】记录设备和方法、再现设备和方法、程序和记录再现设备
本技术更具体地涉及能够向在再现侧的设备的记录设备提供关于用于图像捕获的多个相机的信息、记录方法、再现设备、再现方法、程序和记录再现设备。
技术介绍
最近几年，可以立体观看的记录有图像的3D内容受到关注。3D内容视频数据包括左眼图像(L图像)和右眼图像(R图像)的数据。在L图像中出现的被摄体和在R图像中出现的被摄体之间存在对应于视差的偏差。例如，具有视差的L图像和R图像被交替显示，并且被传递到佩戴主动式快门眼镜的用户的左眼和右眼，从而能够立体地识别被摄体。引用列表专利文献专利文献I JP2OO7-28O5I6A
技术实现思路
技术问题用户感受到的视差根据观看环境而不同，并且因此，难以允许用户以最佳视差观看图像。例如，最佳视差根据显示装置上的显示图像的尺寸而不同，并且最佳视差根据观看距离而不同。从L图像和R图像估计相机在图像捕获期间的位置等，并且试图根据其调节视差，但是再现侧难以完全恢复图像捕获期间的状况。鉴于这些情况做出了本技术，并且本技术向在再现侧的设备提供关于用于图像捕获的多个相机的信息。技术方案根据本技术的第一方面的记录设备包括:编码单兀，根据H.264/MPEG-4MVC对由第一相机捕获的图像和由第二相机捕获的图像进行编码，并且记录包括关于第一相机和第二相机的光轴间隔的信息、关于会聚角的信息以及关于焦距的信息中的至少一个的SEI，作为构成非基视(non-base view)视频流的每个画面的SEI ;以及记录控制单元,将基视(base view)视频流和记录有SEI的非基视视频流记录到记录介质。第一相机和第二相机中的每一个至少具有镜头。可以提供第一相机的图像捕获器件和第二相机的图像捕获器件中的每一个作为执行由镜头接收到的光的光电转换的图像捕获器件，或者可以由第一相机和第二相机共享和使用一个图像捕获器件。可以将第一相机和第二相机提供在记录设备内，或者在记录设备外。当其提供于记录设备外时，可以通过有线或者无线通信将第一相机和第二相机捕获的图像提供到记录设备。可以进一步提供捕获左眼图像的第一相机和捕获右眼图像的第二相机。在这种情况下，可以使编码单元将由第一相机捕获的左眼图像编码为基视视频流，而将由第二相机捕获的右眼图像编码为非基视视频流。编码单元能够将包括两个值的信息记录为关于光轴间隔的信息。在这种情况下，通过从两个值中的一个减去两个值中的另一个来表示第一相机和第二相机之间的光轴间隔。编码单元能够记录包括两个值的信息作为关于会聚角的信息。在这种情况下，通过从两个值中的一个减去两个值中的另一个来表示第一相机和第二相机的会聚角。根据本技术的第二方面的再现设备包括:解码单元，解码基视视频流和非基视视频流，该基视视频流通过根据H.264/MPEG-4MVC编码由第一相机捕获的图像和由第二相机捕获的图像而获得的基视视频流，且非基视视频流记录有包括关于第一相机和第二相机的光轴间隔的信息、关于会聚角的信息以及关于焦距的信息中的至少一个的SEI作为每个画面的SEI。可以进一步提供显示控制单元，其调节并且显示通过解码基视视频流获得的图像与基于SEI解码非基视视频流获得的图像之间的视差。显示控制单元可以使通过解码基视视频流获得的图像显示为左眼图像，并且显示控制单元可以使通过解码非基视视频流获得的图像显示为右眼图像。根据本技术的第三方面的记录再现设备包括:编码单兀，根据H.264/MPEG-4MVC编码由第一相机捕获的图像和由第二相机捕获的图像，并且将包括关于第一相机和第二相机的光轴间隔的信息、关于会聚角的信息和关于焦距的信息中的至少一个的SEI记录为构成非基视视频流的每个画面的SEI ;记录控制单元，将基视视频流和记录有SIE的非基视视频流记录到记录介质；解码单元，解码记录到记录介质的基视视频流和非基视视频流。技术效果根据本技术，可以向在再现侧的设备提供关于用于图像捕获的多个相机的信息。【附图说明】图1是示出根据本技术实施例的记录再现系统的配置示例的示意图。图2是用于解释H.264/MPEG-4MVC的示意图。图3是用于解释基线长度和会聚角的示意图。图4是示出记录设备的配置示例的框图。图5是示出非基视视频流的数据结构的示意图。图6是不出user_data_unregistered SEI的语法的不意图。图7是示出mdp_id的示意图。图8 是示出 BASELINE LENGTH pack O 的示意图。图9 是示出 CONVERGENCE ANGLE pack O 的示意图。图10是用于解释记录设备的记录处理的流程图。图11是示出再现设备的配置示例的框图。图12是用于解释再现设备的再现处理的流程图。图13是用于解释在图12的步骤S23执行的视差调节处理的流程图。图14是用于解释会聚角、基线长度和视差之间的关系的示意图。图15是用于解释视差的调节的示意图。图16是示出记录再现系统的配置示例的框图。图17是示出记录再现系统的另一个配置示例的框图。图18是示出计算机的配置示例的框图。【具体实施方式】下面将解释本技术的【具体实施方式】。请注意，以下面的顺序进行解释。1.记录再现系统2.记录设备3.再现设备4.修改<记录再现系统>图1是示出根据本技术实施例的记录再现系统的配置示例的示意图。图1的记录再现系统由记录设备1、再现设备2和显不设备3组成。再现设备2和显示设备3通过诸如高清晰度多媒体接口(HDMI)线缆的线缆4连接。记录设备I是能够捕获并记录3D图像的摄像机。在记录设备I的前表面，在相对于从记录设备I到被摄体的方向的右侧位置提供镜头11R，而镜头IlL提供在左侧位置。在记录设备I中，提供了右眼相机和左眼相机。右眼相机具有用于根据镜头IlR收到的光产生R图像的光学系统。左眼相机具有用于根据镜头IlL收到的光产生L图像的光学系统。记录设备I根据H.264/MPEG-4多视图视频编码(MVC)对R图像和L图像编码，并且根据诸如高级视频编解码高清晰度(AVCHD)的记录格式将该R图像和L图像记录到在其中提供的记录介质。在这种情况下，将参考图2解释H.264/MPEG-4MVC。在H.264/MPEG-4MVC中，定义被称为基视视频流的视频流和被称为非基视视频流的视频流。基视视频流是通过例如根据H.264/AVC对L图像和R图像中的L图像编码而获得的流。如图2的垂直方向上的箭头所示，不允许基视的画面经历使用另一视图的画面作为基准图像的预测编码。另一方面，允许非基视的画面经历使用基视的画面作为基准图像的预测编码。例如，当在将L图像用作基视，而将R图像用作非基视时进行编码时，作为由此获得的R图像的视频流的非基视视频流的数据量小于作为L图像的视频流的基视视频流的数据量。因为这是根据H.264/AVC的编码，所以在如图2的水平方向上的箭头所示的时间方向上，基视的画面经历预测编码。非基视的画面不仅经历视图间预测，而且经历时间方向上的预测编码。为了对非基视的画面进行解码，应当预先结束在编码期间参考到的相应基视的画面的解码。根据这种H.264/MPEG-4MVC对由记录设备I捕获的L图像和R图像编码。在记录设备I中，在编码L图像和R图像期间，将作为关于相机的，即本文档来自技高网...

【技术保护点】
一种记录设备，包括：编码单元，根据H.264/MPEG?4MVC编码由第一相机捕获的图像和由第二相机捕获的图像，并且记录包括关于所述第一相机和所述第二相机的光轴间隔的信息、关于会聚角的信息以及关于焦距的信息中的至少一个的SEI，作为构成非基视视频流的每个画面的SEI；以及记录控制单元，将基视视频流和记录有SEI的所述非基视视频流记录到记录介质。

【技术特征摘要】
【国外来华专利技术】2011.05.30 JP 2011-1201871.一种记录设备，包括: 编码单元，根据H.264/MPEG-4MVC编码由第一相机捕获的图像和由第二相机捕获的图像，并且记录包括关于所述第一相机和所述第二相机的光轴间隔的信息、关于会聚角的信息以及关于焦距的信息中的至少一个的SEI，作为构成非基视视频流的每个画面的SEI ;以及 记录控制单元，将基视视频流和记录有SEI的所述非基视视频流记录到记录介质。2.根据权利要求1所述的记录设备，进一步包括: 所述第一相机，捕获左眼图像；以及 所述第二相机，捕获右眼图像， 其中，所述编码单元将由所述第一相机捕获的所述左眼图像编码为所述基视视频流并且将由所述第二相机捕获的所述右眼图像编码为所述非基视视频流。3.根据权利要求1所述的记录设备，其中，所述编码单元记录包括两个值的信息，作为所述关于光轴间隔的信息，并且 通过从所述两个值中的一个减去所述两个值中的另一个表示所述第一相机和所述第二相机的光轴间隔。4.根据权利要求1所述的记录设备，其中，所述编码单元记录包括两个值的信息，作为所述关于会聚角的信息，并且 通过从所述两个值中的一个减去所述两个值中的另一个表示所述第一相机和所述第二相机的会聚角。5.—种记录方法,包括步骤: 根据H.264/MPEG-4MVC编码由第一相机捕获的图像和由第二相机捕获的图像； 记录包括关于所述第一相机和所述第二相机的光轴间隔的信息、关于会聚角的信息以及关于焦距的信息中的至少一个的SEI，作为构成非基视视频流的每个画面的SEI ;以及 将基视视频流和记录有SEI的所述非基视视频流记录到记录介质。6.一种用于使计算机执行处理的程序，所述处理包括步骤: 根据H.264/MPEG-4MVC编码由第一相机捕获的图像和由第二相机捕获的图像； 记录包括关于所述第一相机和所述第二相机的光轴间隔的信息、关于会聚角的信息以及关于焦距的信息中的至少一个的SEI，作为构成非基视视频流的每个画面的SEI ;以及 将基视视频流和记录有S...

【专利技术属性】
技术研发人员：浜田俊也，有留宪一郎，前笃，
申请(专利权)人：索尼公司，
类型：
国别省市：