发送装置、发送方法、接收装置和接收方法制造方法及图纸

本发明专利技术的目的是以在接收侧可以成功实现向后兼容的方式传输具有高帧速率的超高清图像数据。获得以下：基本格式图像数据，用于通过处理具有高帧速率的超高清图像数据来获得具有基本帧速率的高清图像；第一扩展格式图像数据，用于获得具有基本帧速率的超高清图像；以及第二扩展格式图像数据，用于获得具有高帧速率的超高清图像。生成包括基本格式图像数据的编码图像数据的基本视频流和包括第一扩展格式图像数据的编码图像数据和第二扩展格式图像数据的编码图像数据的两个或一个扩展视频流。传输包括基本流和扩展视频流的预定格式的内容。

【技术实现步骤摘要】
【国外来华专利技术】发送装置、发送方法、接收装置和接收方法
本技术涉及一种发送装置、一种发送方法、一种接收装置以及一种接收方法，具体地，涉及一种发送装置等，被配置为以高帧速率传输超高清图像数据。
技术介绍
考虑到用于高清固定接收器的图像服务(视频服务)和用于中等清晰度移动接收器的图像服务共享流，以便在固定接收器和移动接收器共享相同的传输频带的接收环境中有效地使用传输位速率，从而相比于单独提供用于固定接收器的服务和用于移动接收器的服务的联播服务，总位速率进一步降低。例如，专利文献1描述了以可扩展的方式执行媒体编码，以生成用于低清晰度图像服务的基本层流和用于高清图像服务的扩展层流，并且传输包括这两个流的广播信号。另一方面，在需要运动场景等的流畅和明显的运动的情况下，需要具有高快门速度和高帧速率的高帧速率视频服务。在提供高帧速率服务的情况下，假设将由相机的高速帧快门拍摄的运动图像转换为待发送的较低频运动图像序列。利用高速帧快门拍摄的图像具有改善运动模糊和实现高清图像质量的效果，但是由于在需要与传统的正常帧速率接收器兼容的情况下使得并非所有而是仅仅一部分高帧速率视频被显示，所以具有选通(strobe，频闪)效应的问题。本申请人已经提出了一种技术，用于转换由高速帧快门拍摄的图像的素材，并且在用于正常帧速率解码的传统接收器中以特定或更高图像质量显示转换素材(参考专利文献2)。引用列表专利文献专利文献1：日本专利申请国家公开(公开)No.2008-543142专利文献2：国际公开No.2015/076277
技术实现思路
本专利技术要解决的问题本技术的一个目的是传输具有高帧速率的超高清图像数据，从而优选实现接收侧的向后兼容性。解决问题的方案本技术的概念在于一种发送装置，包括：图像处理单元，被配置为处理具有高帧速率的超高清图像数据，以获得用于获得具有基本帧速率的高清图像的基本格式的图像数据、用于获得具有基本帧速率的超高清图像的第一扩展格式的图像数据、以及用于获得具有高帧速率的超高清图像的第二扩展格式的图像数据；图像编码单元，其被配置为生成包括基本格式的图像数据的编码图像数据的基本视频流、以及分别包括第一扩展格式的图像数据的编码图像数据和第二扩展格式的图像数据的编码图像数据的两个扩展视频流、或者包括第一扩展格式的图像数据的编码图像数据和第二扩展格式的图像数据的编码图像数据的一个扩展视频流；以及发送单元，其被配置为传输包括所述基本流和所述两个或一个扩展视频流的预定格式的容器，其中，所述图像处理单元以两个时间上连续的图片为单位对具有高帧速率的超高清图像数据进行第一比率混合处理，以获得具有基本帧速率的第一超高清图像数据，以两个时间上连续的图片为单位进行第二比率混合处理，以获得第二扩展格式的图像数据，对第一图像数据进行缩减处理，以获得基本格式的图像数据，并且在通过对基本格式的图像数据进行扩大处理而获得的具有基本帧速率的第二超高清图像数据与第一图像数据之间取差值，以获得第一扩展格式的图像数据。根据本技术，图像处理单元处理具有高帧速率的超高清图像数据，以获得用于获得具有基本帧速率的高清图像的基本格式的图像数据、用于获得具有基本帧速率的超高清图像的第一扩展格式的图像数据、以及用于获得具有高帧速率的超高清图像的第二扩展格式的图像数据。在此处，通过以两个时间上连续的图片为单位对具有高帧速率的超高清图像数据进行第二比率混合处理，获得第二扩展格式的图像数据。通过对通过以两个时间上连续的图片为单位进行第一比率混合处理而获得的具有基本帧速率的第一超高清图像数据进行缩减处理，获得基本格式的图像数据。此外，通过在通过对基本格式的图像数据进行扩大处理而获得的具有基本帧速率的第二超高清图像数据和第一图像数据之间取差值，获得第一扩展格式的图像数据。图像编码单元生成包括基本格式的图像数据的编码图像数据的基本视频流、以及分别包括第一扩展格式的图像数据的编码图像数据和第二扩展格式的图像数据的编码图像数据的两个扩展视频流、或者包括第一扩展格式的图像数据的编码图像数据和第二扩展格式的图像数据的编码图像数据的一个扩展视频流。然后，发送单元传输包括所述基本流和所述两个或一个扩展视频流的预定格式的容器。根据本技术，传输以下：基本视频流，包括用于获得具有基本帧速率的高清图像的基本格式的图像数据的编码图像数据；以及两个或一个扩展视频流，包括用于获得具有基本帧速率的超高清图像的第一扩展格式的图像数据的编码图像数据和用于获得具有高帧速率的超高清图像的第二扩展格式的图像数据的编码图像数据。因此，传输具有高帧速率的超高清图像数据，在接收侧具有更好向后兼容性。例如，具有处理具有基本帧速率的高清图像数据的解码能力的接收器可以仅处理基本视频流，并且可以显示具有基本帧速率的高清图像。此外，例如，具有处理具有基本帧速率的超高清图像数据的解码能力的接收器可以处理基本视频流和扩展流，并且可以显示具有基本帧速率的超高清图像。此外，例如，具有处理具有高帧速率的超高清图像数据的解码能力的接收器可以处理基本视频流和扩展流，并且可以显示具有高帧速率的超高清图像。另外，根据本技术，通过对通过以两个时间上连续的图片为单位对具有基本帧速率的超高清图像数据进行第一比率混合处理而获得的具有基本帧速率的第一超高清图像数据进行缩减处理，获得基本格式的图像数据。因此，通过仅处理基本视频流而显示的具有基本帧速率的高清图像在选通效应中被限制为平滑图像。另外，根据本技术，例如，可以进一步提供信息插入单元，其被配置为将指示在空间上可扩展的标识信息插入到第一扩展格式的图像数据的编码图像数据和/或与编码的图像数据对应的容器位置中。通过插入的标识信息，接收侧可以容易地识别出第一扩展格式的图像数据用于获得超高清图像数据。在这种情况下，例如，信息插入单元可以进一步插入指示在空间上可扩展的比率的信息。接收侧可以通过使用指示在空间上可扩展的比率的信息来适当地执行空间上可扩展的处理，从而优选地获得超高清图像数据。此外，根据本技术，例如，可以进一步提供信息插入单元，其被配置为将指示在时间上可扩展的标识信息插入到第二扩展格式的图像数据的编码图像数据和/或与编码的图像数据对应的容器位置中。通过插入的标识信息，接收侧可以容易地识别出第二扩展格式的图像数据用于获得具有高帧速率的图像数据。在这种情况下，例如，信息插入单元可以进一步插入指示通过执行所述混合处理而获得基本格式的图像数据的标识信息。通过插入的标识信息，接收侧可以容易地识别出通过执行混合处理获得基本格式的图像数据。此外，在这种情况下，例如，信息插入单元可以进一步插入混合处理的比率信息(关于第一比率的信息和关于第二比率的信息)。接收侧可以通过使用混合处理的比率信息来适当地执行时间上可扩展的处理，从而优选地获得具有高帧速率的图像数据。此外，根据本技术，例如，还提供了一种发送单元，其被配置为传输具有用于促使接收装置获得所述基本视频流和所述两个或一个扩展视频流的元信息的元文件，并且指示可扩展性的对应性的信息插入到所述元文件中。接收侧可以容易地从指示插入到元文件中的可扩展性的对应性的信息中识别可扩展性的对应性，并且可以获得并且有效地仅处理所需要的流或编码的图像数据。此外，本技术的另一概念是一种接收装置，包括：接收单元，其本文档来自技高网...

【技术保护点】
一种发送装置，包括：图像处理单元，被配置为处理具有高帧速率的超高清图像数据，以获得基本格式的图像数据，所述基本格式的图像数据用于获得具有基本帧速率的高清图像；第一扩展格式的图像数据，所述第一扩展格式的图像数据用于获得具有基本帧速率的超高清图像；以及第二扩展格式的图像数据，所述第二扩展格式的图像数据用于获得具有高帧速率的超高清图像；图像编码单元，被配置为生成包括所述基本格式的图像数据的编码图像数据的基本视频流，以及生成分别包括所述第一扩展格式的图像数据的编码图像数据和所述第二扩展格式的图像数据的编码图像数据的两个扩展视频流，或者生成包括所述第一扩展格式的图像数据的编码图像数据和所述第二扩展格式的图像数据的编码图像数据的一个扩展视频流；以及发送单元，被配置为发送包括所述基本流和所述两个扩展视频流或所述一个扩展视频流的预定格式的容器，其中，所述图像处理单元以两个时间上连续的图片为单位对具有高帧速率的超高清图像数据进行第一比率混合处理，以获得具有基本帧速率的第一超高清图像数据，以两个时间上连续的图片为单位进行第二比率混合处理，以获得所述第二扩展格式的图像数据，对所述第一图像数据进行缩减处理，以获得基本格式的图像数据，并且在通过对所述基本格式的图像数据进行扩大处理而获得的具有基本帧速率的第二超高清图像数据和所述第一图像数据之间取差值，以获得第一扩展格式的图像数据。...

【技术特征摘要】
【国外来华专利技术】2015.09.30 JP 2015-1949941.一种发送装置，包括：图像处理单元，被配置为处理具有高帧速率的超高清图像数据，以获得基本格式的图像数据，所述基本格式的图像数据用于获得具有基本帧速率的高清图像；第一扩展格式的图像数据，所述第一扩展格式的图像数据用于获得具有基本帧速率的超高清图像；以及第二扩展格式的图像数据，所述第二扩展格式的图像数据用于获得具有高帧速率的超高清图像；图像编码单元，被配置为生成包括所述基本格式的图像数据的编码图像数据的基本视频流，以及生成分别包括所述第一扩展格式的图像数据的编码图像数据和所述第二扩展格式的图像数据的编码图像数据的两个扩展视频流，或者生成包括所述第一扩展格式的图像数据的编码图像数据和所述第二扩展格式的图像数据的编码图像数据的一个扩展视频流；以及发送单元，被配置为发送包括所述基本流和所述两个扩展视频流或所述一个扩展视频流的预定格式的容器，其中，所述图像处理单元以两个时间上连续的图片为单位对具有高帧速率的超高清图像数据进行第一比率混合处理，以获得具有基本帧速率的第一超高清图像数据，以两个时间上连续的图片为单位进行第二比率混合处理，以获得所述第二扩展格式的图像数据，对所述第一图像数据进行缩减处理，以获得基本格式的图像数据，并且在通过对所述基本格式的图像数据进行扩大处理而获得的具有基本帧速率的第二超高清图像数据和所述第一图像数据之间取差值，以获得第一扩展格式的图像数据。2.根据权利要求1所述的发送装置，还包括：信息插入单元，被配置为将指示在空间上可扩展的标识信息插入到所述第一扩展格式的图像数据的编码图像数据中。3.根据权利要求2所述的发送装置，其中，所述信息插入单元还将指示在空间上可扩展的比率的信息插入到所述第一扩展格式的图像数据的编码图像数据中。4.根据权利要求1所述的发送装置，还包括：信息插入单元，被配置为将指示在时间上可扩展的标识信息插入到所述第二扩展格式的图像数据的编码图像数据中。5.根据权利要求4所述的发送装置，其中，所述信息插入单元还将指示通过执行混合处理而获得所述基本格式的图像数据的识别信息插入到所述第二扩展格式的图像数据的编码图像数据中。6.根据权利要求5所述的发送装置，其中，所述信息插入单元还将关于所述第一比率的信息和关于所述第二比率的信息插入到所述第二扩展格式的图像数据的编码图像数据中。7.根据权利要求1所述的发送装置，还包括：信息插入单元，被配置为将指示在空间上可扩展的标识信息插入到与所述第一扩展格式的图像数据的编码图像数据对应的容器的层中。8.根据权利要求7所述的发送装置，其中，所述信息插入单元还将指示在空间上可扩展的比率的信息插入到与所述第一扩展格式的图像数据的编码图像数据对应的容器的层中。9.根据权利要求1所述的发送装置，还包括：信息插入单元，被配置为将指示在时间上可扩展的标识信息插入到与所述第二扩展格式的图像数据的编码图像数据对应的容器的层中。10.根据权利要求9所述的发送装置，其中，所述信息插入单元还将指示通过执行混合处理而获得所述基本格式的图像数据的识别信息插入到与所述第二扩展格式的图像数据的编码图像数据对应的容器的层中。11.根据权利要求10所述的发送装置，其中，所述信息插入单元还将关于所述第一比率的信息和关于所述第二比率的信息插入到与所述第二扩展格式的图像数据的编码图像数据对应的容器的层中。12.根据权利要求1所述的发送装置，还包括：发送单元，被配置为发送具有用于促使接收装置获得所述基本视频流和所述两个扩展视频流或所述一个扩展视频流的元信息的元文件，其中，指示可扩展性的对应性的信息插入到所述元文件中。13.一种发送方法，包括：图像处理步骤，用于处理具有高帧速率的超高清图像数据，以获得基本格式的图像数据，所述基本格式的图像数据用于获得具有基本帧速率的高清图像；第一扩展格式的图像数据，所述第一扩展格式的图像数据用于获得具有基本帧速率的超高清图像；以及第二扩展格式的图像数据，所述第二扩展格式的图像数据用于获得具有高帧速率的超高清图像；图像编码步骤，用于生成包括所述基本格式的图像数据的编码图像数据的基本视频流，以及生成分别包括所述第一扩展格式的图像数据的编码图像数据和所述第二扩展格式的图像数据的编码图像数据的两个扩展视频流，或者生成包括所述第一扩展格式的图像数据的编码图像数据和所述第二扩展格式的图像数据的编码图像数据的一个扩展视频流；以及发送步骤，用于由发送单元发送包括所述基本流和所述两个扩展视频流或所述一个扩展视频流的预定格式的容器，其中，在所述图像处理步骤中，以两个时间上连续的图片为单位对具有高帧速率的超高清图像数据进行第一比率混合处理，以获得具有基本帧速率的第一超高清图像数据，以两个时间上连续的图片为单位进行第二比率混合处理，以获得所述第二扩展格式的图像数据，对所述第一图像数据进行缩减处理，以获得基本格式的图像数据，并且在通过对所述基本格式的图像数据进行扩大处理而获得的具有基本帧速率的第二超高清图...

【专利技术属性】
技术研发人员：塚越郁夫，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本,JP