图像处理设备、摄像设备、图像处理方法和存储介质技术

本发明专利技术提供图像处理设备、摄像设备、图像处理方法和存储介质。所述图像处理设备包括：图像数据生成单元(106，108)，其被配置为通过利用摄像光学系统的摄像来生成记录图像数据；以及信息添加单元(106)，其被配置为向所述记录图像数据添加信息。当所述摄像光学系统是变形光学系统时，所述信息添加单元被配置为向所述记录图像数据添加关于所述变形光学系统的压缩比的信息以及指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息。

【技术实现步骤摘要】
图像处理设备、摄像设备、图像处理方法和存储介质
本专利技术涉及各自具有用于减小(校正)图像模糊的图像稳定功能的图像处理设备和摄像设备。
技术介绍
已知一种摄像方法，该摄像方法通过使用变形镜头在水平方向上压缩(挤压)光学图像，并且进行解压缩(去挤压)处理作为用于恢复通过拍摄挤压光学图像而获得的压缩图像数据的图像处理，从而提供电影放映图像(2.39：1)。作为针对由此获得的图像的图像稳定方法，日本特许3278206公开了一种方法，该方法从通过使用变形镜头的摄像而获得的挤压图像数据中检测运动矢量，并在考虑到通过变形镜头进行的挤压的情况下，通过使用运动矢量对去挤压的图像数据进行图像稳定处理(电子图像稳定)。此外，日本特开2015-216510公开了一种摄像方法，该摄像方法拍摄并记录通过图像稳定处理获得的图像数据，通过使用关于图像稳定处理的信息来消除记录图像数据中的图像稳定效果，然后对已消除图像稳定效果的图像数据再次进行图像稳定处理。然而，日本特开2015-216510没有公开任何适合于充分校正畸变和渐晕(畸变和渐晕均是使用变形镜头的摄像所特有的)的图像稳定处理。
技术实现思路
本专利技术提供了各自能够对通过使用变形镜头的摄像而获得的图像数据进行良好的图像稳定处理和良好的校正处理的图像处理设备和摄像设备。作为本专利技术的一方面，本专利技术提供了一种图像处理设备，所述图像处理设备包括被配置为执行多个任务的至少一个处理器或电路，所述多个任务包括：图像数据生成任务，其被配置为通过经由摄像光学系统的摄像来生成记录图像数据；以及信息添加任务，其被配置为向所述记录图像数据添加信息。当所述摄像光学系统是变形光学系统时，所述信息添加任务被配置为向所述记录图像数据添加关于所述变形光学系统的压缩比的信息、以及指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息。作为本专利技术的另一方面，本专利技术提供了一种图像处理设备，所述图像处理设备包括：图像数据生成单元，其被配置为对构成通过经由摄像光学系统的摄像所生成的拍摄图像数据的各个帧图像进行电子图像稳定以产生记录图像数据，所述电子图像稳定用于剪切所述拍摄图像数据的帧图像的一部分以减小图像模糊；以及处理单元，其被配置为对构成记录图像数据的帧图像进行包括侧倾校正和畸变校正中的至少一个的校正处理。当所述摄像光学系统是变形光学系统时，所述处理单元被配置为限制所述校正处理。作为本专利技术的又一方面，本专利技术提供了一种摄像设备，所述摄像设备包括：图像传感器，其被配置为拍摄通过摄像光学系统所形成的光学图像；以及上述图像处理设备。作为本专利技术的再一方面，本专利技术提供了一种图像处理设备，所述图像处理设备包括被配置为执行多个任务的至少一个处理器或电路，所述多个任务包括：信息读出任务，其被配置为读出向通过摄像所生成的记录图像数据添加的信息；以及后处理任务，其被配置为对所述记录图像数据进行后处理。所述后处理任务被配置为基于a)关于变形光学系统的压缩比的信息以及b)指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息，对所述记录图像数据进行扩展处理作为所述后处理，所述变形光学系统是在所述摄像中使用的摄像光学系统。作为本专利技术的再一方面，本专利技术提供了一种图像处理方法，所述图像处理方法包括如下步骤：通过经由摄像光学系统的摄像来生成记录图像数据的步骤；以及向所述记录图像数据添加信息的步骤。在添加所述信息的步骤中，当所述摄像光学系统是变形光学系统时，向所述记录图像数据添加关于所述变形光学系统的压缩比的信息以及指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息。作为本专利技术的再一方面，本专利技术提供了一种图像处理方法，所述图像处理方法包括如下步骤：对构成通过经由摄像光学系统的摄像所生成的拍摄图像数据的各个帧图像，进行电子图像稳定以产生记录图像数据的步骤，所述电子图像用于稳定剪切所述拍摄图像数据的帧图像的一部分以减小图像模糊；以及对构成记录图像数据的帧图像进行包括侧倾校正和畸变校正中的至少一个的校正处理的步骤。当所述摄像光学系统是变形光学系统时，限制所述校正处理。作为本专利技术的再一方面，本专利技术提供了一种图像处理方法，所述图像处理方法包括如下步骤：读出向通过摄像所生成的记录图像数据添加的信息的步骤；以及对所述记录图像数据进行后处理的步骤。在进行所述后处理的步骤中，基于a)关于变形光学系统的压缩比的信息以及b)指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息，对所述记录图像数据进行扩展处理作为所述后处理，所述变形光学系统是在所述摄像中使用的摄像光学系统。一种非暂时性计算机可读存储介质，其存储使计算机执行上述图像处理方法的计算机程序。通过以下描述和附图，本专利技术的其它方面将变得清楚。附图说明图1是示出作为本专利技术的实施例的摄像设备的结构的框图。图2示出了本专利技术的实施例1和实施例2中的坐标系。图3是实施例1中进行的处理的流程图。图4是实施例1中进行的其它处理的流程图。图5是实施例2中进行的处理的流程图。图6示出了实施例2中的用户界面的显示示例。图7A至图7G示出了本专利技术的实施例3中的记录图像和编辑处理之后的图像。图8是实施例3中进行的处理的流程图。具体实施方式下文中将参照附图来描述本专利技术的典型实施例。[实施例1]图1示出作为本专利技术的第一实施例(实施例1)的包括图像处理设备的摄像设备的结构。本实施例的摄像设备是镜头可更换数字照相机或镜头一体型数字照相机。本专利技术的其它实施例包括除了上述数字照相机以外的各种摄像设备。在本实施例中，由于用户的手抖等而施加到摄像设备的抖动被称为“照相机抖动”，并且由照相机抖动而导致的拍摄图像的模糊被称为“图像模糊”。此外，如图2中所示，在与摄像光学系统的光轴正交的平面中在垂直方向上延伸的轴(水平旋转的中心轴)被称为“横摆轴”，在水平方向上延伸的轴(垂直旋转的中心轴)被称为“俯仰轴”。此外，在光轴方向上延伸的轴(绕光轴的旋转的中心轴)被称为“侧倾轴”。在图1中，作为摄像光学系统101的摄像镜头包括用于进行变焦的变焦透镜102、用作用于进行光学图像模糊校正(镜头图像稳定)的校正透镜103的移位透镜、用于进行调焦的调焦透镜104、以及用于调节光量的光圈(未示出)。摄像镜头101使来自被摄体(未示出)的光在图像传感器105上形成光学图像(被摄体图像)。由CMOS传感器等构成的图像传感器105光电转换由摄像镜头101形成的光学图像以生成摄像信号，并将摄像信号输出至信号处理器106。通过马达127使图像传感器105在与光轴正交的平面中在水平方向和垂直方向上移位，并且通过马达127使图像传感器105绕光轴旋转。这使得可以通过图像传感器105的移动(移位和旋转)来进行传感器图像稳定作为图像模糊校正。信号处理器106对从图像传感器105输出的摄像信号进行诸如白平衡调整和伽马校正等的信号处本文档来自技高网...

【技术保护点】
1.一种图像处理设备，包括：/n图像数据生成单元(106，108)，其被配置为通过经由摄像光学系统的摄像来生成记录图像数据；以及/n信息添加单元(106)，其被配置为向所述记录图像数据添加信息，/n其特征在于，在所述摄像光学系统是变形光学系统的情况下，所述信息添加单元被配置为向所述记录图像数据添加关于所述变形光学系统的压缩比的信息、以及指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息。/n

【技术特征摘要】
20191212 JP 2019-224225;20200929 JP 2020-1640551.一种图像处理设备，包括：
图像数据生成单元(106，108)，其被配置为通过经由摄像光学系统的摄像来生成记录图像数据；以及
信息添加单元(106)，其被配置为向所述记录图像数据添加信息，
其特征在于，在所述摄像光学系统是变形光学系统的情况下，所述信息添加单元被配置为向所述记录图像数据添加关于所述变形光学系统的压缩比的信息、以及指示构成所述记录图像数据的各个帧图像中所述变形光学系统的中心位置的信息。


2.根据权利要求1所述的图像处理设备，其中：
所述图像数据生成单元被配置为对通过摄像所生成的拍摄图像数据的各个帧图像进行电子图像稳定，所述电子图像稳定用于剪切所述拍摄图像数据的帧图像的一部分以减小图像模糊；
所述记录图像数据的各个帧图像是通过所述电子图像稳定剪切的图像区域的数据；以及
所述信息添加单元被配置为向所述记录图像数据添加关于所述图像区域的剪切倍率的信息。


3.根据权利要求2所述的图像处理设备，其中，指示所述中心位置的信息是指示所述图像区域的剪切位置的信息。


4.根据权利要求2所述的图像处理设备，其中，所述信息添加单元被配置为还向所述记录图像数据添加关于所述记录图像数据的帧图像的侧倾角的信息以及关于所述记录图像数据的帧图像的畸变的信息。


5.根据权利要求1所述的图像处理设备，其中，在从包括所述摄像光学系统的可更换镜头所获取的信息指示所述摄像光学系统是所述变形光学系统的情况下，所述信息添加单元被配置为向所述记录图像数据添加关于所述压缩比的信息以及指示所述中心位置的信息。


6.根据权利要求1所述的图像处理设备，还包括：处理单元(106)，其被配置为对所述记录图像数据的帧图像进行包括侧倾校正和畸变校正中的至少一个的校正处理，
其中，在所述摄像光学系统是所述变形光学系统的情况下，所述处理单元被配置为限制所述校正处理。


7.根据权利要求1所述的图像处理设备，其中，关于所述压缩比的信息是基于用户输入的压缩比的信息。


8.一种图像处理设备，包括：
图像数据生成单元(106，108)，其被配置为对构成通过经由摄像光学系统的摄像所生成的拍摄图像数据的各个帧图像进行电子图像稳定以产生记录图像数据，所述电子图像稳定用于剪切所述拍摄图像数据的帧图像的一部分以减小图像模糊；以及
处理单元(106)，其被配置为对构成记录图像数据的帧图像进行包括侧倾校正和畸变校正中的至少一个的校正处理，
其特征在于，在所述摄像光学系统是变形光学系统的情况下，所述处理单元被配置为限制所述校正处理。


9.一种摄像设备，其特征在于，包括：
图像传感器(105)，其被配置为拍摄通过摄像光学系统所形成的光学图像；以及
根据权利要求1至8中任一项所述的图像处理设备。


10.根据权利要求9所述的摄像...

【专利技术属性】
技术研发人员：中岛道纪，上村英孝，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本;JP