图像处理装置、控制方法、程序制造方法及图纸

本发明专利技术提出一种为了拍摄预期的构图而进行支援的方法。一种图像处理装置，包括能够进行图像抖动校正的校正部件，且能够输出如下图像，即根据从基于由摄像装置进行的摄像的图像中切出的切出区域而生成的图像，所述图像处理装置包括控制部件，所述控制部件对如下通知进行控制，所述通知与在使由校正部件进行的图像抖动校正有效化的同时能够将切出区域切出的范围相关。范围相关。范围相关。

【技术实现步骤摘要】
【国外来华专利技术】图像处理装置、控制方法、程序


[0001]本专利技术涉及一种图像处理装置等。

技术介绍

[0002]在高倍率的变焦摄影中，拍摄到的图像中手抖动明显的情况多。例如在通过数字变焦(电子变焦)来提高变焦倍率的情况下，由于将图像传感器(影像传感器)上的狭小范围放大显示，因此手抖动的影响更为显著。例如，专利文献1中公开了一种在变焦摄影时提高手抖动校正的灵敏度的照相机系统。
[0003]现有技术文献
[0004]专利文献
[0005]专利文献1：日本专利特开2014
‑
064323号公报

技术实现思路

[0006]专利技术所要解决的问题
[0007]在专利文献1所记载的照相机系统中，越提高变焦倍率，则越增加手抖动检测量，由此减轻手抖动。但是，专利文献1中记载的照相机系统是以光学式手抖动校正为前提，未提及电子式手抖动校正。
[0008]另外，在专利文献1中记载的照相机系统中，例如在高倍率的变焦摄影时使用手抖动校正的情况下，由于通过手抖动校正来进行光轴调整，因此产生难以在用户预期的摄影位置(构图)进行拍摄的问题。另外，例如在电子式手抖动校正中，由于通过手抖动校正，图像传感器上的摄像所利用的像素即有效像素会发生变动，因此也产生相同的问题。
[0009]本专利技术是鉴于所述课题而成，其目的在于提出一种为了拍摄预期的构图(摄影场所)而进行支援的方法。
[0010]解决问题的技术手段
[0011]根据本专利技术的一实施例，为一种图像处理装置，包括能够进行图像抖动校正的校正部件，能够输出如下图像，即根据从基于由摄像装置进行的摄像的图像中切出的切出区域而生成的图像，所述图像处理装置包括控制部件，所述控制部件对如下通知进行控制，所述通知与在使由校正部件进行的图像抖动校正有效化的同时能够将切出区域切出的范围相关。
[0012]专利技术的效果
[0013]通过本专利技术的信息处理装置，可获得可为了拍摄预期的构图而进行支援的效果。
附图说明
[0014]图1是表示图像处理装置的功能结构的一例的框图。
[0015]图2是表示图像处理的流程的一例的流程图。
[0016]图3是表示校正向量与引导指示符的具体例的图。
[0017]图4是表示伴随摄像部的位移的各处理后的图像的具体例的图。
[0018]图5是表示伴随摄像部的位移的各处理后的图像的具体例的图。
[0019]图6是表示伴随摄像部的位移的各处理后的图像的具体例的图。
[0020]图7是表示伴随摄像部的位移的直通图像的转变的一例的图。
[0021]图8是表示智能手机的功能结构的一例的框图。
[0022]图9是表示图像摄像处理的流程的一例的流程图。
[0023]图10是表示手抖动校正模式设定处理的流程的一例的流程图。
[0024]图11是表示变形例中的变焦位置指示符的另一例的图。
[0025]图12是表示变形例中的伴随摄像部的位移的直通图像的转变的一例的图。
[0026]图13是表示变形例中的引导指示符的另一例的图。
[0027]图14是表示记录介质的一例的图。
具体实施方式
[0028]以下，参照附图对用于实施本专利技术的方式的一例进行说明。
[0029]此外，在附图的说明中，对同一元件标注同一符号，有时省略重复的说明。
[0030]另外，本实施方式中记载的构成元件仅为例示，并不旨在将本专利技术的范围限定于它们。
[0031][实施方式][0032]以下，对用于实现本专利技术的图像处理技术、图像摄像技术的实施方式的一例进行说明。
[0033]图1是表示本实施方式的一形态的图像处理装置1的功能结构的一例的框图。图像处理装置1可称为图像摄像装置或图像输出装置。
[0034]图像处理装置1例如包括预变焦部110、手抖动校正变焦部140、以及显示控制部180。
[0035]预变焦部110例如包括预切出部120以及预超分辨率处理部130。另外，手抖动校正变焦部140例如包括电子式手抖动校正部150、切出部160、以及超分辨率处理部170。
[0036]它们例如是图像处理装置1的未图示的处理部(处理装置)或控制部(控制装置)所具有的功能部(功能区块)，且是由中央处理器(Central Processing Unit，CPU)或数字信号处理器(Digital Signal Processor，DSP)等处理器或专用集成电路(Application Specific Integrated Circuit，ASIC)等集成电路而构成。
[0037]预切出部120例如接受通过图像处理装置1的外部的摄像部310拍摄到的图像(以下，称为“影像传感器图像”)作为输入。
[0038]预切出部120例如具有基于预先设定的预变焦倍率、及所输入的影像传感器图像，将影像传感器图像中心部处的规定区域切出的功能。以下，将由预切出部120切出的图像称为“预切出图像”。
[0039]预超分辨率处理部130例如具有对所输入的预切出图像应用提高图像分辨率的超分辨处理，并将其作为预变焦图像输出的功能。
[0040]此外，预超分辨率处理部130可不仅执行超分辨处理，也执行图像的失真校正处理。作为图像的失真校正处理，例如可列举滚动快门失真校正处理或广角失真校正处理等。
[0041]即，预变焦部110例如具有输出将所输入的影像传感器图像的中心部扩大(数字变焦)到规定的预变焦倍率(例如，“p”倍(“p”是大于1的任意常数))的预变焦图像的功能。
[0042]电子式手抖动校正部150例如接受多个帧的预变焦图像(以下，称为“预变焦图像群”)作为输入。
[0043]另外，电子式手抖动校正部150例如也可附加接受通过图像处理装置1的外部的惯性测量部(IMU：Inertial Measurement Unit)320获取的惯性信息作为输入。
[0044]此处，所谓惯性信息，例如是与摄像部310的倾斜或平移相关的信息，例如是与通过惯性测量部320中的三轴陀螺仪传感器检测到的摄像部310的倾斜或通过惯性测量部320中的加速度传感器检测到的摄像部310的平移相关的信息。
[0045]电子式手抖动校正部150基于所输入的预变焦图像群，例如算出预变焦图像群的帧间的光流。并且，电子式手抖动校正部150具有基于算出的光流及惯性信息中的至少一者，算出预变焦图像群的帧间转变中的手抖动校正转换(手抖动校正映射)的功能。
[0046]此处，所谓手抖动校正转换，是用于将切出部160中的进行手抖动校正之前的切出区域(以下，称为“校正前切出区域”)映射至手抖动校正后的切出区域(以下，称为“校正后切出区域”)的转换。
[0047]校正后切出区域例如是作为对输入至切出部160的预变焦图像应用了手抖动校正转换的结果而获得的、与校正前切出区域对应的为了方便起见的切出区域，且是应用了手抖动本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像处理装置，包括能够进行图像抖动校正的校正部件，且能够输出如下图像，即根据从基于由摄像装置进行的摄像的图像中切出的切出区域而生成的图像，所述图像处理装置包括控制部件，所述控制部件对如下通知进行控制，所述通知与在使由所述校正部件进行的所述图像抖动校正有效化的同时能够将所述切出区域切出的范围相关。2.根据权利要求1所述的图像处理装置，其中所述控制部件基于伴随所述摄像装置的运动的所述切出区域的变移、及决定所述图像抖动校正有效的范围的设定值，对所述通知进行控制。3.根据权利要求2所述的图像处理装置，还包括辅助信息生成部件，所述辅助信息生成部件生成辅助信息，所述辅助信息是基于所述变移与所述设定值的信息、且能够确定在使所述图像抖动校正有效化的同时能够将所述切出区域切出的范围。4.根据权利要求3所述的图像处理装置，其中所述辅助信息生成部件生成所述辅助信息，所述辅助信息至少包含与基于所述变移的规定位置对应的指示符、及在使所述图像抖动校正有效化的同时能够将所述切出区域切出的范围的外缘，所述控制部件使所述辅助信息显示于显示装置并进行所述通知。5.根据权利要求4所述的图像处理装置，其中所述控制部件使所述辅助信息中包含的所述指示符的位置伴随所述规定位置的变化而变化。6.根据权利要求4或5所述的图像处理装置，其中所述控制部件使基于所述切出区域而生成的图像、及所述辅助信息显示于所述显示装置。7.根据权利要求4至6中任一项所述的图像处理装置，其中所述控制部件基于所述变移与所述设定值来使所述辅助信息的显示形态变化。8.根据权利要求7所述的图像处理装置，其中所述控制部件基于所述变移的大小与所述设定值的关系来使所述指示符的显示形态变化。9.根据权利要求2所述的图像处理装置，其中所述控制部件将引导信息声音输出至声音输出装置并进行所述通知，所述引导信息是基于所述变移与所述设定值的引导信息、且能够确定在使所述图像抖动校正有效化的同时能够将所述切出区域切出的范围。10.根据权利要求9所述的图像处理装置，其中所述控制部件基于所述变移与所述设定值来使...

【专利技术属性】
技术研发人员：佐藤真希，平本一博，
申请(专利权)人：株式会社摩如富，
类型：发明
国别省市：