图像处理装置和图像处理方法制造方法及图纸

本发明专利技术公开了一种图像处理装置和图像处理方法。其中，该图像处理装置包括图像选择单元和加法处理单元，该图像选择单元根据视点旋转角从具有不同视点的多个视点图像中选择视点图像，该加法处理单元通过添加图像选择单元中所选择的视点图像来生成具有新视点的视点图像。

【技术实现步骤摘要】
图像处理装置和图像处理方法
本技术涉及图像处理装置和图像处理方法，并且是可自由地并且容易地改变立体视觉的方向的技术。
技术介绍
在相关领域内，已经广泛地使用内窥镜，以便观察体腔或管道内部。作为内窥镜，存在着软管内窥镜和硬管内窥镜，软管内窥镜可通过将柔性插入单元插入弯管、体腔等等内来观察内部，硬管内窥镜可通过将刚性插入单元直线地插入目标部分中来观察内部。作为软管内窥镜，例如，存在着光学内窥镜（其中，使用光纤，将在前端上使用成像光学系统成像的光学图像传输至目镜单元），或者存在着电子内窥镜（其中，通过在前端设置成像光学系统和成像元件，利用成像元件将使用成像光学系统成像的主体的光学图像转换成电信号而传输至外部监视器）。在硬管内窥镜中，使用中继光学系统将主体的光学图像传输至目镜单元，其中，通过从前端链接透镜系统来配置该中继光学系统。而且，作为内窥镜，立体视觉内窥镜已经商业化，以便容易地观察管道、体腔等等内的内壁表面上微小的不规则物。例如，在日本未经审查的专利申请公开号06-059199中，使用瞳孔分割棱镜将使用中继光学系统传输的主体的光学图像分成绕该中继光学系统的光轴的左主体光学图像和右主体光学图像。而且，使用成像元件分别将使用瞳孔分割棱镜分割的左主体光学图像和右主体光学图像转换成图像信号。此外，瞳孔分割棱镜和两个成像元件使用旋转机构绕中继光学系统的光轴旋转。通过这样配置内窥镜，能够在立体视觉内自由地改变方向，而不移动内窥镜。
技术实现思路
同时，当采用以下配置：即，使用瞳孔分割棱镜将物体的光学图像分成绕中继光学系统的光轴的左主体光学图像和右主体光学图像的配置，或瞳孔分割棱镜和两个成像元件绕中继光学系统的光轴旋转的配置时，内窥镜等等的光学系统变大，进而难以进行微型化。此外，由于瞳孔分割棱镜和两个成像元件机械旋转，所以人们担心由于图像旋转会容易发生故障等等。此外，由于使用机械旋转机构，所以难以容易地并且高精度地进行调节。此外，为了补偿装配误差、时间造成的退化、温度变化等等，使用校准。最好提供一种可自由容易地改变立体视觉的方向的图像处理装置、图像处理方法及其程序。根据本技术的第一实施方式，提供了一种图像处理装置，包括：图像选择单元，根据视点旋转角从具有不同视点的多个视点图像中选择视点图像；以及加法处理单元，通过添加图像选择单元中所选择的视点图像，生成具有新视点的视点图像。在本技术中，具有不同视点的多个视点图像，例如，具有不同视点的多个视点图像是根据包括通过成像单元的成像光学系统输入的光束的通道信息和光束的光量信息的光束信息生成的。此外，在图像选择单元内的每个区域内，从具有不同视点的多个视点图像中选择根据视点旋转角设置的多个视点区域内所包含的视点的视点图像，例如，左眼图像的视点区域和右眼图像的视点区域。在加法处理单元内的每个区域内，添加每个区域内所选择的视点图像，并且生成具有新视点的视点图像，例如，左眼图像和右眼图像。此外，选择所有的视点图像，或者选择具有左眼图像和右眼图像的视点区域内所包含的视点的视点图像，从而通过添加所选择的视点图像，生成平面图像。而且，通过控制左眼图像的视点区域和右眼图像的视点区域之间的间隙，调节左眼图像和右眼图像的视差量。增益调节与相对于通过添加视点图像所生成的具有新视点的视点图像添加的视点图像的数量对应，即，在这种增益调节内，所添加的视点图像的数量较小时将增益设置为较高，进而排除了由于所添加的视点图像的数量差异造成的影响。此外，通过根据视点旋转角执行图像旋转处理，根据视点旋转角确定具有新视点的视点图像的方向。设置视点旋转角时，例如，设置成像单元相对于重力方向和初始方向中的任一个的角度、在成像单元内成像的图像旋转时变为与参考图像最相似的图像的角度、或用户指定的角度作为视点旋转角。此外，通过设置图像解码单元（其对于通过对具有不同视点的多个视点图像执行编码处理所生成的编码信号执行解码处理），并使用具有不同视点的多个视点图像的图像信号（其通过对编码信号执行解码处理所获得）生成具有新视点的视点图像。根据本技术的第二实施方式，提供了一种图像处理方法，包括：根据视点旋转角从具有不同视点的多个视点图像中选择视点图像；以及通过添加所选择的视点图像，生成具有新视点的视点图像。根据本技术，根据视点旋转角从具有不同视点的多个视点图像中选择视点图像，并且添加所选的视点图像，从而生成具有新视点的视点图像。因此，改变视点旋转角时，通过添加根据视点旋转角所选择的所选视点图像，生成左眼图像和右眼图像，从而能够容易自由地改变立体视觉的方向。附图说明图1A到1C为示出了内窥镜的示图；图2为示出了应用图像处理装置的内窥镜装置的配置实例的示图；图3为示出了光场照相机的配置实例的示图；图4为多个视点图像的示例图；图5A和5B为例证视点设置的示图；图6为示出了视点1的图像处理单元的配置实例的示图；图7为示出了图像选择单元的配置实例的示图；图8为示出了视点旋转角设置单元的配置实例的示图；图9为示出了内窥镜中的一部分图像处理操作的流程图；图10A到10D为例证旋转角和图像选择单元内所选择的视点图像（视点的数量为“256”时）之间的关系的示图；图11A到11D为例证旋转角和图像选择单元内所选择的视点图像（视点的数量为“16”时）之间的关系的示图；图12为示出了内窥镜的配置实例的示图；图13为示出了内窥镜的一部分操作的流程图；图14为示出了图像处理装置的配置实例的示图；图15为例证图像处理装置的操作的流程图；图16A到16C为例证在水平方向旋转视点时的操作的示图；图17A到17C为例证执行视差调节时的操作的示图；图18是将视点设为四组时的示图；图19是将视点设为八组时的示图；以及图20为示出了二维加法处理单元的示图。具体实施方式在后文中，描述本技术的实施方式。此外，按照以下顺序进行描述。1、第一实施方式2、第二实施方式3、其他实施方式1、第一实施方式1-1、内窥镜的外观图1A到1C示出了内窥镜。图1A为硬管内窥镜的外观，图1B示出了软管内窥镜的外观，图1C示出了胶囊内窥镜的内部配置。硬管内窥镜包括插入观察目标内的插入单元11a、由用户把持的把持部12、以及成像单元23。插入单元11a包括图像引导轴以及光导纤维。通过设置在光导纤维和插入单元11a的前端的成像透镜，将光源单元（稍后描述）发出的光照射到观察目标。此外，通过成像透镜以及图像引导轴内的中继光学系统，将观察目标的主体光输入到成像单元23。与硬管内窥镜相似，软管内窥镜也包括插入观察目标内的插入单元11b、由用户把持的把持部12、以及成像单元23。软管内窥镜的插入单元11b具有柔性，并且在前端设置有成像光学系统22或者成像单元23。胶囊内窥镜在外壳13内（例如）设置有光源单元21、成像光学系统22、成像单元23、执行稍后描述的各种信号处理的处理单元91、在处理之后执行发送图像信号等的无线通信单元92、电源单元93等。1-1、内窥镜装置的配置图2示出了应用根据本技术的实施方式的图像处理装置的内窥镜装置的配置实例。内窥镜装置10包括光源单元21、成像光学系统22、成像单元23、图像分割单元24、视点1到n的图像处理单元30-1到30-n、以及图像选择单元61。内窥镜装置10进一步本文档来自技高网...

【技术保护点】
一种图像处理装置，包括：图像选择单元，根据视点旋转角从具有不同视点的多个视点图像中选择视点图像；以及加法处理单元，通过添加所述图像选择单元中所选择的视点图像来生成具有新视点的视点图像。

【技术特征摘要】
2012.03.16 JP 2012-0597361.一种图像处理装置，包括：图像选择单元，根据视点旋转角从具有不同视点的多个视点图像中选择视点图像；加法处理单元，通过添加所述图像选择单元中所选择的视点图像来生成具有新视点的视点图像；以及增益调节单元，执行与对于具有所述新视点的所述视点图像添加的视点图像的数量对应的增益调节，其中，所述图像选择单元根据所述视点旋转角设置多个视点区域，并且选择所设置的所述视点区域内所包含的视点的视点图像，其中，所述加法处理单元将视点图像加入到各所述视点区域中，以及其中，所添加的视点图像的数量变小时，所述增益调节单元将增益设为较高。2.根据权利要求1所述的图像处理装置，其中，所述图像选择单元根据所述视点旋转角设置左眼图像的视点区域以及右眼图像的视点区域，以及其中，通过将视点图像加入各所述视点区域中，所述加法处理单元生成左眼图像和右眼图像。3.根据权利要求2所述的图像处理装置，其中，所述图像选择单元控制所述左眼图像的视点区域和所述右眼图像的视点区域之间的间隙，并且调节所述左眼图像和所述右眼图像的视差量。4.根据权利要求2所述的图像处理装置，其中，所述图像选择单元选择所有视点图像、或所述左眼图像和所述右眼图像的视点区域内所包含的视点的视点图像，以及其中，通过添加所述图像选择单元中所选择的视点图像，所述加法处理单元生成平面图像。5.根据权利要求1所述的图像处理装置，进一步包括：旋转处理单元，根据所述视点旋转角对具有所述新视点的所述视...

【专利技术属性】
技术研发人员：林恒生，
申请(专利权)人：索尼公司，
类型：发明
国别省市：