图像处理设备和图像处理方法技术

一种被摄体信息获取单元12从拍摄的图像中获取表示与被摄体的照明相关的属性的摄像被摄体信息。预设信息选择单元21根据用户操作选择预设信息，所述预设信息作为用于设置照明环境的照明设置信息。照明设置信息调整单元基于由所述被摄体信息获取单元获取的摄像被摄体信息，将由所述照明设置信息选择单元选择的照明设置信息进行调整，使得照明设置信息对应于所述被摄体。例如，在仅仅选择所述预设信息的情况下，可以容易设置照明环境。

【技术实现步骤摘要】
【国外来华专利技术】
本技术涉及一种图像处理设备和一种图像处理方法，其有助于设置照明环境，用于重光照(relighting)。
技术介绍
通常，称为重光照的图像处理计算用于图像处理等中，以产生与在图像拍摄时不同的照明环境，并且再次进行照明和绘画过程。重光照所需要的信息大概分成被摄体的形状、被摄体的反射特征以及光源的位置。这些与用于绘画一般三维计算机图形的元素相同。例如，使用通过使用多个相机进行立体匹配来估计被摄体的深度的方法，获得被摄体的形状，并且根据对应于像素的三维坐标的集合体重构模型。例如，为了获得被摄体的反射特征和光源的位置，提出了在球面镜上使用光源的反射的方法。此外，为了生成合适的重光照图像，需要通过合适的方式设置参数，例如，光源的数量、以及光源的类型、位置以及光强度。例如，专利文档1公开了仅仅自动调整光源的强度。此外，专利文档2公开了列出随机生成的光，并且这些光用于在低频区域内渲染(rendering)。引用列表专利文档专利文档1：日本专利申请公开号2009-223906专利文档2：日本专利申请公开号2003-296750
技术实现思路
本专利技术要解决的问题为了生成合适的重光照图像，需要通过合适的方式设置参数，例如，光源的数量、以及光源的类型、位置以及光强度。然而，在专利文档1和2中公开的技术不适用于建立任意照明环境(不仅包括光源的光强度，而且包括光源的位置)。因此，本技术的目标在于，提供一种图像处理设备和一种图像处理方法，其有助于设置照明环境，用于重光照。问题的解决方案本技术的第一方面在于一种图像处理设备，包括：被摄体信息获取单元，用于从拍摄的图像中获取表示与用于被摄体的照明相关的属性的摄像被摄体信息；照明设置信息选择单元，用于根据用户操作选择照明设置信息；以及照明设置信息调整单元，用于基于通过所述被摄体信息获取单元获取的所述摄像被摄体信息，将通过所述照明设置信息选择单元选择的所述照明设置信息调整为对应于所述被摄体的照明设置信息。根据本技术，所述被摄体信息获取单元在不同的视角位置，从由图像获取单元获取的拍摄的图像中获取与被摄体的照明相关的属性，例如，被摄体的三维形状和反射特征。所述照明设置信息选择单元显示与所述照明设置信息相关联的设置选择图像，并且将对应于用户选择的设置选择图像的照明设置信息设置为所选的照明设置信息。例如，所述照明设置信息选择单元基于所述照明设置信息，将预设信息显示为设置选择图像，并且将对应于用户选择的预设信息的照明设置信息设置为所选的照明设置信息。可替换地，所述照明设置信息选择单元将预设图像显示为设置选择图像，并且从用户选择的预设图像中获取照明设置信息。更可替换地，所述照明设置信息选择单元将与所述照明设置信息相关联的元数据显示为设置选择图像，并且将对应于用户选择的元数据的照明设置信息设置为所选的照明设置信息。此外，所述照明设置信息选择单元选择照明设置信息，包括与所述被摄体信息获取单元所获取的关于被摄体的摄像模式信息匹配的摄像模式信息。照明设置信息调整单元基于由所述被摄体信息获取单元获取的摄像被摄体信息，将由所述照明设置信息选择单元选择的照明设置信息调整为对应于所述被摄体的照明设置信息。例如，使用预设坐标系，生成所述照明设置信息。通过使所述坐标系与所述被摄体对应，照明设置信息调整单元将所述照明设置信息调整为对应于所述被摄体的照明设置信息。所述照明设置信息具有：光源信息，其包括关于光源和照明光的位置的信息；以及参考被摄体信息，其包括关于由所述光源信息表示的光源所照明的参考被摄体的尺寸和位置的信息。所述照明设置信息调整单元使所述坐标系与所述被摄体对应，使得所述参考被摄体的尺寸和位置与在所述拍摄的图像内的被摄体的尺寸和位置匹配。所述照明设置信息调整单元还调整所述照明设置信息，使得通过使用所述摄像被摄体信息和调整之后的照明设置信息执行绘画过程所获得的被摄体图像不饱和。图像生成单元基于所述被摄体信息获取单元所获取的摄像被摄体信息以及所述照明设置信息调整单元所调整的照明设置信息，执行绘画过程，从而在用户选择的照明环境中获得被摄体的图像。本技术的第二方面在于一种图像处理方法，包括以下步骤：通过被摄体信息获取单元从拍摄的图像中获取表示与用于被摄体的照明相关的属性的摄像被摄体信息；通过照明设置信息选择单元根据用户操作选择照明设置信息；以及通过照明设置信息调整单元基于由所述被摄体信息获取单元获取的所述摄像被摄体信息，将由所述照明设置信息选择单元选择的照明设置信息调整为对应于所述被摄体的照明设置信息。本专利技术的效果根据本技术，被摄体信息获取单元从拍摄的图像中获取表示与被摄体的照明相关的属性的被摄体信息。此外，照明设置信息选择单元根据用户操作选择照明设置信息。照明设置信息调整单元基于摄像被摄体信息，执行将选择的照明设置信息调整为对应于所述被摄体的照明设置信息的过程。即，在用户选择照明设置信息时，将选择的照明设置信息调整为对应于所述被摄体的照明设置信息。因此，通过在调整之后使用照明设置信息执行绘画过程，可以生成图像，犹如在期望的照明环境中获取一样。这有助于设置照明环境，用于重光照。要注意的是，在本文中描述的有利效果仅仅是实例，没有限制性，并且可以提供任何其他额外效果。附图说明图1是示出根据第一实施方式的图像处理设备的配置的示图；图2是描述用于获取被摄体的三维形状的方法的示图；图3是描述用于确定视差的方法的示图；图4是示出球面镜的示图；图5是在球面镜由立体相机拍摄时示意性示出亮点的示图；图6是描述在球面镜上的亮点与光源的方向之间的关系的示图；图7是预设信息的元素的列表；图8是示出光源信息的示图；图9是示出预设信息的具体实例的示图；图10是示出图标图像的示图；图11是描述用于调整照明设置信息的过程的示图；图12是在第一实施方式中的操作的流程图；图13是描述选择预设信息的活动的示图；图14是示出第二实施方式的图像处理设备的配置的示图；图15是在第二实施方式中的操作的流程图；图16是示出第三实施方式的图像处理设备的配置的示图；图17是描述照明设置信息的选择的示图；图18是在第三实施方式中的操作的流程图。具体实施方式下面解释用于执行本技术的实施方式。注意，按照以下顺序提供解释：1、第一实施方式2、第二实施方式3、第三实施方式4、另一个实施方式本技术的图像处理设备包括被摄体信息获取单元、照明设置信息选择单元以及照明设置信息调整单元。被摄体信息获取单元从拍摄的图像中获取表示与被摄体的照明相关的属性的摄像被摄体信息。照明设置信息选择单元根据用户操作选择照明设置信息。例如，所述照明设置信息选择单元显示与所述照明设置信息相关联的设置选择图像，并且将对应于用户选择的设置选择图像的照明设置信息设置为所选的照明设置信息。照明设置信息调整单元基于由所述被摄体信息获取单元获取的摄像被摄体信息，将由所述照明设置信息选择单元选择的照明设置信息调整为对应于所述被摄体的照明设置信息。<1、第一实施方式>在第一实施方式中，为了选择照明设置信息，显示基于照明设置信息的预设信息作为设置选择图像，并且对应于用户选择的预设信息的照明设置信息被设置做为所选的照明设置信息。【1-1、第一实施方式的配置】图1是示出根据第一实施方式的图像处理设备的配置的示本文档来自技高网...

【技术保护点】
一种图像处理设备，包括：被摄体信息获取单元，用于从拍摄的图像中获取表示与用于被摄体的照明相关的属性的摄像被摄体信息；照明设置信息选择单元，用于根据用户操作选择照明设置信息；以及照明设置信息调整单元，用于基于通过所述被摄体信息获取单元获取的所述摄像被摄体信息，将通过所述照明设置信息选择单元选择的所述照明设置信息调整为对应于所述被摄体的照明设置信息。

【技术特征摘要】
【国外来华专利技术】2014.04.30 JP 2014-0935181.一种图像处理设备，包括：被摄体信息获取单元，用于从拍摄的图像中获取表示与用于被摄体的照明相关的属性的摄像被摄体信息；照明设置信息选择单元，用于根据用户操作选择照明设置信息；以及照明设置信息调整单元，用于基于通过所述被摄体信息获取单元获取的所述摄像被摄体信息，将通过所述照明设置信息选择单元选择的所述照明设置信息调整为对应于所述被摄体的照明设置信息。2.根据权利要求1所述的图像处理设备，其中，所述被摄体信息获取单元从所述拍摄的图像中获取所述被摄体的三维形状和反射特征作为摄像被摄体信息。3.根据权利要求1所述的图像处理设备，其中，使用预设坐标系，生成所述照明设置信息，并且使所述坐标系与所述被摄体对应，以将所述照明设置信息调整为对应于所述被摄体的照明设置信息。4.根据权利要求3所述的图像处理设备，其中，所述照明设置信息包括：光源信息，所述光源信息包括关于光源的配置和照明光的信息；以及参考被摄体信息，所述参考被摄体信息包括关于由所述光源信息所表示的光源所照明的参考被摄体的尺寸和配置的信息。5.根据权利要求4所述的图像处理设备，其中，所述照明设置信息调整单元使所述坐标系与所述被摄体对应，使得所述参考被摄体的尺寸和配置与在所述拍摄的图像内的被摄体的尺寸和配置匹配。6.根据权利要求1所述的图像处理设备，其中，所述照明设置信息调整单元调整所述照明设置信息，使得通过使用所述摄像被摄体信息和调整之后的所述照明设置信息而执行绘画过程所获得的被摄体图像不饱和。7.根据权利要求1所述的图像处理设备，其中，所述照明设置信息选择单元显示与所述照明设置信息相关联的设置选择图像，并且将与所述用户选择的所述设置选...

【专利技术属性】
技术研发人员：土场健太郎，平泽康孝，半田正树，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP