图像处理装置、服务器和存储介质制造方法及图纸

本公开涉及一种图像处理装置。根据本公开的图像处理装置包括：提取单元，其被配置成从通过使用特定成像参数拍摄的图像提取对象；测距单元，其被配置成获取指示已拍摄图像的图像拍摄单元和已被成像的对象之间的距离的距离信息；通信单元，其具有第一传送功能、第二传送功能和接收功能；以及合成单元，其被配置成在第二图像中包括的对象的区域中组合通信单元接收到的对象候选图像。

【技术实现步骤摘要】
相关申请的交叉引用本申请要求在2013年6月14日提交的日本在先专利申请JP2013-125825的优先权，其整体内容通过引用合并于此。
本公开涉及图像处理装置、服务器和存储介质。
技术介绍
近年来，根据成像性能的显著改进，具有用于拍摄期望图像的多种功能，诸如图像稳定功能、自动对焦功能和笑容检测功能的摄像装置已被开发。作为这些功能之一，图像合成技术已被开发用于将图像中包括的对象替换成另一期望对象并且执行合成。例如，JP2008-140107A公开了一种用于检测拍摄图像中包括的对象、光源方向和阴影方向，以及获得具有相同或相近的光源方向或阴影方向的对象的合成图像的技术。此外，JP2001-86497A公开了一种用于通过将拍摄图像分解成背景和对象来执行图像识别，将它们替换成代用素材并且执行合成的技术。此外，JP2010-244398A公开了一种用于基于拍摄图像中包括的对象的大小来搜索合适的对象图像并且执行合成的技术。此外，JP2003-116127A公开了一种用于自动地拍摄特定用户的图像并且向用户提供所拍摄的视频数据的技术。
技术实现思路
不幸地，以上公开的技术难于执行简单的和自然的图像合成。例如，JP2001-86497A和JP2010-244398A中公开的技术没有执行自然的图像合成的视点。此外，JP2008-140107A中公开的技术需要检测每个对象的光源方向和阴影方向的处理，而这并不容易。再者，JP2003-116127A中公开的技术事实上可以获得特定用户的各种图像数据，但是不能通过选择合适的图像来执行图像合成。根据本公开的实施例，提出了能够执行较简单和自然的图像合成的新型的和改进的图像处理装置、服务器和存储介质。根据本公开的一个实施例，提供了一种图像处理装置，其包括：根据本公开的另一实施例，提供了一种服务器，其包括：根据本公开的另一实施例，提供了一种具有存储在其中的程序的非暂态的计算机可读存储介质，该程序使计算机执行如下操作：根据本公开的另一实施例，提供了一种具有存储在其中的程序的非暂态的计算机可读存储介质，该程序使计算机执行如下操作：根据本公开的一个或更多个实施例，可以执行较简单和自然的图像合成。附图说明图1示出了根据本公开的一个实施例的图像合成技术的概况；图2是示出根据第一实施例的图像合成系统的配置的框图；图3是根据第一实施例的积累处理的流程图；图4示出了均根据第一实施例的对象提取处理和获取对象属性信息的处理的示例；图5是示出根据第一实施例的合成处理的流程图；图6示出了根据第一实施例的合成处理的示例；图7示出了根据第一实施例的合成处理的示例；图8示出了根据第一实施例的合成处理的示例；图9示出了根据第一实施例的合成处理的示例；图10是示出根据第二实施例的图像合成系统的配置的框图；图11是示出根据第二实施例的积累处理的流程图；以及图12是示出根据第二实施例的合成处理的流程图。具体实施方式在下文中，将参照附图详细描述本公开的优选实施例。注意，在该说明书和附图中，具有基本上相同的功能和结构的结构元件由相同的附图标记表示，并且省略了这些结构元件的重复说明。注意，描述将按如下顺序进行。1.根据本公开的一个实施例的图像合成技术的概况2.实施例2-1.第一实施例2-1-1.图像合成系统的配置2-1-2.图像合成系统的操作处理2-2.第二实施例2-2-1.图像合成系统的配置2-2-2.图像合成系统的操作处理3.结论<<1.根据本公开的一个实施例的图像合成技术的概况>>首先，将参照图1描述根据本公开的一个实施例的图像合成技术的概况。图1示出了根据本公开的一个实施例的图像合成技术的概况。如图1中所示，摄像装置1C通过拍摄被摄体3A、3B和3C的图像来获得图像P1，但是被摄体3A在图像P1中眨眼。因此，通过根据该实施例的合成处理，摄像装置1C将服务器2中积累的图像与图像P1组合，从而生成图像P2，其中被摄体3A正在微笑。在根据该实施例的合成处理中，通过使用过去拍摄并且在服务器2中积累的图像来执行图像合成。如图1中所示，在过去，摄像装置1A拍摄被摄体3A在日间在公园中在场景4A中的图像，被摄体3A距摄像装置1A具有距离5A，并且摄像装置1B拍摄被摄体3A在夜间在市区中在场景4B中的图像，被摄体3A距摄像装置1B具有距离5B。注意，在不必进行区分的情况下，摄像装置1A、1B和1C被共同称为摄像装置1。根据该实施例的图像合成系统包括摄像装置1和服务器2。在下文中，在服务器2中积累显示装置1拍摄的图像的处理被称为积累处理，并且将积累的图像与拍摄图像组合的处理被称为合成处理。注意，拍摄要积累的图像的摄像装置1和拍摄作为合成目标的图像的摄像装置1可以相同或不同。服务器2存储示出过去拍摄的多种对象的对象图像。这里，对象包括可以作为被摄体的各种物体。例如，人是对象，并且人的器官，诸如眼睛、耳朵、脸、手、腿和躯干，是对象。一个对象的范围根据图像拍摄距离而不同。例如，在近距离拍摄树的图像的情况下，一片树叶或者一根树枝可以是对象；在远距离拍摄树的图像的情况下，一棵树可以是对象；在从更远的距离拍摄树的图像的情况下，整片森林可以是对象。对象图像是包括一个对象的图像并且是拍摄图像中的区域。在图1中所示的示例中，在摄像装置1A在场景4A中拍摄的图像中，服务器2存储被摄体3A的脸部(对象)的图像作为对象图像6-1。此外，图1中所示的服务器2与指示对象图像的属性的对象属性信息相关联地存储对象图像。在图1中所示的示例中，服务器2与对象图像6-1相关联地存储对象属性信息7-1，对象属性信息7-1指示摄像装置1A和对象图像6-1中示出的对象(被摄体3A的脸)之间的图像拍摄距离是距离5A。通过相似的方式，服务器2与指示图像拍摄距离是距离5B的对象属性信息7-2相关联地存储作为场景4B中的被摄体3A的脸部的对象图像6-2。此外，服务器2相似地与对象属性信息7-3相关联地存储作为在另一场景中拍摄的被摄体3A的脸部的对象图像6-3。上文已描述了根据该实施例的图像合成系统执行的积累处理。接下来，将描述根据该实施例的图像合成系统执行的合成处理。如图1中所示，摄像装置1C通过在日间在室外在场景4C中拍摄具有距摄像本文档来自技高网...

【技术保护点】
一种图像处理装置，包括：提取单元，其被配置成从通过使用特定成像参数拍摄的图像中提取对象；测距单元，其被配置成获取指示已拍摄图像的图像拍摄单元和已被成像的对象之间的距离的距离信息；通信单元，其具有第一传送功能，其与对象属性信息相关联地将示出所述提取单元从所述图像中的第一图像提取的对象的对象图像传送到外部装置，所述对象属性信息包含所述距离信息和所述特定成像参数，所述距离信息由所述测距单元从所述第一图像获取，第二传送功能，其将与所述第一图像不同的、所述图像中的第二图像传送到所述外部装置，以及接收功能，其从所述外部装置接收示出从所述第一图像提取的对象的对象图像作为对象候选图像，所述对象图像对应于所述第二图像中包括的对象；以及合成单元，其被配置成在所述第二图像中包括的对象的区域中组合所述通信单元接收到的所述对象候选图像。

【技术特征摘要】
2013.06.14 JP 2013-1258251.一种图像处理装置，包括：
提取单元，其被配置成从通过使用特定成像参数拍摄的图像中提取对
象；
测距单元，其被配置成获取指示已拍摄图像的图像拍摄单元和已被成
像的对象之间的距离的距离信息；
通信单元，其具有
第一传送功能，其与对象属性信息相关联地将示出所述提取单元
从所述图像中的第一图像提取的对象的对象图像传送到外部装置，所述对
象属性信息包含所述距离信息和所述特定成像参数，所述距离信息由所述
测距单元从所述第一图像获取，
第二传送功能，其将与所述第一图像不同的、所述图像中的第二
图像传送到所述外部装置，以及
接收功能，其从所述外部装置接收示出从所述第一图像提取的对
象的对象图像作为对象候选图像，所述对象图像对应于所述第二图像中包
括的对象；以及
合成单元，其被配置成在所述第二图像中包括的对象的区域中组合所
述通信单元接收到的所述对象候选图像。
2.根据权利要求1所述的图像处理装置，其中所述通信单元进一步
传送所述第二图像的对象属性信息，并且与适用于所传送的对象属性信息
的对象属性信息相关联地接收所述对象候选图像。
3.根据权利要求2所述的图像处理装置，其中所述通信单元进一步
传送指示要被优先对待的对象属性信息的优先级信息，并且与所传送的优
先级信息指示的被优先对待的对象属性信息相关联地接收所述对象候选
图像。
4.根据权利要求1所述的图像处理装置，进一步包括：
标志生成单元，其被配置成生成指示所述提取单元提取的对象是否是
前景的标志信息，
其中所述对象属性信息进一步包含所述标志生成单元生成的标志信
息。
5.根据权利要求1所述的图像处理装置，其中所述合成单元基于所
述第二图像的对象属性信息来组合所述对象候选图像。
6.根据权利要求1所述的图像处理装置，进一步包括：
时间获取单元，其被配置成生成指示对象被成像的时间的时间信息，
其中所述对象属性信息进一步包含所述时间获取单元生成的时间信
息。
7.根据权利要求1所述的图像处理装置，其中所述第二图像是示出
所述提取单元从与所述图像拍摄单元拍摄的所述第一图像不同的图像中
提取的对象的对象图像。
8.一种服务器，包括：
通信单元，其被配置成从外部装置接收通过使用特定成像参数拍摄的
图像以及所述成像参数；
提取单元，其被配置成从所述通信单元接收到的图像提取对象；
测距单元，其被配置成获取指示已拍摄图像的图像拍摄单元和已被成
像的对象之间的距离的距离信息；
记录控制单元，其被配置成与对象属性信息相关联地、将示出所述提
取单元从所述通信单元接收到的所述图像中的第一图像中提取的对象的
对象图像记录在存储器单元中，所述对象属性信息包含所述距离信息和所
述特定成像参数，所述距离信息由所述测距单元从所述第一图像获取；以
及
合成单元，其被配置成将所述存储器单元中记录的对象图像与所述通
信单元接收到的图像组合，
其中，基于包含所述测距单元从所述图像中的第二图像获取的距离信
息和所述特定成像参数的对象属性信息，所述记录控制单元搜索所述存储

【专利技术属性】
技术研发人员：渡边一弘，佐古曜一郎，浅田宏平，迫田和之，荒谷胜久，中村隆俊，竹原充，丹下明，花谷博幸，甲贺有希，大沼智也，
申请(专利权)人：索尼公司，
类型：发明
国别省市：日本;JP