用于在模板上布局图像的图像处理装置和图像处理方法制造方法及图纸

本发明专利技术提供一种用于在模板上布局图像的图像处理装置和图像处理方法。提供了一种使用根据预定条件而不同的方法将多个图像分割为多个图像组的技术。图像处理装置根据与作为要布局在模板上的候选的多个图像相对应的时间信息，将多个图像分割为多个图像组。然后，在与多个图像组中的各个相对应的模板上布局多个图像组的各个中包括的至少一个图像。在分割中，通过根据预定条件而不同的方法将多个图像分割为多个图像组。

Image processing device and image processing method for laying image on template

The invention provides an image processing device and an image processing method for distributing images on a template. A technique for partitioning multiple images into multiple image sets using different methods based on predetermined conditions is provided. The image processing apparatus divides a plurality of images into a plurality of image groups according to the time information corresponding to the plurality of images that are candidates to be laid out on the template. Then, at least one image included in each of the plurality of image groups is laid out on each template corresponding to each of the plurality of image groups. In segmentation, multiple images are segmented into multiple image groups by different methods according to predetermined conditions.

【技术实现步骤摘要】
用于在模板上布局图像的图像处理装置和图像处理方法
本专利技术涉及用于在模板上布局图像的图像处理装置和图像处理方法。
技术介绍
由诸如数字照相机、数字摄像机和扫描仪等的图像生成装置拍摄的图像由诸如监视器和打印机等的各种图像输出装置输出(显示或打印)。例如，存在多个图像被输出为电子相册的情况。这样的电子相册通常以给各个双页展开分配多个图像的双页展开单位输出。例如，在将图像分配到多个双页展开的情况下，如果图像按照拍摄图像的顺序的方式简单地布置在双页展开上，则各个双页展开上的图像可能缺乏统一感(unity)。日本特开2007-318461号公报讨论了按时间单位(例如天或月)区分开图像的方法。在多个图像数量多的情况下和多个图像数量少的情况下，多个图像的图像拍摄时段和特征的变化可以不同。因此，如日本特开2007-318461号公报中所讨论的，在将多个图像区分成多个图像组的情况下，如果通过相同的方法将多个图像区分成图像组而不管布局目标候选图像的数量如何，则多个图像可以不被适当地区分成多个图像组。
技术实现思路
本专利技术涉及一种用于使用与作为布局目标候选的图像的数量相对应的不同处理来确定多个图像组的技术。根据本公开的一个方面，一种图像处理方法包括：根据与多个图像相对应的时间信息将多个图像分割成多个图像组，所述多个图像是要布局在模板上的候选；以及在与多个分割的图像组中的各个相对应的模板上布局所述多个分割的图像组中的各个中包括的至少一个图像，其中，在所述分割中，基于预定条件选择预定的第一方法或预定的第二方法作为将所述多个图像分割成所述多个图像组的方法，在所述预定的第一方法中，除时间信息之外还基于所述多个图像中包括的图像的预定特征来执行分割，在所述预定的第二方法中，所述分割中的所述预定特征的权重低于所述预定的第一方法中的权重，并且，其中，通过所选择的分割方法执行分割。根据下面参照附图对示例性实施例的描述，本公开的另外的特征将变得清楚。附图说明图1是例示图像处理装置的硬件的构造的框图。图2是相册创建应用的软件框图。图3例示了由相册创建应用提供的显示画面。图4是例示自动布局处理的流程图。图5例示了图像分析信息。图6A、图6B和图6C例示了图像数据组的场景分割的结果。图7是例示各个场景的平均值和标准偏差的表格。图8A和图8B是例示评分轴(scoringaxis)的概念的表格。图9A至图9I例示图像数据选择。图10A至图10Q各个例示用于图像数据布局的模板组。图11是例示了子场景分割的处理的流程图。图12A到图12D是例示关于各个场景的场景信息的表格。具体实施方式下面将参照附图详细描述本专利技术的各种示例性实施例。应该注意的是，下述的示例性实施例并不意图限制本专利技术的保护范围，并且，下面示例性实施例中所描述的特征的每种组合对于本专利技术的技术解决方案而言并不总是必要的。相似的组件被赋予相同的附图标记，并且省略其描述。在第一示例性实施例中，将描述使相册创建应用在图像处理装置上操作并使用自动布局功能生成布局的处理。图1是例示图像处理装置的硬件的构造的框图。图像处理装置的示例包括个人计算机(PC)和智能手机。在本示例性实施例中，使用PC作为图像处理装置。中央处理单元(CPU)101综合地控制图像处理装置100，并且，例如，将存储在只读存储器(ROM)102上的程序读取到随机存取存储器(RAM)103上并执行该程序以实现本示例性实施例的操作。虽然在图1中例示了单个CPU，但是可以使用多个CPU。ROM102是通用ROM，并且，例如，存储要由CPU101执行的程序。RAM103是通用RAM，并且，例如，用作用于当CPU101执行程序时临时存储各种类型的信息的工作存储器。硬盘驱动器(HDD)104是用于存储包括图像文件的数据库以及诸如图像分析等的处理结果，由相册创建应用使用的模板等的存储介质(存储单元)。显示器105向用户显示本示例性实施例的用户界面(UI)和电子相册作为图像布局结果。键盘106和指点设备107从用户接收指令操作。显示器105可以包括触摸传感器功能。例如，用户使用键盘106在显示器105上显示的UI上输入用户期望创建的相册的双页展开的数量。例如，用户使用指点设备107点击显示器105上显示的UI上的按钮。数据通信单元108经由有线网络或无线网络进行与外部设备的通信。数据通信单元108例如将通过自动布局功能布局的数据发送到能够与图像处理装置100进行通信的打印机或服务器。数据总线109连接图1所例示的块，使得块可以相互通信。本示例性实施例中的相册创建应用被保存在HDD104中，并且如果用户使用指点设备107双击在显示器105上显示的应用的图标，则该相册创建应用被启动，如下所述。图2是相册创建应用的软件框图。分别对应于图2所例示的构造的组件的程序模块包括在上述的相册创建应用中。然后，CPU101执行程序模块以用作图2所例示的构造的组件。在下文中，图2中所例示的组件将被描述为执行各种类型的处理的组件。此外，图2特别例示了被构造为执行自动布局功能的自动布局处理单元216的软件框图。相册创建条件指定单元201根据由用户使用下面将描述的指点设备107进行的UI操作来确定相册创建条件，并且将所确定的相册创建条件输出到自动布局处理单元216。图像获取单元202从HDD104获取由相册创建条件指定单元201指定的图像数据组。图像转换单元203将用于后续处理的图像数据转换成具有期望数量的像素和颜色信息的图像数据。在本示例性实施例中，图像数据被转换为具有420像素的短边和标准的红色，绿色，蓝色(sRGB)颜色信息的分析图像数据。图像分析单元204从分析图像数据执行将在下面描述的特征量获取、面部检测、面部表情识别、人物识别和对象识别。此外，图像分析单元204执行获取伴随从HDD104获取的图像数据的数据，例如从可交换图像文件格式(Exif)信息获取图像拍摄日期/时间(时间信息)。使用时间信息将多个图像分割成图像组，这将在下面描述。图像分类单元205使用图像拍摄日期/时间信息、拍摄图像数量、检测到的面部信息等对图像数据组执行下面将描述的场景分割和场景分类。术语“场景”是指诸如旅行、平常场景或婚礼等的图像拍摄场景。在本示例性实施例中，基于时间信息将多个图像分割成多个图像组。此时，在一个时间块内拍摄的多个图像被包括在同一图像组中，因此包括在同一图像组中的多个图像被认为是在相同或相似的图像拍摄场景中拍摄的图像。图像评分单元207对各个图像数据进行评分，使得适合布局的图像被给予高分。图像评分单元207使用来自图像分析单元204的图像分析结果信息和来自图像分类单元205的分类信息来进行评分。这将在下面描述。用户信息输入单元206向图像评分单元207输入由相册创建条件指定单元201指定的主题人物的标识(ID)(标识信息)。图像评分单元207被构造成对包含从用户信息输入单元206输入的主题人物ID的图像数据给予较高分。此外，用户信息输入单元206向图像评分单元207输入由相册创建条件指定单元201指定的优先模式。图像评分单元207被构造为向包含从用户信息输入单元206输入的至少一个或更多个对象的图像数据添加较高分。双页展开分配单元209将多个图像分割成多个图像组，并将多个本文档来自技高网...

【技术保护点】
1.一种图像处理方法，包括：分割步骤，根据与多个图像相对应的时间信息将所述多个图像分割成多个图像组，所述多个图像是要布局在模板上的候选；以及布局步骤，在与多个分割的图像组中的各个相对应的模板上布局所述多个分割的图像组中的各个中包括的至少一个图像，其中，在分割步骤中，基于预定条件选择预定的第一方法或预定的第二方法作为将所述多个图像分割成所述多个图像组的方法，在所述预定的第一方法中，除时间信息之外还基于所述多个图像中包括的图像的预定特征来执行分割，在所述预定的第二方法中，预定特征在分割步骤中的权重低于所述预定的第一方法中的权重，并且，其中，通过所选择的分割方法执行分割。

【技术特征摘要】
2017.01.31 JP 2017-0162091.一种图像处理方法，包括：分割步骤，根据与多个图像相对应的时间信息将所述多个图像分割成多个图像组，所述多个图像是要布局在模板上的候选；以及布局步骤，在与多个分割的图像组中的各个相对应的模板上布局所述多个分割的图像组中的各个中包括的至少一个图像，其中，在分割步骤中，基于预定条件选择预定的第一方法或预定的第二方法作为将所述多个图像分割成所述多个图像组的方法，在所述预定的第一方法中，除时间信息之外还基于所述多个图像中包括的图像的预定特征来执行分割，在所述预定的第二方法中，预定特征在分割步骤中的权重低于所述预定的第一方法中的权重，并且，其中，通过所选择的分割方法执行分割。2.根据权利要求1所述的图像处理方法，其中，所述预定条件是关于包括在所述多个图像中的图像的数量的条件，并且其中，在所述多个图像中包括的图像的数量大于预定数量的情况下，选择第一方法，并且，在所述多个图像中包括的图像的数量不大于所述预定数量的情况下，选择第二方法。3.根据权利要求1所述的图像处理方法，其中，在分割步骤中，临时分割步骤，根据与所述多个图像相对应的时间信息将所述多个图像临时分割成多个第一图像组；判断步骤，判断多个临时分割的第一图像组中的各个的重要度；以及确定步骤，将通过组合所述多个第一图像组中的至少两个而获得的多个第二图像组确定为所述多个分割的图像组，使得判断出的重要度低的第一图像组被优先地设置为组合目标，其中，在判断步骤中，通过根据包括在所述多个图像中的图像的数量是否大于预定数量而不同的方法来判断重要度。4.根据权利要求1所述的图像处理方法，其中，所述预定特征不用于第二方法中。5.根据权利要求1所述的图像处理方法，其中，所述预定特征是关于所述多个图像中包括的对象的特征。6.根据权利要求5所述的图像处理方法，其中，所述预定特征包括预...

【专利技术属性】
技术研发人员：国枝宽康，大林正明，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本,JP