图像处理设备及其控制方法和存储介质技术

本发明专利技术涉及一种图像处理设备及其控制方法和存储介质。所述图像处理设备包括：判断部件，用于在用户给出用以删除存储部件中所存储的图像数据的指示、并且所述图像数据满足预定条件的情况下，判断为所述存储部件中所存储的图像数据是要用于学习摄像部件要进行自动摄像的状况的图像数据。

【技术实现步骤摘要】
图像处理设备及其控制方法和存储介质
本专利技术涉及用于使得摄像设备拍摄与用户的品味匹配的图像的机器学习。
技术介绍
通常，在诸如照相机等的摄像设备所进行的静止图像/运动图像拍摄中，用户经由取景器等确定要拍摄的被摄体，自己检查拍摄状况并调整要拍摄的图像的取景，并且通过对快门按钮进行操作来拍摄图像。与根据用户所进行的这样的操作来执行拍摄的摄像设备相对比，日本特开2016-536868公开了在无需用户给出拍摄指示的情况下周期性地且连续地进行拍摄的照相机(所谓的生活记录照相机)。生活记录照相机是在通过使用带子等而附着至用户的身体的状态下被使用的，并且将用户在他们的日常生活中看见的景象按一定时间间隔记录为视频图像。生活记录照相机所进行的拍摄不是在通过用户对快门进行操作等所意图的定时进行的，而是按一定间隔进行的，因而可以保留通常不会拍摄的意外瞬间作为视频图像。然而，在如日本特开2016-536868那样、按一定时间间隔进行自动摄像的情况下，存在可能拍摄与用户的品味不匹配的场景的问题。通过经由机器学习使用与用户的品味匹配的图像来训练摄像设备，可以使得摄像设备进行与用户的品味匹配的自动摄像。在学习了与用户的品味匹配的图像以及与用户的品味不匹配的图像的情况下，可以获得改进的效果。这里，出现与如何对与用户的品味不匹配的图像进行判断有关的问题。例如，可想到将根据用户的指示所删除的图像判断为与用户的品味不匹配的图像。然而，用户删除图像的最合适原因不仅仅是图像与用户的品味不匹配，并且诸如存在多个相似图像等的情况也被视为用户删除图像的原因。
技术实现思路
本专利技术是有鉴于上述问题而作出的，并且使得能够在无需用户进行特定操作的情况下，进行反映用户的品味的学习。根据本专利技术的第一方面，提供一种图像处理设备，包括：判断部件，用于在用户给出用以删除存储部件中所存储的图像数据的指示、并且所述图像数据满足预定条件的情况下，判断为所述存储部件中所存储的图像数据是要用于学习摄像部件要进行自动摄像的状况的图像数据。根据本专利技术的第二方面，提供一种图像处理设备的控制方法，所述控制方法包括：在用户给出用以删除存储部件中所存储的图像数据的指示、并且所述图像数据满足预定条件的情况下，判断为所述存储部件中所存储的图像数据是要用于学习摄像部件要进行自动摄像的状况的图像数据。根据本专利技术的第三方面，提供一种存储有程序的非暂时性计算机可读存储介质，所述程序用于使得计算机执行上述的控制方法。通过以下参考附图对典型实施例的说明，本专利技术的更多特征将变得明显。附图说明图1A和1B是示意性示出摄像设备的图。图2是示出摄像设备的结构的图。图3是示出摄像设备和外部装置的结构的图。图4是示出外部装置的结构的图。图5是说明控制电路的操作的流程图。图6是说明自动摄像模式处理的流程图。图7是说明神经网络的图。图8是用于说明图像显示处理的图。图9是说明学习模式判断的流程图。图10是说明学习模式处理的流程图。图11是用于说明基于删除操作的学习处理的流程图。具体实施方式以下将参考附图来详细说明实施例。注意，以下实施例并不意图限制要求保护的专利技术的范围。在实施例中说明了多个特征，但并未限制成需要所有这些特征的专利技术，并且可以适当组合多个这样的特征。此外，在附图中，向相同或相似的结构给予相同的附图标记，并且省略了对这些结构的重复说明。摄像设备的结构图1A和1B是示意性示出根据本专利技术实施例的摄像设备的图。本专利技术不仅可应用于数字照相机和数字摄像机，而且也可应用于监视照相机、Web照相机和移动电话等。在本实施例中，将假定摄像设备本身用作进行机器学习的图像处理设备的结构来给出说明，但也可以采用在与摄像设备分开且能够与摄像设备进行通信的图像处理设备中进行针对摄像设备的机器学习的结构。图1A所示的摄像设备101设置有使得能够对电源开关进行操作的操作构件(以下称为“电源按钮”，并且该操作可以是对触摸面板的轻击、轻拂或滑动操作等)等。镜筒102是包括进行摄像的拍摄透镜组和图像传感器的壳体，并且设置有转动机构，该转动机构附接至摄像设备101，且可以相对于固定单元103可转动地驱动镜筒102。俯仰转动单元104是可以使镜筒102沿图1B所示的纵摇方向转动的马达驱动机构，并且平摇转动单元105是可以使镜筒102沿横摆方向转动的马达驱动机构。因而，镜筒102可以沿一个或多个轴的方向转动。注意，图1B示出针对固定单元103的位置的轴的定义。在摄像设备101的固定单元103上安装角速度计106和加速率计107这两者。然后，基于角速度计106和加速率计107来检测摄像设备101的振动，并且基于所检测到的抖动角度来可转动地驱动俯仰转动单元和平摇转动单元。采用对作为可动单元的镜筒102的抖动和倾斜进行相应校正的结构。图2是示出本实施例的摄像设备的结构的框图。在图2中，控制电路221由处理器(例如，CPU、GPU、微处理器和MPU)以及存储器(例如，DRAM和SRAM)等构成。这些组件执行各种类型的处理，以控制摄像设备101的各块并控制各块之间的数据传送。非易失性存储器(EEPROM)214是电可擦除/可记录的存储器，并且存储控制电路221工作所用的常数、以及程序等。在图2中，变焦单元201包括进行变倍的变焦透镜。变焦驱动控制电路202进行变焦单元201的驱动控制。调焦单元203包括进行焦点调整的透镜。调焦驱动控制电路204进行调焦单元203的驱动控制。摄像单元206包括图像传感器和A/D转换器，并且图像传感器接收经由透镜组入射的光，并将与该光量相对应的电荷有关的信息作为模拟图像信号输出至图像处理电路207。图像处理电路207是安装有多个ALU(算术和逻辑单元)的计算电路，并且对经由A/D转换输出的数字图像数据进行诸如失真校正、白平衡调整和颜色插值处理等的图像处理，并输出处理后的数字图像。从图像处理电路207输出的数字图像数据由图像记录电路208转换成诸如JPEG等的记录格式，并被发送至存储器213和后面要说明的视频图像输出电路215。镜筒转动驱动电路205驱动俯仰转动单元104和平摇转动单元105，从而沿俯仰方向和平摇方向驱动镜筒102。例如，在设备抖动检测电路209中安装有用于检测摄像设备101在三个轴方向上的角速度的角速度计(陀螺仪传感器)106和用于检测该设备在三个轴方向上的加速率的加速率计(加速率传感器)107。在设备抖动检测电路209中，基于所检测到的信号来计算设备的转动角度和设备的偏移量等。音频输入电路211从摄像设备101中所设置的麦克风获取摄像设备101的周围的音频信号，进行模数转换，并将处理后的信号发送至音频处理电路212。音频处理电路212对所输入的数字音频信号进行诸如优化处理等的与声音有关的处理。然后，音频处理电路212处理后的音频信号由控制电路221发送至存储器213。存储器213暂时存本文档来自技高网...

【技术保护点】
1.一种图像处理设备，包括：/n判断部件，用于在用户给出用以删除存储部件中所存储的图像数据的指示、并且所述图像数据满足预定条件的情况下，判断为所述存储部件中所存储的图像数据是要用于学习摄像部件要进行自动摄像的状况的图像数据。/n

【技术特征摘要】
20190603 JP 2019-1039471.一种图像处理设备，包括：
判断部件，用于在用户给出用以删除存储部件中所存储的图像数据的指示、并且所述图像数据满足预定条件的情况下，判断为所述存储部件中所存储的图像数据是要用于学习摄像部件要进行自动摄像的状况的图像数据。


2.根据权利要求1所述的图像处理设备，
其中，所述判断部件基于所述图像数据和与所述图像数据相关联的信息至少之一，来判断所述图像数据是否满足所述预定条件。


3.根据权利要求1所述的图像处理设备，还包括：
相似度判断部件，用于判断用户给出了删除指示的图像数据和所述存储部件中所存储的其它图像数据之间的相似度，
其中，在所述相似度判断部件判断为所述存储部件中所存储的图像数据包括与用户给出了删除指示的图像数据相似的图像数据的情况下，所述判断部件判断为不满足所述预定条件。


4.根据权利要求3所述的图像处理设备，
其中，所述相似度判断部件通过特征点提取处理来从用户给出了删除指示的图像数据中提取第一特征点组，通过所述特征点提取处理来从所述存储部件中所存储的其它图像数据中提取第二特征点组，对所述第一特征点组和所述第二特征点组进行匹配处理，并且相似的特征点的对的数量越多，判断为相似度越高。


5.根据权利要求3所述的图像处理设备，
其中，所述相似度判断部件通过将与所述存储部件中所存储的其它图像数据相关联的信息和与用户给出了删除指示的图像数据相关联的信息进行比较，来判断图像之间的相似度。


6.根据权利要求3所述的图像处理设备，
其中，所述相似度判断部件判断如下的图像之间的相似度，对于这...

【专利技术属性】
技术研发人员：长尾淳史，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本;JP