图像处理设备、图像处理方法和存储介质技术

本发明专利技术涉及一种图像处理设备、图像处理方法和存储介质。为了针对进行隐私保护的图像选择适当的背景图像，图像处理设备获取所拍摄图像，并且从该所拍摄图像中提取与预定的被摄体相对应的被摄体区域。该图像处理设备基于所拍摄图像来从多个背景图像中选择处理所要使用的背景图像，并且进行用于针对所选择的背景图像来使所提取的被摄体区域模糊化的处理。

【技术实现步骤摘要】
图像处理设备、图像处理方法和存储介质
本专利技术涉及用于保护监视照相机所拍摄到的图像上的隐私的图像处理设备、图像处理方法和存储介质。
技术介绍
当前，监视照相机安装在许多区域。与此同时，监视照相机拍摄到的视频图像中所包括的个人隐私的保护变得越来越重要。日本专利5834193公开了用于通过使用人体检测结果来生成人体区域被遮罩的视频图像的技术。日本专利4578044公开了如下技术，其中利用该技术，接收到监视模块所提取的各图像之间的差异区域的轮廓信息的接收单元将该轮廓信息与背景图像合成，以显示合成图像。在利用遮罩图像来替换基于日本专利5834193中所论述的识别处理的结果所生成的遮罩区域的内部的技术中，如果识别处理失败，则被摄体暴露的可能性高。此外，由于日本专利4578044中所论述的技术是用于将轮廓信息与固定背景合成的技术，因此没有考虑在照相机所覆盖的监视区域中实际发生的变化(以下适当地称为现实世界的环境变化)。因而，用户难以识别该环境变化。
技术实现思路
根据本专利技术的方面，一种图像处理设备，包括：获取单元，用于获取所拍摄图像；提取单元，用于从所述所拍摄图像中提取与预定的被摄体相对应的被摄体区域；选择单元，用于基于所述所拍摄图像，来从多个背景图像中选择处理所要使用的背景图像；以及处理单元，用于针对所述选择单元所选择的背景图像，使所述提取单元所提取的被摄体区域模糊化。根据本专利技术的方面，一种图像处理方法，包括以下步骤：获取所拍摄图像；从所述所拍摄图像中提取与预定的被摄体相对应的被摄体区域；基于所述所拍摄图像，来从多个背景图像中选择处理所要使用的背景图像；以及进行用于针对所选择的背景图像来使所提取的被摄体区域模糊化的处理。根据本专利技术的方面，一种存储介质，其存储程序，所述程序用于使计算机用作：获取单元，用于获取所拍摄图像；提取单元，用于从所述所拍摄图像中提取与预定的被摄体相对应的被摄体区域；选择单元，用于基于所述所拍摄图像，来从多个背景图像中选择处理所要使用的背景图像；以及处理单元，用于进行用于针对所述选择单元所选择的背景图像来使所述提取单元所提取的被摄体区域模糊化的处理。通过以下参考附图对典型实施例的说明，本专利技术的其它特征将变得明显。附图说明图1是示出图像处理设备的硬件结构的框图。图2是示出图像处理设备的软件结构的示例的框图。图3是示出图像处理设备的处理的流程图。图4是示出所拍摄图像的示例的图。图5是示出被摄体的遮罩区域的示例的图。图6是示出隐私保护图像的示例的图。图7是示出图像处理设备的软件结构的框图。图8A～8C是各自示出背景图像的选择的示例的图。图9是示出图像处理设备的软件结构的框图。具体实施方式以下将参考附图来说明本专利技术的典型实施例。图1是示出图像处理设备100的硬件结构的框图。中央处理单元(CPU)11进行连接至系统总线14的各装置的控制。只读存储器(ROM)12存储基本输入/输出系统(BIOS)程序和引导程序。随机存取存储器(RAM)13用作CPU11的主存储装置。键盘控制器(KBC)15执行与来自诸如鼠标等的指示装置(PD)19和来自键盘(KB)20的信息的输入有关的处理。包含视频存储器的显示控制单元(CRTC)16根据来自CPU11的指示来在视频存储器中进行描绘，并且将视频存储器中所描绘的图像数据作为视频信号输出至阴极射线管(CRT)21。尽管图1示出CRT21作为显示装置，但可以使用任何类型的显示装置(例如，液晶显示装置)。盘控制器(DKC)17进行向硬盘(HDD)22的访问。网络接口卡(NIC)18连接至网络，并且经由该网络进行信息通信。HDD22存储OS程序和在OS上工作的各种应用的程序。HDD22是存储区域的示例。在上述结构中，在图像处理设备100变为ON(开启)的情况下，CPU11根据ROM12所存储的引导程序来将OS程序从HDD22载入RAM13。这样，图像处理设备100实现各装置的功能。图像处理设备100的CPU11基于ROM12或HDD22所存储的程序来执行处理。因而，实现了(以下所述的)图2、7和9中的图像处理设备100的软件结构、以及(以下所述的)图3的流程图中的处理。在第一典型实施例中，将说明图像处理设备100的信息处理。在该信息处理中，基于输入图像和背景图像各自中的除物体区域以外的部分之间的相似度来选择背景图像，将所选择的背景图像与遮罩区域的遮罩图像合成，并且生成合成图像(以下称为隐私保护图像)。因而，人物变模糊或被遮罩。图2是示出根据第一典型实施例的图像处理设备100的软件结构的示例的框图。图像处理设备100包括图像获取单元101、遮罩区域提取单元102、物体提取单元103、背景管理单元104、图像合成单元(模糊化处理单元)105和输出单元106。图像获取单元101按预定间隔从诸如配备有透镜和传感器的照相机等的摄像单元顺次获取图像，并且将这些图像提供至遮罩区域提取单元102和状态获取单元203。该摄像单元可以配置在图像处理设备100中，或者可以经由网络等可通信地连接至图像处理设备100。遮罩区域提取单元102提取作为隐私保护对象的被摄体遮罩区域。遮罩区域提取单元102基于遮罩区域提取所用的背景图像和图像获取单元101所获取到的图像之间的差异来提取遮罩区域。在背景图像上，不存在图像处理设备100的摄像区域中的被摄体。以下将详细说明用于对遮罩区域提取所用的背景图像以及遮罩区域进行提取的方法。遮罩区域提取所用的背景图像是如下的图像，其中该图像是按与图像获取单元101所获取到的图像的视角相等的视角所拍摄到的，并且不包括隐私保护对象。从图像处理设备100的处理开始起，遮罩区域提取单元102将从图像获取单元101获取到的图像存储在图像存储单元(未示出)中。在将预定个数(例如，100个)图像存储在图像存储单元中的阶段，遮罩区域提取单元102对图像存储单元中所存储的图像的像素值求平均，以生成遮罩区域提取所用的背景图像。此外，在生成遮罩区域提取所用的背景图像之后，每次从图像获取单元101获取图像时，遮罩区域提取单元102将各图像存储在图像存储单元中并且删除图像存储单元中所存储的最旧图像。然后，遮罩区域提取单元102对图像存储单元中所存储的图像的像素值求平均，以更新遮罩区域提取所用的背景图像。换句话说，遮罩区域提取单元102使用通过根据来自图像获取单元101的图像的获取时间点而使用预定个数(例如，100个)图像所生成的平均图像，来作为遮罩区域提取所用的背景图像。可选地，根据物体识别方法(例如，模式匹配)，遮罩区域提取单元102从图像获取单元101所获取到的多个图像中获取物体区域，并且对物体区域被去除的多个图像的像素值进行合成，以生成遮罩区域提取所用的背景图像。如上所述，可以使用用于生成不包括隐私保护的对象的图像的任何方法。遮罩区域提取单元102中所描绘的遮罩区域提取所用的背景图像不同于背景管理单元104中所描绘的背景图像。之后，遮罩区域提取单元102将如下的像素确定为遮罩以提取遮罩区域，其中在这些像素中，从图像获取单元101获取到的图像和遮罩区域提取所用的背景图像之间的亮度值的差超过阈值(例如，10％以上)。遮罩区域提取单元102可以执行能够通过图像处理来提取隐私保护对象的区域(被摄本文档来自技高网...

【技术保护点】
一种图像处理设备，其特征在于，包括：获取单元，用于获取所拍摄图像；提取单元，用于从所述所拍摄图像中提取与预定的被摄体相对应的被摄体区域；选择单元，用于基于所述所拍摄图像，来从多个背景图像中选择处理所要使用的背景图像；以及处理单元，用于针对所述选择单元所选择的背景图像，使所述提取单元所提取的被摄体区域模糊化。

【技术特征摘要】
2016.11.02 JP 2016-215302;2017.08.02 JP 2017-150011.一种图像处理设备，其特征在于，包括：获取单元，用于获取所拍摄图像；提取单元，用于从所述所拍摄图像中提取与预定的被摄体相对应的被摄体区域；选择单元，用于基于所述所拍摄图像，来从多个背景图像中选择处理所要使用的背景图像；以及处理单元，用于针对所述选择单元所选择的背景图像，使所述提取单元所提取的被摄体区域模糊化。2.根据权利要求1所述的图像处理设备，其中，所述多个背景图像包括按与所述获取单元所获取到的图像的地方和视角相同的地方和视角而拍摄到的多个图像。3.根据权利要求1所述的图像处理设备，其中，所述选择单元基于所述多个背景图像和所述所拍摄图像之间的相似度，来从所述多个背景图像中选择处理所要使用的背景图像，以及所述处理单元提取用于合成遮罩图像的遮罩区域，并且所述处理单元根据所述遮罩区域的所述遮罩图像和所选择的背景图像来生成保护图像。4.根据权利要求1所述的图像处理设备，其中，所述选择单元通过使用基于所述所拍摄图像的物体区域信息的相似度，来从所述多个背景图像中选择背景图像。5.根据权利要求4所述的图像处理设备，其中，还包括第一获取单元，所述第一获取单元用于获取所述所拍摄图像的物体区域信息，其中，所述选择单元通过使用基于所述所拍摄图像的物体区域信息的相似度，来选择背景图像。6.根据权利要求5所述的图像处理设备，其中，所述第一获取单元从所述所拍摄图像中去除物体区域，并且所述选择单元通过使用所述所拍摄图像的去除了所述物体区域...

【专利技术属性】
技术研发人员：川野敦史，
申请(专利权)人：佳能株式会社，
类型：发明
国别省市：日本,JP