摄像装置、该摄像装置的图像处理方法及介质制造方法及图纸

本发明专利技术提供一种能够抑制大型化及部件件数的增加，并且使通过第2拍摄模式时的拍摄而得到的近红外光图像容易看清的摄像装置、摄像装置的图像处理方法及非暂时性有形记录介质。在本发明专利技术的一方式中，当摄像部在第2拍摄模式下动作时，检测在由摄像部获取的第2图像数据内，与第2图像数据之前由摄像部获取的第2图像数据相比存在变化的变化区域。根据变化区域的检测结果，生成合成图像数据，所述合成图像数据是在与第2图像数据内的变化区域对应的变化区域图像数据上合成彩色图像的背景图像数据而得到的，所述彩色图像的背景图像数据根据通过摄像部在第2拍摄模式紧前的第1拍摄模式下获取的第1图像数据而生成且与和第2图像数据内的变化区域不同的背景区域对应。

Image processing device, image processing method and program of the camera

The invention provides an image processing method and program that can inhibit the increase of large scale and the number of components, and make the near-infrared light images obtained through shooting in the second shooting mode easy to see clearly. In one way of the invention, when the camera part moves in the second shooting mode, it is detected that there is a changing area in the second image data acquired by the camera part compared with the second image data acquired by the camera part before the second image data. According to the test results of change area, generates synthesized image data, the image data is synthesized image data corresponding to changes in the regional change region and the second image data in the synthesis of color image background image data obtained, corresponding to the background of regional background image data of the color image according to the change of the first image data through the camera in the second shooting mode right before the first shooting mode gets generated and the second image data in different regions.

【技术实现步骤摘要】
【国外来华专利技术】摄像装置、该摄像装置的图像处理方法及程序
本专利技术涉及一种设置于固定位置且无论昼夜进行被摄体的拍摄的摄像装置、该摄像装置的图像处理方法及程序。
技术介绍
近年来，广泛使用在公共设施及商业设施及住居地等设置于固定位置(定点)且无论昼夜进行被摄体的拍摄的监控摄像机(摄像装置)。这种昼夜兼用(也称为白天/夜晚功能(daynightfunction))的监控摄像机通常白天(昼间)拍摄被摄体的可见光图像，夜间拍摄被摄体的近红外光图像。专利文献1中记载有一种混合式摄像机，其具备：可见光摄像机，拍摄被摄体的可见光图像；及红外线摄像机，拍摄被摄体的热图像。通过将该专利文献1的混合式摄像机适用于上述监控摄像机来将2种摄像部设置于监控摄像机中，由此能够进行白天的可见光图像的拍摄和夜间的近红外光图像的拍摄。并且，专利文献1的混合式摄像机根据可见光图像的图像数据生成与被摄体的背景区域对应的背景图像数据，并且根据热图像的图像数据生成与被摄体内的运动体对应的运动体图像数据，并在背景图像数据上合成运动体图像数据，由此生成合成图像数据。如此，通过在基于可见光图像的背景图像上重合基于热图像的运动体图像，能够提供容易看清的图像。专利文献2中记载有一种摄像装置，其中，透过红外线截止滤波器插入到摄像光路中的光学系统拍摄被摄体的可见光图像，且透过红外线截止滤波器从摄像光路中退避的光学系统拍摄被摄体的近红外光图像。通过将该专利文献2的摄像装置适用于上述昼夜兼用的监控摄像机中，能够进行白天的可见光图像的拍摄和夜间的近红外光图像的拍摄。此时，根据红外线截止滤波器的有无，光路长度会发生变化，因此焦距也大幅变化，从而有可能发生图像模糊。因此，专利文献2中所记载的摄像装置中，通过在前述摄像光路上设置相位调制元件来抑制图像模糊的发生。现有技术文献专利文献专利文献1：日本特开2009-010675号公报专利文献2：日本特开2011-128238号公报
技术实现思路
专利技术所要解决的问题通过监控摄像机的夜间的拍摄而得到的近红外光图像为单色图像(黑白图像)，因此发生与通过白天的拍摄而得到的可见光图像相比难以看清的问题。因此，将前述专利文献1中所记载的技术适用于监控摄像机，在由可见光图像数据生成的背景图像数据上合成由近红外光图像数据生成的运动体图像数据来生成合成图像数据，由此能够使近红外光图像容易看清。然而，在该情况下，需同时进行可见光图像的拍摄和近红外光图像的拍摄。即，需要在监控摄像机中设置可见光图像的拍摄用及近红外光图像的拍摄用的2种摄像部。其结果，发生监控摄像机的大型化及部件件数增加的问题。并且，当将前述专利文献1中所记载的技术适用于监控摄像机时，需要利用高灵敏度摄像机在低照度下的夜间进行可见光图像的拍摄，在该情况下，发生可见光图像中的干扰增加的问题。专利文献2中记载有在摄像光路上设置相位调制元件来抑制由红外线截止滤波器的有无引起的图像模糊的发生，但没有关于如专利文献1那样生成合成图像数据的记载或暗示。因此，专利文献2的摄像装置中，通过夜间的拍摄而得到的单色图像的近红外光图像相比通过白天的拍摄而得到的可见光图像难以看清的问题未得到解决。另外，专利文献2的摄像装置中，需要在摄像光路上设置相位调制元件，因此发生监控摄像机的大型化及部件件数增加的问题。本专利技术是鉴于这种情况而完成的，其目的在于提供一种抑制大型化及部件件数的增加，并且能够使近红外光图像容易看清的摄像装置、摄像装置的图像处理方法及程序。用于解决问题的手段用于实现本专利技术的目的的摄像装置，其设置于固定位置，具备：光学系统，红外线截止滤波器能够插入到摄像光路中或者从摄像光路中退避；摄像部，其具有第1拍摄模式和第2拍摄模式，在所述第1拍摄模式下，透过红外线截止滤波器插入到摄像光路中的光学系统拍摄被摄体，获取表示可见光图像的第1图像数据，所述可见光图像为被摄体的可见光图像且为彩色图像，在所述第2拍摄模式下，透过红外线截止滤波器从摄像光路中退避的光学系统拍摄被摄体，获取包含近红外光图像的第2图像数据，所述近红外光图像为被摄体的近红外光图像且为单色图像；拍摄模式切换部，在第1拍摄模式与第2拍摄模式之间交替切换；及变化区域检测部，当摄像部在第2拍摄模式下动作时，检测在由摄像部获取的第2图像数据内，与第2图像数据之前由摄像部获取的第2图像数据相比存在变化的变化区域；及合成图像数据生成部，根据变化区域检测部的检测结果，生成合成图像数据，所述合成图像数据是在与第2图像数据内的变化区域对应的变化区域图像数据上合成彩色图像的背景图像数据而得到的，所述彩色图像的背景图像数据是根据通过摄像部在第2拍摄模式紧前的第1拍摄模式下获取的第1图像数据而生成且与和第2图像数据内的变化区域不同的背景区域对应。根据本专利技术，能够根据在第1拍摄模式下获取的表示可见光图像(彩色图像)的第1图像数据，将在第2拍摄模式下获取的包含近红外光图像(单色图像)的第2图像数据的背景区域进行彩色显示。本专利技术的其他方式所涉及的摄像装置中，合成图像数据生成部根据从与第1图像数据内的背景区域对应的区域中抽取的颜色信息和第2图像数据的背景区域中的亮度信息，生成背景图像数据。由此，能够根据亮度信息再现实际的明暗，可得到接近现实的图像(合成图像数据)。本专利技术的其他方式所涉及的摄像装置中，合成图像数据生成部使用与第1图像数据内的背景区域对应的区域中所包含的图像数据其本身来生成背景图像数据。作为背景图像数据，直接使用可见光图像的第1图像数据，因此可防止背景图像数据受到前述色差(倍率色差)的影响。并且，在背景图像数据的生成中不需要复杂的图像处理等，且系统的负荷减少。本专利技术的其他方式所涉及的摄像装置中，非变化区域检测部，检测在第1拍摄模式下由摄像部在不同的时刻获取的多个第1图像数据中的非变化区域；及根据非变化区域检测部的检测结果，由与第1图像数据内的非变化区域对应的图像数据生成背景图像数据。由此，能够从基于背景图像数据的图像内除去运动体。本专利技术的其他方式所涉及的摄像装置中，具备至少对变化区域图像数据进行锐化处理的锐化处理部。由此，能够校正可见光与近红外光的色差(倍率色差)。本专利技术的其他方式所涉及的摄像装置中，具备至少对变化区域图像数据进行倍率色差校正处理的倍率色差校正处理部。由此，能够校正可见光与近红外光的色差(倍率色差)。本专利技术的其他方式所涉及的摄像装置中，具备至少对变化区域图像数据进行基于对近红外光的光学系统的第1光学特性的点像复原处理的第1点像复原处理部。由此，能够校正可见光与近红外光的色差(倍率色差)。本专利技术的其他方式所涉及的摄像装置中，第1光学特性为对近红外光的光学系统的第1点扩散函数，第1点像复原处理部对变化区域图像数据进行的点像复原处理中，复原变化区域图像数据的振幅分量和由非点对称的第1点扩散函数的形状而产生的相位分量。由此，能够校正可见光与近红外光的色差(倍率色差)。本专利技术的其他方式所涉及的摄像装置中，对第1图像数据进行基于对可见光的光学系统的第2光学特性的点像复原处理。由此，能够校正可见光与近红外光的色差(倍率色差)。本专利技术的其他方式所涉及的摄像装置中，第2光学特性为对红色、绿色及蓝色的可见光的光学系统的每个颜色的第2点扩散函数，第2点像复原处理部对第1图像数据本文档来自技高网...

【技术保护点】
一种摄像装置，其设置于固定位置，具备：光学系统，红外线截止滤波器能够插入到摄像光路中或者从摄像光路中退避；摄像部，其具有第1拍摄模式和第2拍摄模式，在所述第1拍摄模式下，透过所述红外线截止滤波器插入到摄像光路中的所述光学系统拍摄被摄体，获取表示可见光图像的第1图像数据，所述可见光图像为所述被摄体的可见光图像且为彩色图像，在所述第2拍摄模式下，透过所述红外线截止滤波器从摄像光路中退避的所述光学系统拍摄被摄体，获取包含近红外光图像的第2图像数据，所述近红外光图像为所述被摄体的近红外光图像且为单色图像；拍摄模式切换部，在所述第1拍摄模式与所述第2拍摄模式之间交替切换；变化区域检测部，当所述摄像部在所述第2拍摄模式下动作时，检测在由所述摄像部获取的所述第2图像数据内，与该第2图像数据之前由所述摄像部获取的所述第2图像数据相比存在变化的变化区域；及合成图像数据生成部，根据所述变化区域检测部的检测结果，生成合成图像数据，所述合成图像数据是在与所述第2图像数据内的所述变化区域对应的变化区域图像数据上合成彩色图像的背景图像数据而得到的，所述彩色图像的背景图像数据根据通过所述摄像部在所述第2拍摄模式紧前的所述第1拍摄模式下获取的所述第1图像数据而生成且与和所述第2图像数据内的所述变化区域不同的背景区域对应。...

【技术特征摘要】
【国外来华专利技术】2015.04.23 JP 2015-0882291.一种摄像装置，其设置于固定位置，具备：光学系统，红外线截止滤波器能够插入到摄像光路中或者从摄像光路中退避；摄像部，其具有第1拍摄模式和第2拍摄模式，在所述第1拍摄模式下，透过所述红外线截止滤波器插入到摄像光路中的所述光学系统拍摄被摄体，获取表示可见光图像的第1图像数据，所述可见光图像为所述被摄体的可见光图像且为彩色图像，在所述第2拍摄模式下，透过所述红外线截止滤波器从摄像光路中退避的所述光学系统拍摄被摄体，获取包含近红外光图像的第2图像数据，所述近红外光图像为所述被摄体的近红外光图像且为单色图像；拍摄模式切换部，在所述第1拍摄模式与所述第2拍摄模式之间交替切换；变化区域检测部，当所述摄像部在所述第2拍摄模式下动作时，检测在由所述摄像部获取的所述第2图像数据内，与该第2图像数据之前由所述摄像部获取的所述第2图像数据相比存在变化的变化区域；及合成图像数据生成部，根据所述变化区域检测部的检测结果，生成合成图像数据，所述合成图像数据是在与所述第2图像数据内的所述变化区域对应的变化区域图像数据上合成彩色图像的背景图像数据而得到的，所述彩色图像的背景图像数据根据通过所述摄像部在所述第2拍摄模式紧前的所述第1拍摄模式下获取的所述第1图像数据而生成且与和所述第2图像数据内的所述变化区域不同的背景区域对应。2.根据权利要求1所述的摄像装置，其中，所述合成图像数据生成部根据从与所述第1图像数据内的所述背景区域对应的区域中抽取的颜色信息和所述第2图像数据的所述背景区域中的亮度信息来生成所述背景图像数据。3.根据权利要求1所述的摄像装置，其中，所述合成图像数据生成部使用与所述第1图像数据内的所述背景区域对应的区域中所包含的图像数据其本身来生成所述背景图像数据。4.根据权利要求1至3中任一项所述的摄像装置，非变化区域检测部，检测在所述第1拍摄模式下由所述摄像部在不同的时刻获取的多个所述第1图像数据中的非变化区域；及根据所述非变化区域检测部的检测结果，由与所述第1图像数据内的所述非变化区域对应的图像数据生成所述背景图像数据。5.根据权利要求1至4中任一项所述的摄像装置，其具备锐化处理部，所述锐化处理部至少对所述变化区域图像数据进行锐化处理。6.根据权利要求1至4中任一项所述的摄像装置，其具备倍率色差校正处理部，所述倍率色差校正处理部至少对所述变化区域图像数据进行倍率色差校正处理。7.根据权利要求1至4中任一项所述的摄像装置，其具备第1点像复原处理部，所述第1点像复原处理部至少对所述变化区域图像数据进行基于对近红外光的所述光学系统的第1光学特性的点像复原处理。8.根据权利要求7所述的摄像装置，其中，所述第1光学特性为对所述近红外光的所述光学系统的第1点扩散函数，所述第1点像复原处理部对所述变化区域图像数据进行的所述点像复原处理中，复原该变化区域图像数据的振幅分量和由非点对称的所述第1点扩散函数的形状而产生的相位分量。9.根据权利要求7或8所述的摄像装置，其具备第2点像复原处理部，所述第2点像复原处理部对所述第1图像数据进行基于对可见光的所述光学系统的第2光学特性的点像复原处理。10.根据权利要求...

【专利技术属性】
技术研发人员：椚濑高志，成濑洋介，
申请(专利权)人：富士胶片株式会社，
类型：发明
国别省市：日本,JP