一种图像处理方法、图像信号处理器及拍摄装置制造方法及图纸

技术编号:38874278 阅读:17 留言:0更新日期:2023-09-22 14:08
一种图像处理方法,该方法通过对图像传感器一次曝光产生的一帧raw数据,基于不同的图像处理参数进行处理得到亮度不同的多帧图像,再将该多帧图像融合,使得融合图像的黑暗区域和明亮区域的亮度都合适(都能看清),从而实现拍摄宽动态场景的目的。相比现有的“多帧宽动态”的方案,本方法中融合图像是基于图像传感器一次曝光的raw数据来处理的,不存在在多次曝光的时间间隔期间由于运动引起的图像拖尾或伪影现象。并且,本申请在图像融合时,针对感兴趣区域进行目标检测得到目标轮廓对应的子图像,将该子图像与其他图像融合,相比“多帧宽动态”中全局图像融合的方式,可以提升融合图像的通透性。像的通透性。像的通透性。

【技术实现步骤摘要】
一种图像处理方法、图像信号处理器及拍摄装置


[0001]本申请涉及信号处理
,尤其涉及图像处理的方法、图像信号处理器和拍摄装置。

技术介绍

[0002]当前视频监控应用越来越广。在视频监控中,经常会碰到宽动态场景,即监控的场景中包含的明亮区域和黑暗区域的亮度差异较大。比如,在车辆抓拍场景中,由于车牌反光强,而车窗透光差,使得拍摄得到的图像中的车牌区域和车窗内的人脸区域的亮度相差较大(车牌区域为明亮区域,人脸区域为黑暗区域)。在这种场景下,如果要让拍摄得到的图像中车牌区域的亮度合适,就会使得车窗内的人脸区域太暗,导致看不清车内的人脸;而如果要让拍摄得到的图像中的人脸区域的亮度合适,又会使得车牌区域太亮,导致看不清车牌(车牌区域曝光过度成为白色)。
[0003]为了使得在宽动态场景下拍摄得到明亮区域和黑暗区域的亮度都合适的图像,相关技术通常采用多次曝光的方案。在该方案中,通过多次拍摄,每次拍摄时的曝光时长不同,以得到多帧亮度不同的图像,再将该多帧亮度不同的图像进行融合得到融合图像,从而使得融合图像中的明亮区域和黑暗区域的亮度都合适。然而,如果拍摄的场景中存在运动的物体,例如,拍摄的场景中存在行驶的车辆等,该方案会使得融合图像中存在伪影或拖尾现象,导致图像不清晰,即,融合图像的质量还是较差。

技术实现思路

[0004]有鉴于此,本申请提供一种图像处理方法和拍摄装置,有助于提升宽动态场景下拍摄的图像的质量。
[0005]为达上述目的,本申请提供如下技术方案:
[0006]第一方面,本申请提供了一种图像处理的方法,该方法包括:获取由图像传感器产生的raw数据,对该raw数据基于第一图像处理参数进行处理得到第一图像、并基于第二图像处理参数进行处理得到第二图像,然后融合该第一图像和第二图像得到融合图像。其中,上述第一图像处理参数与第二图像处理参数不同,以使得第一图像和第二图像的亮度不同。
[0007]可以理解的是,上述第一图像和第二图像的亮度不同,可以是第一图像的第一区域(比如,宽动态场景中的黑暗区域)的亮度处于期望的第一亮度范围,第二图像的第二区域(比如,宽动态场景中的明亮区域)的亮度处于期望的第二亮度范围,从而使得融合图像的第一区域的亮度处于期望的第一亮度范围且第二区域的亮度处于期望的第二亮度范围。
[0008]也就是说,通过本申请的第一方面,通过对图像sensor一次曝光产生的一帧raw数据,基于不同的图像信号处理参数进行两路处理得到亮度不同的两帧图像,再将该两帧图像融合,可以使得融合图像的黑暗区域和明亮区域的亮度都合适(都能看清),从而实现拍摄宽动态场景的目的。并且,相比现有的“多帧宽动态”的方案(基于图像sensor多次曝光产
生的多个raw数据分别得到多个图像再融合的方案),基于该第一方面的技术输出的图像是基于图像sensor一次曝光的raw数据来处理的,不存在在多次曝光的时间间隔期间由于运动引起的图像拖尾或伪影现象,因而可以提升拍摄宽动态图像的质量。
[0009]在一种可能的实现方式中,上述方法还包括:对该raw数据基于第三图像处理参数进行处理得到第三图像;其中,该第三图像处理参数与上述第一图像处理参数、第二图像处理参数不同,该第三图像的亮度与上述第一图像亮度不同、且与所述第二图像的亮度不同。应理解,在这种实现方式下,上述融合所述第一图像和所述第二图像得到融合图像,包括:融合上述第一图像,第二图像和第三图像得到融合图像。其中,第三图像的亮度与前述第一图像、第二图像的亮度不同,可以是第三图像的第三区域(比如,图像中除上述第一区域和第二区域之外的区域)的亮度处于期望的第三亮度范围,从而使得融合图像的第三区域的亮度处于所述期望的第三亮度范围。
[0010]也就是说,本申请还可以采用第三图像处理参数对raw数据进行第三路处理得到第三图像,使得第三图像的第三区域的亮度合适,从而最终使得融合图像的第三区域的亮度合适。
[0011]在一种可能的实现方式中,上述raw数据可以是基于车辆抓拍得到,那么,上述第一区域可以是该车辆的车窗区域,第二区域可以是该车辆的车牌区域,第三区域可以是该车辆的车身区域,或除raw数据中除上述第一区域和第二区域之外的区域。
[0012]通过这种方式,可以使得在车辆抓拍场景中,得到的融合图像的车窗区域、车牌区域和第三区域的亮度都处于期望的亮度范围,即使得这三个区域的亮度都合适。
[0013]在一种可能的实现方式中,上述融合第一图像和第二图像得到融合图像,可以是:对该第一图像进行目标轮廓检测得到目标区域,并从该第一图像中获取该目标区域对应的目标子图像,然后融合该目标子图像和第二图像得到该融合图像。通过这种方式,可以提升得到的融合图像的通透性和对比度,因而提升整体的视觉效果。
[0014]在一种可能的实现方式中,例如在车辆抓拍场景中,可以是对第一图像进行车窗轮廓检测得到车窗区域,并从该第一图像中获取车窗区域对应的车窗子图像,然后融合车窗子图像和第二图像得到融合图像。
[0015]在一种可能的实现方式中,上述融合第一图像、第二图像和第三图像得到融合图像,可以是:对该第一图像进行第一目标轮廓检测得到第一目标区域,并从该第一图像中获取该第一目标区域对应的第一目标子图像;对该第二图像进行第二目标轮廓检测得到第二目标区域,并从该第二图像中获取该第二目标区域对应的第二目标子图像;然后融合该第一目标子图像、第二目标子图像和第三图像得到该融合图像。通过这种方式,可以提升得到的融合图像的通透性和对比度,因而提升整体的视觉效果。
[0016]在一种可能的实现方式中,比如,在车辆抓拍的场景下,可以是对第一图像进行车窗轮廓检测得到车窗区域,并从该第一图像中获取车窗区域对应的车窗子图像;对第二图像进行车牌轮廓检测得到车牌区域,并从该第二图像中获取该车牌区域对应的车牌子图像,然后融合车窗子图像、车牌子图像和第三图像得到融合图像。
[0017]在一种可能的实施方式中,上述基于对第一图像进行目标轮廓检测得到目标区域,在根据目标区域得到目标子图像的过程,可以是细分割(比如,可以是像素级的分割),使得得到的目标子图像的边缘为目标的轮廓,比如得到的车窗子图像的边缘是车窗的轮
廓。应理解,在上述第二图像中分割得到子图像的过程也可以类似处理。
[0018]通过这种方式,可以避免目标子图像和全局图像(比如,上述的第三图像可以认为是全局图像)融合时,由目标子图像的边缘引起的不平滑效应。
[0019]在一种可能的实现方式下,在上述融合第一图像和第二图像之前,还可以对该第一图像或第二图像进行如下的一种或多种图像处理:降噪,亮度增强(根据需求提升或降低亮度)或对比度增强。通过这种方式,可以进一步提升融合图像的效果。
[0020]在一种可能的实现方式下,在上述融合目标子图像和全局图像时,也可以对目标子图像或全局图像进行如下的一种或多种图像处理:降噪,亮度增强,或对比度增强。通过这种方式,可以进一步提升融合图像的效果。
...

【技术保护点】

【技术特征摘要】
1.一种图像处理方法,应用于拍摄装置,其特征在于,包括:获取图像传感器产生的raw数据;对所述raw数据基于第一图像处理参数进行处理得到第一图像、以及基于第二图像处理参数进行处理得到第二图像;所述第一图像处理参数与所述第二图像处理参数不同,所述第一图像和第二图像的亮度不同;融合所述第一图像和所述第二图像得到融合图像。2.根据权利要求1所述的方法,其特征在于,所述第一图像的第一区域的亮度处于期望的第一亮度范围;所述第二图像的第二区域的亮度处于期望的第二亮度范围;所述融合图像的所述第一区域的亮度处于所述期望的第一亮度范围且所述融合图像的所述第二区域的亮度处于所述期望的第二亮度范围;所述第一区域与所述第二区域不同。3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:对所述raw数据基于第三图像处理参数进行处理得到第三图像;其中,所述第三图像处理参数与所述第一图像处理参数、所述第二图像处理参数不同,所述第三图像的亮度与所述第一图像亮度不同、且与所述第二图像的亮度不同;所述融合所述第一图像和所述第二图像得到融合图像,包括:融合所述第一图像,所述第二图像和所述第三图像得到融合图像。4.根据权利要求3所述的方法,其特征在于,所述第三图像的第三区域的亮度处于期望的第三亮度范围所述融合图像的所述第三区域的亮度处于所述期望的第三亮度范围。5.根据权利要求4所述的方法,其特征在于,所述raw数据基于拍摄宽动态场景得到;所述第一区域为所述宽动态场景中的黑暗区域;所述第二区域为所述宽动态场景中的明亮区域;所述第三区域为所述宽动态场景中的除所述明亮区域和黑暗区域中的其他区域。6.根据权利要求5所述的方法,其特征在于,所述raw数据基于车辆抓拍得到;所述第一区域为所述车辆的车窗区域;所述第二区域为所述车辆的车牌区域;所述第三区域为所述车辆的车身区域,或所述raw数据中除所述第一区域和第二区域之外的区域。7.根据权利要求1

6任意一项所述的方法,其特征在于,所述融合所述第一图像和所述第二图像得到融合图像,包括:对所述第一图像进行目标轮廓检测得到目标区域;从所述第一图像中获取所述目标区域对应的目标子图像;融合所述目标子图像和所述第二图像得到所述融合图像。8.根据权利要求7所述的方法,其特征在于,在所述融合所述目标子图像和所述第二图像得到所述融合图像之前,所述方法还包括:对所述目标子图像进行图像处理,所述图像处理包括如下的一种或多种:降噪、亮度增强和对比度增强。
9.根据权利要求7或8所述的方法,其特征在于,所述对所述第一图像进行轮廓检测得到目标区域,包括:对所述第一图像进行车窗轮廓检测得到车窗区域。10.根据权利要求1

【专利技术属性】
技术研发人员:黄进新
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1