图像处理方法、装置、电子设备及可读存储介质制造方法及图纸

本申请实施例提供一种图像处理方法、装置、电子设备及可读存储介质，考虑到不同的场景下图像的过曝区域与过暗区域不同，首先获取一帧第一夜景图像，并以该第一夜景图像的过曝区域与过暗区域为依据，动态确定待采集图像的曝光度以及每个曝光度对应的待采集帧数，然后在确定的每个曝光度下分别采集与该曝光度对应的待采集帧数图像，并分别对每个曝光度下的待采集帧数图像进行多帧降噪处理，从而避免因帧数不足导致多帧降噪效果不佳，或者帧数过多导致计算资源浪费的情况，提高夜景图像拍摄效果。

Image processing method, device, electronic equipment and readable storage medium

The embodiment of the application provides an image processing method, device, electronic device and readable storage medium. Considering that the over exposed area and the over dark area of an image are different in different scenes, a first night view image is acquired, and the exposure of the image to be collected and the corresponding to each exposure are dynamically determined based on the over exposed area and the over dark area of the first night view image Collect the number of frames, then collect the number of frames to be collected corresponding to the exposure at each exposure, and carry out multi frame noise reduction processing for the number of frames to be collected under each exposure, so as to avoid the poor effect of multi frame noise reduction caused by the insufficient number of frames, or the waste of computing resources caused by the excessive number of frames, and improve the night scene image shooting effect.

【技术实现步骤摘要】
图像处理方法、装置、电子设备及可读存储介质
本申请涉及图像处理
，具体而言，涉及一种基于夜景图像的图像处理方法、装置、电子设备及可读存储介质。
技术介绍
拍照功能是目前移动电子设备(例如智能手机、平板电脑、智能穿戴设备等)上的一个重要功能。即使一般移动电子设备的拍照性能远不如专业单反相机，但是通过图像处理算法结合一些拍照技能，依然可以利用移动电子设备拍摄出效果惊艳的照片，在拍照效果上足以满足大部分用户的日常需求。目前，大部分电子产品在白天或者天气状况良好的情况下，成像效果通常不会有太大的区别，但是在弱光场景(例如夜晚)下，受限于电子产品摄像头的配置，很难实现较好的拍摄效果。例如，在夜晚等光线不足的场景下，如果需要提亮照片，则极容易增加图像噪声，导致夜景图像的画质较低，严重影响拍照体验。尽管目前存在诸多图像去噪算法，但是大多是采用固定设定帧数对拍摄图像进行多帧降噪处理。然而，当噪声程度较强时，这些固定设定帧数可能由于帧数不足而无法达到较佳的去噪效果，或者当噪声程度较低时，这些固定设定帧数可能比实际需要的多，一方面会浪费计算资源，另一方面也可能使得降噪图像变得更模糊。
技术实现思路
有鉴于此，本申请的目的在于提供一种图像处理方法、装置、电子设备及可读存储介质，能够针对不同的场景动态确定曝光度以及每个曝光度对应的待采集帧数，以避免因帧数不足导致多帧降噪效果不佳，或者帧数过多导致计算资源浪费的情况，提高夜景图像拍摄效果。根据本申请的一方面，提供一种图像处理方法，应用于电子设备，所述方法包括：获取一帧第一夜景图像，并根据所述第一夜景图像的过曝区域与过暗区域，确定待采集图像的曝光度以及每个曝光度对应的待采集帧数；根据所述待采集图像的曝光度以及每个曝光度对应的待采集帧数，在每个曝光度下获取多帧第二夜景图像；分别对每个曝光度对应的多帧第二夜景图像进行多帧降噪处理，得到每个曝光度对应的第三夜景图像；对所述每个曝光度对应的第三夜景图像进行图像处理，得到目标夜景图像。根据本申请的另一方面，还提供一种图像处理装置，应用于电子设备，所述装置包括：获取确定模块，用于获取一帧第一夜景图像，并根据所述第一夜景图像的过曝区域与过暗区域，确定待采集图像的曝光度以及每个曝光度对应的待采集帧数；图像获取模块，用于根据所述待采集图像的曝光度以及每个曝光度对应的待采集帧数，在每个曝光度下获取多帧第二夜景图像；降噪处理模块，用于分别对每个曝光度对应的多帧第二夜景图像进行多帧降噪处理，得到每个曝光度对应的第三夜景图像；图像处理模块，用于对所述每个曝光度对应的第三夜景图像进行图像处理，得到目标夜景图像。根据本申请的另一方面，还提供一种电子设备，所述电子设备包括机器可读存储介质及处理器，所述机器可读存储介质存储有机器可执行指令，所述处理器在执行所述机器可执行指令时，该电子设备实现前述的图像处理方法。根据本申请的另一方面，还提供一种可读存储介质，所述可读存储介质中存储有机器可执行指令，所述机器可执行指令被执行时实现前述的图像处理方法。基于上述任一方面，本申请考虑到不同的场景下图像的过曝区域与过暗区域不同，首先获取一帧第一夜景图像，并以该第一夜景图像的过曝区域与过暗区域为依据，动态确定待采集图像的曝光度以及每个曝光度对应的待采集帧数，然后在确定的每个曝光度下分别采集与该曝光度对应的待采集帧数图像，并分别对每个曝光度下的待采集帧数图像进行多帧降噪处理，从而避免因帧数不足导致多帧降噪效果不佳，或者帧数过多导致计算资源浪费的情况，提高夜景图像拍摄效果。附图说明为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它相关的附图。图1示出了本申请实施例所提供的图像处理方法的流程示意图之一；图2示出了图1中所示的一种实施方式中步骤S110的子流程示意图；图3示出了一种示例所提供的第二夜景图像的采集顺序示意图；图4示出了图1中所示的一种实施方式中步骤S140的子流程示意图；图5示出了本申请实施例的特征点筛选结果和常见方案的特征点筛选结果的对照示意图；图6示出了本申请实施例所提供的图像处理方法的流程示意图之二；图7示出了本申请实施例所提供的图像处理装置的功能模块示意图；图8示出了本申请实施例所提供的用于实现上述图像处理方法的电子设备的结构示意框图。具体实施方式为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，应当理解，本申请中附图仅起到说明和描述的目的，并不用于限定本申请的保护范围。另外，应当理解，示意性的附图并未按实物比例绘制。本申请中使用的流程图示出了根据本申请实施例的一些实施例实现的操作。应该理解，流程图的操作可以不按顺序实现，没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外，本领域技术人员在本申请内容的指引下，可以向流程图添加一个或多个其它操作，也可以从流程图中移除一个或多个操作。另外，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其它实施例，都属于本申请保护的范围。图1示出了本申请实施例提供的图像处理方法的流程示意图。应当理解，在其它实施例中，本实施例的图像处理方法其中部分步骤的顺序可以根据实际需要相互交换，或者其中的部分步骤也可以省略或删除。该图像处理方法的详细步骤介绍如下。步骤S110，获取一帧第一夜景图像，并根据第一夜景图像的过曝区域与过暗区域，确定待采集图像的曝光度以及每个曝光度对应的待采集帧数。本实施例中，该第一夜景图像可以是该预先存储的以往拍摄的夜景图像，还可以是就当前夜景拍摄获得的夜景图像，本实施例对此不作具体限制。步骤S120，根据待采集图像的曝光度以及每个曝光度对应的待采集帧数，在每个曝光度下获取多帧第二夜景图像。步骤S130，分别对每个曝光度对应的多帧第二夜景图像进行多帧降噪处理，得到每个曝光度对应的第三夜景图像。步骤S140，对每个曝光度对应的第三夜景图像进行图像处理，得到目标夜景图像。相较于现有技术采用固定设定帧数对拍摄图像进行多帧降噪的方式，本实施例考虑到不同的场景下图像的过曝区域与过暗区域不同，首先获取一帧第一夜景图像，并以该第一夜景图像的过曝区域与过暗区域为依据，动态确定待采集图像的曝光度以及每个曝光度对应的待采集帧数，然后在确定的每个曝光度下分别采集与该曝光度对应的待采集帧数图像，并分别对每个曝光度下的待采集帧数图像进行多帧降噪处理，从而避免因帧数不足导致多帧降噪效果不佳，或者帧数过多导致计算资源浪费的情况，提高夜景图像拍摄效果。在一种可能的实施方式中，针对步骤S110，请结合参阅图2，具体可以通过如下子步骤实现S111-S114实现，具体描述如下。子步骤S111，本文档来自技高网...

【技术保护点】
1.一种图像处理方法，其特征在于，应用于电子设备，所述方法包括：获取一帧第一夜景图像，并根据所述第一夜景图像的过曝区域与过暗区域，确定待采集图像的曝光度以及每个曝光度对应的待采集帧数；根据所述待采集图像的曝光度以及每个曝光度对应的待采集帧数，在每个曝光度下获取多帧第二夜景图像；分别对每个曝光度对应的多帧第二夜景图像进行多帧降噪处理，得到每个曝光度对应的第三夜景图像；对所述每个曝光度对应的第三夜景图像进行图像处理，得到目标夜景图像。

【技术特征摘要】
1.一种图像处理方法，其特征在于，应用于电子设备，所述方法包括：获取一帧第一夜景图像，并根据所述第一夜景图像的过曝区域与过暗区域，确定待采集图像的曝光度以及每个曝光度对应的待采集帧数；根据所述待采集图像的曝光度以及每个曝光度对应的待采集帧数，在每个曝光度下获取多帧第二夜景图像；分别对每个曝光度对应的多帧第二夜景图像进行多帧降噪处理，得到每个曝光度对应的第三夜景图像；对所述每个曝光度对应的第三夜景图像进行图像处理，得到目标夜景图像。2.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述第一夜景图像的过曝区域与过暗区域，确定待采集图像的曝光度以及每个曝光度对应的待采集帧数的步骤，包括：从所述第一夜景图像中识别出过曝区域与过暗区域；计算所述过曝区域在所述第一夜景图像中的第一比例以及所述过暗区域在所述第一夜景图像中的第二比例；根据所述第一比例和所述第二比例确定待采集图像的曝光度；根据所述第一夜景图像的感光度以及确定的每个曝光度按照预设的帧数对应关系，确定每个曝光度对应的待采集帧数，其中，每一种待采集帧数与一个感光度以及一个曝光度对应。3.根据权利要求2所述的图像处理方法，其特征在于，所述从所述第一夜景图像中识别出过曝区域与过暗区域的步骤，包括：获取所述第一夜景图像的灰度直方图；根据所述灰度直方图中每个像素点的灰度值，将灰度值大于第一灰度阈值的像素点确定为第一像素点，将灰度值小于第二灰度阈值的像素点确定为第二像素点；将包括所有第一像素点的区域确定为过曝区域，并将包括所有第二像素点的区域确定为过暗区域。4.根据权利要求2所述的图像处理方法，其特征在于，所述待采集图像的曝光度包括所述第一夜景图像的第一曝光度，所述根据所述第一比例和所述第二比例确定待采集图像的曝光度的步骤，包括：若所述第一比例小于第一设定值，且所述第二比例小于第二设定值，则确定所述待采集图像的曝光度为所述第一夜景图像的第一曝光度；若所述第一比例大于第三设定值，则根据所述第一曝光度以及第一比例与所述第三设定值之差确定第二曝光度，并确定所述待采集图像的曝光度还包括所述第二曝光度；若所述第二比例大于第四设定值，则根据所述第一曝光度以及第二比例与所述第四设定值之差确定第三曝光度，并确定所述待采集图像的曝光度还包括所述第三曝光度。5.根据权利要求1-4中任意一项所述的图像处理方法，其特征在于，所述待采集图像的曝光度包括所述第一夜景图像的第一曝光度、小于所述第一曝光度的第二曝光度和大于所述第一曝光度的第三曝光度，所述根据所述待采集图像的曝光度以及每个曝光度对应的待采集帧数，在每个曝光度下获取多帧第二夜景图像的步骤，包括：在所述第一曝光度下采集多帧第二夜景图像；在所述第二曝光度下采集一帧第二夜景图像；在所述第三曝光度下采集一帧第二夜景图像；在所述第二曝光度下采集剩余的每帧第二夜景图像；在所述第三曝光度下采集剩余的每帧第二夜景图像，以得到每个曝光度对应的多帧第二夜景图像。6.根据权利要求1-4中任意一项所述的图像处理方法，其特征在于，所述分别对每个曝光度对应的多帧第二夜景图像进行多帧降噪处理，得到每个曝光度对应的第三夜景图像的步骤之前，所述方法还包括：针对每个曝光度，判断该曝光度对应的第一帧第二夜景图像的过曝区域与过暗区域是否满足预设条件；若该第一帧第二夜景图像不满足预设条件，则将曝光度下的多帧第二夜景图像确定为多帧降噪移除图像，以停止对该曝光度对应的多帧第二夜景图像进行多帧降...

【专利技术属性】
技术研发人员：陈铭津，李骈臻，张伟，张长定，陈星，
申请(专利权)人：厦门美图之家科技有限公司，
类型：发明
国别省市：福建,35