图像处理方法与电子装置制造方法及图纸

本发明专利技术提供一种图像处理方法与电子装置，所述方法包括：取得多个第一图像；取得第一深度信息；根据第一图像产生第二图像；根据第一深度信息，识别第二图像中的主体以及背景；判断是否需对第二图像中的主体进行优化；当需对第二图像中的主体进行优化时，对第二图像中的主体进行优化，根据背景以及优化后的主体产生输出图像，并输出此输出图像；以及当不需对第二图像中的主体进行优化时，根据背景以及主体产生输出图像，并输出此输出图像。

Image processing methods and electronic devices

【技术实现步骤摘要】
图像处理方法与电子装置
本专利技术涉及一种图像处理方法与电子装置，尤其涉及高动态范围图像的图像处理方法与电子装置。
技术介绍
图1A至图1C是传统单张图像的取像技术的示意图。传统单张图像的取像技术，在高反差亮度的场景时(例如：逆光场景)，由于感测器动态范围(DynamicRange)的限制，此时若主体(例如：人像)亮度较暗，为拉亮此暗部区域图像亮度，而选择较长的曝光设定，会造成图像其他明亮区域，因曝光设定增长而造成过曝，因此形成主体亮度正常但背景过曝的不佳图像，如图1A所示。若曝光设定改以亮部区域为主时，为避免亮部区域过曝，则会因选择较短的曝光设定，反而造成图像主体区域因曝光不足而过暗，如图1B所示。如此，不管怎样的曝光设定，使用者皆无法拍到主体、背景皆清晰的图像。一般来说，为了达到图像最佳的效果，可以将多张图像叠合成单一高动态范围图像，并通过阶调再现(ToneReproduction)技术，调整每一个像素的亮度。此方法可以较精准地还原现场景物的动态范围，避免图像有过曝或过暗的区域，并产生明亮与暗部区域的细节。为了产生好的迭合图像，通常需要多张不同曝光设定的图像，因此得花费较多的计算时间(ComputationTime)与存储器空间，方能有效地完成迭合。然而，区域性阶调再现的调整不仅费时，且容易产生光晕(例如，黑白边界处，有异常的白边或黑边)的问题，如图1C所示。此外，现有高动态图像处理技术，有时主体亮度经图像处理迭合后，对比度也跟着下降，造成主体立体感下降且不自然的亮度变化。
技术实现思路
r>本专利技术提供一种图像处理方法与电子装置，可以使用深度信息来优化高动态范围图像，使得优化后的高动态范围图像可以更贴近人眼所见，并且能达到更佳的视觉效果。本专利技术的提出一种图像处理方法，用于电子装置，所述方法包括：取得多个第一图像；取得第一深度信息；根据所述多个第一图像产生第二图像；根据所述第一深度信息，识别所述第二图像中的主体以及背景；判断是否需对所述第二图像中的所述主体进行优化；当需对所述第二图像中的所述主体进行优化时，对所述第二图像中的所述主体进行优化，根据所述背景以及优化后的所述主体产生输出图像，并输出所述输出图像；以及当不需对所述第二图像中的所述主体进行优化时，根据所述背景以及所述主体产生所述输出图像，并输出所述输出图像。在本专利技术的一实施例中，其中取得所述多个第一图像的步骤包括：取得对应于所述主体的第二深度信息；根据所述第二深度信息，决定第一曝光值；根据所述第一曝光值，决定至少一第二曝光值；以及根据所述第一曝光值以及所述第二曝光值获取所述多个第一图像。在本专利技术的一实施例中，其中取得所述第一深度信息的步骤包括：根据所述多个第一图像中使用所述第一曝光值拍摄的第三图像，取得所述第一深度信息。在本专利技术的一实施例中，所述方法还包括：取得使用所述第一曝光值获取的第四图像，其中用于获取所述多个第一图像的第一图像获取电路不同于用于获取所述第四图像的第二图像获取电路。其中取得所述第一深度信息的步骤包括：根据所述第三图像以及所述第四图像取得所述第一深度信息。在本专利技术的一实施例中，其中取得对应于所述主体的所述第二深度信息的步骤包括：获得至少一第五图像，其中所述第五图像是由所述第一图像获取电路所获取；获得至少一第六图像，其中所述第六图像是由所述第二图像获取电路所获取；以及根据所述第五图像以及所述第六图像取得对应于所述主体的所述第二深度信息。在本专利技术的一实施例中，其中所述第二深度信息是通过深度感测电路所获得，其中取得所述第一深度信息的步骤包括：根据所述多个第一图像中使用所述第一曝光值拍摄的所述第三图像以及所述深度感测电路感测所述主体所获得的第三深度信息，取得所述第一深度信息。在本专利技术的一实施例中，其中判断是否需对所述第二图像中的所述主体进行优化的步骤包括：根据所述第二图像以及所述多个第一图像中的至少一第五图像，判断所述第二图像中的所述主体的第一参数与所述第五图像中的所述主体的第二参数的差值是否大于一门槛值；当所述差值大于所述门槛值时，判断需对所述第二图像中的所述主体进行优化；以及当所述差值不大于所述门槛值时，判断不需对所述第二图像中的所述主体进行优化。在本专利技术的一实施例中，所述第一参数与所述第二参数为亮度值和/或对比度。在本专利技术的一实施例中，其中在产生所述输出图像的步骤包括：对所述背景进行虚化，并根据虚化后的所述背景产生所述输出图像。在本专利技术的一实施例中，其中所述第二图像为高动态范围图像(HighDynamicRangeImage，HDR)。本专利技术提出一种电子装置，所述电子装置包括处理器。所述处理器用以执行下述操作：取得多个第一图像；取得第一深度信息；根据所述多个第一图像产生第二图像；根据所述第一深度信息，识别所述第二图像中的主体以及背景；判断是否需对所述第二图像中的所述主体进行优化；当需对所述第二图像中的所述主体进行优化时，对所述第二图像中的所述主体进行优化，根据所述背景以及优化后的所述主体产生输出图像，并输出所述输出图像；以及当不需对所述第二图像中的所述主体进行优化时，根据所述背景以及所述主体产生所述输出图像，并输出所述输出图像。在本专利技术的一实施例中，其中在取得所述多个第一图像的操作中，所述处理器还用以执行下述操作：取得对应于所述主体的第二深度信息；根据所述第二深度信息，决定第一曝光值；根据所述第一曝光值，决定至少一第二曝光值；以及所述处理器根据所述第一曝光值以及所述第二曝光值获取所述多个第一图像。在本专利技术的一实施例中，其中在取得所述第一深度信息的操作中，所述处理器根据所述多个第一图像中使用所述第一曝光值拍摄的第三图像，取得所述第一深度信息。在本专利技术的一实施例中，所述处理器取得使用所述第一曝光值获取的第四图像，其中用于获取所述多个第一图像的第一图像获取电路不同于用于获取所述第四图像的第二图像获取电路。其中在取得所述第一深度信息的操作中，所述处理器根据所述第三图像以及所述第四图像取得所述第一深度信息。在本专利技术的一实施例中，其中在取得对应于所述主体的所述第二深度信息的操作中，所述处理器获得至少一第五图像，其中所述第五图像是由所述第一图像获取电路所获取。所述处理器获得至少一第六图像，其中所述第六图像是由所述第二图像获取电路所获取。所述处理器根据所述第五图像以及所述第六图像取得对应于所述主体的所述第二深度信息。在本专利技术的一实施例中，其中所述第二深度信息是通过深度感测电路所获得，其中在取得所述第一深度信息的操作中，所述处理器根据所述多个第一图像中使用所述第一曝光值拍摄的所述第三图像以及所述深度感测电路感测所述主体所获得的一第三深度信息，取得所述第一深度信息。在本专利技术的一实施例中，其中在判断是否需对所述第二图像中的所述主体进行优化的操作中，所述处理器根据所述第二图像以及所述多个第一图像中的至少一第五图像，判断所述第二图像中的所述主体的第一参数与所述第五图像中的所述主体的第二参数的差值是否大于门槛值。当所述差值大于所述门槛值时，本文档来自技高网...

【技术保护点】
1.一种图像处理方法，用于电子装置，其特征在于，所述方法包括：/n取得多个第一图像；/n取得第一深度信息；/n根据所述多个第一图像产生第二图像；/n根据所述第一深度信息，识别所述第二图像中的主体以及背景；/n判断是否需对所述第二图像中的所述主体进行优化；/n当需对所述第二图像中的所述主体进行优化时，对所述第二图像中的所述主体进行优化，根据所述背景以及优化后的所述主体产生输出图像，并输出所述输出图像；以及/n当不需对所述第二图像中的所述主体进行优化时，根据所述背景以及所述主体产生所述输出图像，并输出所述输出图像。/n

【技术特征摘要】
20180702 TW 1071228231.一种图像处理方法，用于电子装置，其特征在于，所述方法包括：
取得多个第一图像；
取得第一深度信息；
根据所述多个第一图像产生第二图像；
根据所述第一深度信息，识别所述第二图像中的主体以及背景；
判断是否需对所述第二图像中的所述主体进行优化；
当需对所述第二图像中的所述主体进行优化时，对所述第二图像中的所述主体进行优化，根据所述背景以及优化后的所述主体产生输出图像，并输出所述输出图像；以及
当不需对所述第二图像中的所述主体进行优化时，根据所述背景以及所述主体产生所述输出图像，并输出所述输出图像。


2.根据权利要求1所述的图像处理方法，其中取得所述多个第一图像的步骤包括：
取得对应于所述主体的第二深度信息；
根据所述第二深度信息，决定第一曝光值；
根据所述第一曝光值，决定至少第二曝光值；以及
根据所述第一曝光值以及所述第二曝光值获取所述多个第一图像。


3.根据权利要求2所述的图像处理方法，其中取得所述第一深度信息的步骤包括：
根据所述多个第一图像中使用所述第一曝光值拍摄的第三图像，取得所述第一深度信息。


4.根据权利要求3所述的图像处理方法，还包括：
取得使用所述第一曝光值获取的第四图像，其中用于获取所述多个第一图像的第一图像获取电路不同于用于获取所述第四图像的第二图像获取电路，
其中取得所述第一深度信息的步骤包括：
根据所述第三图像以及所述第四图像取得所述第一深度信息。


5.根据权利要求4所述的图像处理方法，其中取得对应于所述主体的所述第二深度信息的步骤包括：
获得至少第五图像，其中所述第五图像是由所述第一图像获取电路所获取；
获得至少第六图像，其中所述第六图像是由所述第二图像获取电路所获取；以及
根据所述第五图像以及所述第六图像取得对应于所述主体的所述第二深度信息。


6.根据权利要求3所述的图像处理方法，其中所述第二深度信息是通过深度感测电路所获得，其中取得所述第一深度信息的步骤包括：
根据所述多个第一图像中使用所述第一曝光值拍摄的所述第三图像以及所述深度感测电路感测所述主体所获得的第三深度信息，取得所述第一深度信息。


7.根据权利要求1所述的图像处理方法，其中判断是否需对所述第二图像中的所述主体进行优化的步骤包括：
根据所述第二图像以及所述多个第一图像中的至少第五图像，判断所述第二图像中的所述主体的第一参数与所述第五图像中的所述主体的第二参数的差值是否大于门槛值；
当所述差值大于所述门槛值时，判断需对所述第二图像中的所述主体进行优化；以及
当所述差值不大于所述门槛值时，判断不需对所述第二图像中的所述主体进行优化。


8.根据权利要求7所述的图像处理方法，其中所述第一参数与所述第二参数为亮度值和/或对比度。


9.根据权利要求1所述的图像处理方法，其中在产生所述输出图像的步骤包括：
对所述背景进行虚化，并根据虚化后的所述背景产生所述输出图像。


10.根据权利要求1所述的图像处理方法，其中所述第二图像为高动态范围图像。


11.一种电子装置，其特征在于，包括：
处理器，...

【专利技术属性】
技术研发人员：詹凯琳，黄旭鍊，
申请(专利权)人：华晶科技股份有限公司，
类型：发明
国别省市：中国台湾;71