合成图像信号处理器制造技术

技术编号:40415885 阅读:23 留言:0更新日期:2024-02-20 22:33
本发明专利技术描述了用于图像处理的系统和技术。成像系统可以包括捕获图像数据的图像传感器。该成像系统的图像信号处理器(ISP)可以对该图像数据去马赛克。该成像系统可以将该图像数据输入到一个或多个受过训练的机器学习模型中,在一些情况下,连同与该图像数据相关联的元数据一起输入。该一个或多个受过训练的机器学习模型可以基于该图像数据和/或该元数据输出该ISP的一组参数的设置。该成像系统可以通过使用该ISP处理该图像数据来生成输出图像,其中该ISP的这些参数根据这些设置来设置。可以使用用于调整对应参数的相应设置来处理该图像数据的像素中的每个像素。该ISP的这些参数可以包括增益、偏移、灰度系数和高斯滤波。

【技术实现步骤摘要】
【国外来华专利技术】

本公开整体涉及图像处理,并且更具体地涉及用于使用合成图像信号处理器(isp)处理图像数据的系统和技术,该合成isp使用一个或多个受过训练的机器学习模型来识别用于图像数据的不同像素的定制设置。


技术介绍

1、相机是使用图像传感器接收光并且捕获图像帧(诸如静态图像或视频帧)的设备。相机可以包括处理器(诸如图像信号处理器(isp)),其可以接收一个或多个图像帧并且处理一个或多个图像帧。例如,由相机传感器捕获的原始图像帧可以由isp处理以生成最终图像。相机可以被配置有各种图像捕获和图像处理设置,以改变图像的外观。在捕获照片之前或期间确定并应用一些相机设置,诸如iso、曝光时间、光圈大小、f/停止、快门速度、聚焦和增益。其他相机设置可以配置照片的后处理,诸如对比度、亮度、饱和度、锐度、级别、曲线或颜色的改变。

2、传统的图像信号处理器(isp)具有解决基于图像的问题空间的各个分区的单独的离散块。例如,典型的isp具有离散的功能块,该功能块各自将特定操作应用于原始相机传感器数据以创建最终输出图像。此类功能块可以包括用于去马赛克、降噪(去噪)、颜色处理、色调本文档来自技高网...

【技术保护点】

1.一种用于处理图像数据的装置,所述装置包括:

2.根据权利要求1所述的装置,其中所述多个设置包括一个或多个经调节设置。

3.根据权利要求1所述的装置,其中所述图像数据包括去马赛克的图像数据。

4.根据权利要求1所述的装置,其中所述图像数据是具有对应于图像传感器的滤色器阵列的多个颜色分量的原始图像数据。

5.根据权利要求4所述的装置,其中将所述图像数据输入到所述一个或多个受过训练的机器学习模型包括将所述原始图像数据输入到所述一个或多个受过训练的机器学习模型。

6.根据权利要求1所述的装置,其中为了生成所述输出图像,所述一个或多个...

【技术特征摘要】
【国外来华专利技术】

1.一种用于处理图像数据的装置,所述装置包括:

2.根据权利要求1所述的装置,其中所述多个设置包括一个或多个经调节设置。

3.根据权利要求1所述的装置,其中所述图像数据包括去马赛克的图像数据。

4.根据权利要求1所述的装置,其中所述图像数据是具有对应于图像传感器的滤色器阵列的多个颜色分量的原始图像数据。

5.根据权利要求4所述的装置,其中将所述图像数据输入到所述一个或多个受过训练的机器学习模型包括将所述原始图像数据输入到所述一个或多个受过训练的机器学习模型。

6.根据权利要求1所述的装置,其中为了生成所述输出图像,所述一个或多个处理器被配置为:

7.根据权利要求1所述的装置,其中所述一个或多个处理器被配置为:

8.根据权利要求1所述的装置,其中为了获得所述图像数据,所述一个或多个处理器被配置为从捕获所述图像数据的图像传感器接收所述图像数据。

9.根据权利要求1所述的装置,其中所述一个或多个处理器被配置为:

10.根据权利要求1所述的装置,其中所述isp的所述一个或多个参数包括多个增益参数,并且所述多个设置包括对应于所述多个增益参数的多个增益设置,所述多个增益参数中的每个增益参数对应于多个颜色通道中的一个颜色通道,其中为了使用所述isp处理所述图像数据的所述多个像素,所述isp被配置为基于所述多个增益设置对至少一个像素执行一个或多个乘法器运算。

11.根据权利要求1所述的装置,其中所述isp的所述一个或多个参数包括多个偏移参数,并且所述多个设置包括对应于所述多个偏移参数的多个偏移设置,所述多个偏移参数中的每个偏移参数对应于多个颜色通道中的一个颜色通道,其中为了使用所述isp处理所述图像数据的所述多个像素,所述isp被配置为基于所述多个偏移设置对至少一个像素执行一个或多个加法运算。

12.根据权利要求1所述的装置,其中所述isp的所述一个或多个参数包括一个或多个灰度系数参数,并且所述多个设置包括对应于所述一个或多个灰度系数参数的一个或多个灰度系数设置,其中为了使用所述isp处理所述图像数据的所述多个像素,所述isp被配置为基于所述一个或多个灰度系数设置来调整至少一个像素的色调。

13.根据权利要求1所述的装置,其中所述isp的所述一个或多个参数包括一个或多个高斯滤波器参数,并且所述多个设置包括对应于所述一个或多个高斯滤波器参数的一个或多个高斯滤波器设置,其中为了使用所述isp处理所述图像数据的所述多个像素,所述isp被配置为基于高斯曲线将高斯滤波器应用于至少一个像素,其中所述高斯曲线的形状基于所述一个或多个高斯滤波器设置。

14.根据权利要求1所述的装置,其中所述isp的所述一个或多个参数包括一个或多个去马赛克参数,并且所述多个设置包括对应于所述一个或多个去马赛克参数的一个或多个去马赛克设置,其中为了使用所述isp处理所述图像数据的所述多个像素,所述isp被配置为基于所述一个或多个去马赛克设置对所述图像数据的至少一个像素去马赛克。

15.根据权利要求1所述的装置,其中所述isp的所述一个或多个参...

【专利技术属性】
技术研发人员:H·黄S·丹吉
申请(专利权)人:高通股份有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1