图像信号处理装置、方法、相机以及可移动平台制造方法及图纸

本申请提供了一种图像信号处理装置、方法、相机以及可移动平台，所述装置包括像素分类模块以及至少两个第一图像信号处理模块；所述像素分类模块用于对输入的图像中的每个像素进行分类，生成若干分类信息，并将所述输入的图像及若干分类信息传输给第一图像信号处理模块；所述分类信息用于表征该像素的图像特征；所述第一图像信号处理模块用于基于所述若干分类信息，对输入的图像中的像素执行相应的图像处理操作，并将生成的图像及所述若干分类信息传输给下一个第一图像信号处理模块；本实施例能够减少第一图像信号处理模块重复进行相同或相似的步骤，减少硬件支出成本。

【技术实现步骤摘要】
【国外来华专利技术】图像信号处理装置、方法、相机以及可移动平台
本申请涉及图像处理领域，尤其涉及一种图像信号处理装置、方法、相机以及可移动平台。
技术介绍
在各种拍摄装置(例如数码相机、摄像机或者摄像手机等)中，图像传感器采集的原始图像数据通常由图像信号处理器(ImageSignalProcessor,ISP)负责处理，ISP包括多个功能模块，比如传感器矫正模块、颜色校正模块等等，最终呈现出人们肉眼可见的图像，其中，ISP的处理水平很大程度上决定了成像质量。传统的ISP，各个功能模块相对独立，分别实现各自功能，但有些模块间存在相似或相同的基本操作，模块之间相对独立使得各个模块之间相似或相同的基本操作需要重复进行，且由多份硬件资源重复实现，造成硬件成本高，图像信号处理时间长。
技术实现思路
有鉴于此，本申请提供了一种图像信号处理装置、方法、相机以及可移动平台。首先，本申请的第一方面提供了一种图像信号处理装置，包括像素分类模块以及至少两个第一图像信号处理模块；在所述像素分类模块之后，至少两个第一图像信号处理模块依次连接；所述像素分类模块，用于对输入的图像中的每个像素进行分类，生成若干分类信息，并将所述输入的图像及若干分类信息传输给与其连接的第一图像信号处理模块；所述分类信息用于表征该像素的图像特征；所述第一图像信号处理模块，用于接收所述像素分类模块或者上一个第一图像信号处理模块输入的图像以及所述若干分类信息；基于所述若干分类信息，对输入的图像中的像素执行相应的图像处理操作，并将生成的图像及所述若干分类信息传输给下一个第一图像信号处理模块。根据本申请实施例的第二方面，提供一种图像信号处理方法，应用于图像信号处理装置，所述方法包括：在所述像素分类模块中，对输入的图像中的每个像素进行分类，生成若干分类信息；所述分类信息用于表征该像素的图像特征；在所述第一图像信号处理模块中，接收所述像素分类模块或者上一个第一图像信号处理模块输入的图像以及所述若干分类信息，基于所述若干分类信息，对输入的图像中的像素执行相应的图像处理操作，并将生成的图像及所述若干分类信息传输给下一个第一图像信号处理模块。根据本申请实施例的第三方面，提供一种相机，包括：外壳；镜头组件，设于所述外壳内部；图像传感器，设于所述外壳内部，用于感知通过所述镜头组件的光并生成电信号；以及，如第一方面中任意一项所述的图像信号处理装置。根据本申请实施例的第四方面，还提供了一种可移动平台，包括：机体；动力系统，安装在所述机体内，用于为所述可移动平台提供动力；以及，以及如第三方面所述的相机。本申请的实施例提供的技术方案可以包括以下有益效果：本申请实施例中所述图像信号处理装置包括像素分类模块以及至少两个第一图像信号处理模块，所述像素分类模块对输入的图像中的每个像素进行分类，生成若干分类信息，所述分类信息表征该像素的图像特征，并将生成的分类信息传输给第一图像信号处理模块，使得所述第一图像信号处理模块无需再重复进行相同或者相似的像素的图像特征确定步骤，其可直接基于所述若干分类信息确定各个像素应该执行的图像处理操作，减少了进行相同或者相似步骤的硬件资源，从而有效降低硬件成本，并且重复步骤的删减也有效减少了图像信号处理的时长，提高图像信号处理效率。应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。附图说明为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。图1为本申请根据一示例性实施例示出第一种图像信号处理装置10的结构图。图2为本申请根据一示例性实施例示出第二种图像信号处理装置10的结构图。图3为本申请根据一示例性实施例示出第三种图像信号处理装置10的结构图。图4为本申请根据一示例性实施例示出第四种图像信号处理装置10的结构图。图5为本申请根据一示例性实施例示出第五种图像信号处理装置10的结构图。图6为本申请根据一示例性实施例示出第六种图像信号处理装置10的结构图。图7为本申请根据一示例性实施例示出一种图像信号处理方法的流程图。图8为本申请根据一示例性实施例示出一种相机的结构图。图9为本申请根据一示例性实施例示出一种可移动平台的结构图。具体实施方式下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如，在不脱离本申请范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。针对传统的ISP中各个功能模块相对独立，造成的硬件成本高、图像信号处理时间长的问题，本申请实施例提供来了一种图像信号处理装置10，所述图像信号处理装置10将各个功能模块之间相同或相似的操作集成于一像素分类模块11中，避免了重复执行的过程，也无需过多的硬件资源，降低了硬件成本，也缩短了图像信号处理时间；其中，所述图像信号处理装置10可以应用于相机、移动终端(比如手机、平板或者电脑)、车规摄像、监视器、教育器材或者医疗器械等需要对拍摄的图像信号进行处理的领域。请参照图1，为本申请根据一示例性实施例示出第一种图像信号处理装置10的结构图。所述装置包括：像素分类模块11以及至少两个第一图像信号处理模块12(图1中以2个第一图像信号处理模块12为例进行说明)；其中，在所述像素分类模块11之后，至少两个第一图像信号处理模块12依次连接。所述像素分类模块11，用于对输入的本文档来自技高网...

【技术保护点】
1.一种图像信号处理装置，其特征在于，包括像素分类模块以及至少两个第一图像信号处理模块；/n在所述像素分类模块之后，至少两个第一图像信号处理模块依次连接；/n所述像素分类模块，用于对输入的图像中的每个像素进行分类，生成若干分类信息，并将所述输入的图像及若干分类信息传输给与其连接的第一图像信号处理模块；所述分类信息用于表征该像素的图像特征；/n所述第一图像信号处理模块，用于接收所述像素分类模块或者上一个第一图像信号处理模块输入的图像以及所述若干分类信息；基于所述若干分类信息，对输入的图像中的像素执行相应的图像处理操作，并将生成的图像及所述若干分类信息传输给下一个第一图像信号处理模块。/n

【技术特征摘要】
【国外来华专利技术】1.一种图像信号处理装置，其特征在于，包括像素分类模块以及至少两个第一图像信号处理模块；
在所述像素分类模块之后，至少两个第一图像信号处理模块依次连接；
所述像素分类模块，用于对输入的图像中的每个像素进行分类，生成若干分类信息，并将所述输入的图像及若干分类信息传输给与其连接的第一图像信号处理模块；所述分类信息用于表征该像素的图像特征；
所述第一图像信号处理模块，用于接收所述像素分类模块或者上一个第一图像信号处理模块输入的图像以及所述若干分类信息；基于所述若干分类信息，对输入的图像中的像素执行相应的图像处理操作，并将生成的图像及所述若干分类信息传输给下一个第一图像信号处理模块。


2.根据权利要求1所述的装置，其特征在于，所述分类信息通过以下任意一种方式表示：哈希数值或哈希向量。


3.根据权利要求1所述的装置，其特征在于，所述第一图像信号处理模块中存储有分类信息与图像处理操作的对应关系；
所述第一图像信号处理模块还用于将所述若干分类信息作为索引，从所述对应关系中获取输入的图像中的每个像素对应的图像处理操作。


4.根据权利要求3所述的装置，其特征在于，所述对应关系以哈希表格式进行存储；
所述哈希表包括一个或多个键值对关系；其中以所述分类信息作为哈希键，所述图像处理操作作为哈希值的键值对关系进行存储。


5.根据权利要求1所述的装置，其特征在于，所述图像处理操作包括不同尺度的滤波器以及不同类型的图像处理函数。


6.根据权利要求1所述的装置，其特征在于，
所述像素分类模块具体用于：对于输入的图像中的每个像素，基于所述像素以及所述像素的邻域像素进行分类，生成该像素的分类信息。


7.根据权利要求1所述的装置，其特征在于，所述像素分类模块与图像传感器连接，所述图像传感器用于采集图像并传输给所述像素分类模块。


8.根据权利要求1所述的装置，其特征在于，所述装置还包括一个第二图像信号处理模块或多个依次连接的第二图像信号处理模块；
所述像素分类模块通过所述一个或多个第二图像信号处理模块与图像传感器连接，以接收所述图像传感器通过所述一个或多个第二图像信号处理模块传输的图像。


9.根据权利要求7或8所述的装置，其特征在于，所述装置还包括所述下采样模块；
所述下采样模块用于对所述图像传感器采集的图像进行一次或多次下采样处理，并将生成的大尺度图像传输给与其连接的所述像素分类模块。


10.根据权利要求9所述的装置，其特征在于，输入所述像素分类模块的图像包括：所述图像传感器当前采集的图像、及上一次采集的经过下采样处理后的大尺度图像。


11.根据权利要求10所述的装置，其特征在于，所述装置还包括存储模块；
所述像素分类模块，还用于将与所述大尺度图像对应的若干分类信息存储至所述存储模块；
所述第一图像信号处理模块，还用于从所述存储模块获取所述若干分类信息，基于所述若干分类信息对输入的图像执行相应的图像处理操作。


12.根据权利要求1所述的装置，其特征在于，所述第一图像信号处理模块包括以下至少一种或多种：
坏点矫正模块、黑电平矫正模块、阴影矫正模块、白平衡矫正模块、去马赛克模块，颜色矫正模块、亮度调整模块、降噪模块以及锐化模块。


13.根据权利要求1所述的装置，其特征在于，所述图像特征包括以下至少一种或多种：
边缘强度特征、边缘方向特征、平坦区特征、纹理特征、颜色特征、孤立点特征以及领域特征。


14.一种图像信号处理方法，其特...

【专利技术属性】
技术研发人员：曾志豪，曹子晟，
申请(专利权)人：深圳市大疆创新科技有限公司，
类型：发明
国别省市：广东;44