图像传感器架构制造技术

一种图像传感器，包括：第一集成电路层，包括基于位置分组成像素传感器群组的像素传感器；与第一集成电路层电连通的第二集成电路层，该第二集成电路层包括被配置为各自从对应像素传感器群组接收像素信息的图像处理电路群组，图像处理电路群组进一步被配置为在图像传感器的操作期间对像素信息执行图像处理操作以提供经处理像素信息；与第二集成电路层电连通的第三集成电路层，并且第三集成电路层包括被配置为各自从对应图像处理电路群组接收经处理像素信息且在图像传感器的操作期间对经处理像素信息执行对象检测的分析的神经网络电路群组。络电路群组。络电路群组。

【技术实现步骤摘要】
【国外来华专利技术】图像传感器架构
[0001]相关申请的交叉引用
[0002]本申请要求2019年4月5日提交的美国专利申请第16/376,634号的优先权，其完整内容以引用的方式并入本文中。

技术介绍

[0003]本说明书涉及图像传感器及包括图像传感器的系统。

技术实现思路

[0004]本说明书描述与图像传感器相关的技术，图像传感器捕获图像且对图像传感器执行处理以检测对象。本说明书进一步描述用于将数据从图像传感器传输至远程处理器的数据传输协议。
[0005]一般而言，本说明书中描述的主题内容的一个新颖方面可以以一种图像传感器体现，该图像传感器包括：第一集成电路层，包括基于位置分组成像素传感器群组的像素传感器；与第一集成电路层电连通的第二集成电路层，第二集成电路层包括被配置为各自从对应像素传感器群组接收像素信息的图像处理电路群组，图像处理电路群组进一步被配置为在图像传感器的操作期间对像素信息执行图像处理操作以提供经处理像素信息；与第二集成电路层电连通的第三集成电路层，第三集成电路层包括被配置为各自从对应图像处理电路群组接收经处理像素信息的神经网络电本文档来自技高网...

【技术保护点】

【技术特征摘要】
【国外来华专利技术】1.一种图像传感器，包括：第一集成电路层，包括基于位置分组成像素传感器群组的像素传感器；与第一集成电路层电连通的第二集成电路层，所述第二集成电路层包括被配置为各自从对应像素传感器群组接收像素信息的图像处理电路群组，所述图像处理电路群组进一步被配置为在图像传感器的操作期间对像素信息执行图像处理操作以提供经处理像素信息；与第二集成电路层电连通的第三集成电路层，所述第三集成电路层包括被配置为各自从对应图像处理电路群组接收经处理像素信息的神经网络电路群组，所述神经网络电路群组进一步被配置为在图像传感器的操作期间对经处理像素信息执行对象检测的分析；以及电路，输出指示通过神经网络电路群组的对象检测的分析的结果的信息，其中，第一集成电路层堆叠于第二集成电路层上，并且第二集成电路层堆叠于第三集成电路层上。2.如权利要求1所述的图像传感器，其中，对象检测的分析的结果包括由以下各项组成的组中的至少一个：表示检测的像素的选定所关注区域；包含时间和几何位置信息的元数据；在对象检测之前的中间计算结果；关于网络确定性水平的统计信息；以及检测对象的分类。3.如权利要求1所述的图像传感器，其中，所述神经网络电路群组各自包括被配置为实施卷积神经网络的电路。4.如权利要求1所述的图像传感器，其中，所述卷积神经网络各自检测由对应于与神经网络电路群组对应的图像处理电路群组的像素传感器群组感测的对象。5.如权利要求1所述的图像传感器，其中，所述第三集成电路层包括被配置为实施循环神经网络的电路。6.如权利要求1所述的图像传感器，其中，所述循环神经网络接收关于由全部神经网络电路群组检测的对象的信息,并检测跨所述像素传感器群组中的多个像素传感器群组感测的对象。7.如权利要求1所述的图像传感器，其中，所述神经网络电路群组中的每一个定位于将经处理像素信息提供至神经网络电路群组的图像处理电路群组正下方。8.如权利要求1所述的图像传感器，其中，所述图像处理电路群组中的每一个定位在将像素信息提供至图像处理电路群组的像素传感器群组正下方或紧邻将像素信息提供至图像处理电路群组的像素传感器群组。9.如权利要求1所述的图像传感器，其中，所述第一集成电路层、所述第二集成电路层和所述第三集成电路层集成在单个集成芯片中。10.如权利要求1所述的图像传感器，其中，所述像素传感器群组中的每一个包括相同数目的像素传感器。11.如权利要求1所述的图像传感器，其中，对像素信息执行的图像处理操作包括在处理之前的高动态范围融合。12.如权利要求1所述的图像传感器，其中，所述图像处理电路群组中的每一个包括模
拟数字转换器。13.一种方法，包括：由在第一集成电路层中且基于位置分组成像素传感器群组的像素传感器获得像素信息；由在与第一集成电路层电连通的第二集成电路层中的图像处理电路群组对来自对应像素传感器群组的像素信息执行图像处理操作以提供经处理像素信息；由在与第二集成电路层电连通的第三集成电路层中的神经网络电路群组对来自对应图像处理电路群组的经处理像素信息执行对象检测的分析；以及输出指示由神经网络电路群组进行的对象检测的分析的结果的信息，其中，第一集成电路层堆叠于第二集成电路层上，并且第二集成电路层堆叠于第三集成电路层上。14.如权利要求13所述的方法，其中，对象检测的分析的结果包括由以下各项组成的组中的至少一个：表示检测的像素的选定所关注区域；包含时间和几何位置信息的元数据；在对象检测之前的中间计算结果；关于网络确定性水平的统计信息；以及检测对象的分类。15.如权利要求12所述的方法，其中，所述神经网络电路群组各自包括被配置为实施卷积神经网络的电路。16.如权利要求12所述的方法，其中，所述卷积神经网络各自检测由对应于与神经网络电路群组对应的图像处理电路群组的像素传感器群组感测的对象。17.如权利要求12所述的方法，其中，所述第三集成电路层包括被配置为实施循环神经网络的电路。18.如权利要求12所述的方法，其中，所述循环神经网络接收关于由全部神经网络电路群组检测的对象的信息,并检测跨所述像素传感器群组中的多个像素传感器群组感测的对象。19.如权利要求12所述的方法，其中，所述神经网络电路群组中的每一个定位在将经处理像素信息提供至神经网络电路群组的图像处理电路群组正下方。20.一种形成图像传感器的方法，包括：形成包括基于位置分组成像素传感器群组的像素传感器的第一集成电路层；将第二集成电路层与第一集成电路层电耦合，所述第二集成电路层包括被配置为各自从对应像素传感器群组接收像素信息的图像处理电路群组，所述图像处理电路群组进一步被配置为在图像传感器的操作期间对像素信息执行图像处理操作以提供经处理像素信息；将第三集成电路层与第二集成电路层电耦合，所述第三集成电路层包括被配置为各自从对应图像处理电路群组接收经处理像素信息的神经网络电路群组，所述神经网络电路群组进一步被配置为在图像传感器的操作期间从经处理像素信息检测对象而执行对象检测的分析；以及将电路电耦合至神经网络电路群组，所述电路输出指示通过神经网络电路群组的对象
检测的分析的结果的信息，其中，第一集成电路层堆...

【专利技术属性】
技术研发人员：L埃恩，VC卡尔代伊，CW克拉多克，
申请(专利权)人：伟摩有限责任公司，
类型：发明
国别省市：