【技术实现步骤摘要】
【国外来华专利技术】
本公开涉及成像装置、电子设备和信息处理方法。
技术介绍
1、已经提出了通过对图像数据执行卷积运算处理来高速提取图像的特征量等的技术(参见专利文献1)。
2、在卷积运算处理中，以各自由多个像素形成的像素块为单位执行与滤波器系数的乘积和运算，并且执行在降低图像数据的分辨率的同时提取特征量的处理。
3、现有技术文献
4、专利文献
5、专利文献1：jp 2020-113809a
技术实现思路
1、本专利技术要解决的技术问题
2、在卷积运算处理中，在执行积和运算处理之后，执行积和运算处理，在该积和运算处理中，像素块内部的每个像素信号和对应的滤波器系数被乘在一起，并且其结果被加在一起，在积和运算处理中，通过将像素块水平或垂直移位确定的像素数而获取的新像素块内部的每个像素信号和对应的滤波器系数被乘在一起，并且其结果被加在一起。为此，多次执行像素块内部的每个像素信号与相应的滤波器系数之间的积和运算处理。以这种方式，每个像素信号与相应的滤波器系数相关联，并且存在的问题在于，不能针对每个像素块改变滤波器系数。
3、另外，由于每个像素信号用于进行多次的乘积和运算处理，所以需要存储单元用于存储从像素读取的像素信号，直到多次的乘积和运算处理结束。或者，需要用于进行多次积和运算处理的并行化并输出一个像素信号的读取电路。以这种方式，当对每个像素信号执行多次积和运算处理时，像素尺寸变大。
4、因此，本公开提供能够在不增加像素尺寸的
5、问题的解决方案
6、为了解决上述问题，根据本公开，提供了一种成像装置，包括：像素阵列单元，在该像素阵列单元中，执行光电转换的多个像素布置在二维的方向上；以及算术运算单元，被配置为通过选择未被选择并在像素阵列单元内部彼此不相邻的两个以上像素来重复积和运算。
7、像素阵列单元可被划分为多个以彼此相邻的两个以上像素为单元的宏像素，并且算术运算单元可通过从两个以上宏像素中的每个宏像素中选择未被选择并且未被相邻布置的一个像素来重复执行积和运算的过程。
8、算术运算单元能够以包括两个以上宏像素的像素块为单位与滤波器执行卷积运算，并通过从像素块内的宏像素中顺序地选择未被选择并且未被相邻布置的像素来重复与滤波器内的对应滤波器系数执行积和运算的处理。
9、当滤波器的尺寸在第一方向上为n并且在与第一方向相交的第二方向上为m，在第一方向上的像素的偏移量为k并且在第二方向上的像素的偏移量为l(此处，n、m、k、以及l是等于或大于1的整数)时，在宏像素内部的像素的数量可等于或大于(n/k)×(m/l)。
10、可进一步包括与像素关联地布置的滤色器。
11、每个滤色器可具有透射波段彼此不同的光的多个滤色单元。
12、可进一步包括与像素关联布置的滤色器，其中，滤色器具有针对每个宏像素的滤色单元，并且对应于彼此相邻的两个宏像素的两个滤色单元可具有不同的透光波段。
13、滤色器可包括透射可见光波段的光的滤色单元、透射红外光波段的光的滤色单元和执行偏振控制的滤色单元中的至少一者。
14、宏像素可包括：两个以上光电转换单元，布置在传输像素信号的信号线延伸的方向上；两个以上传输晶体管，连接至所述两个以上光电转换单元；以及连接至两个或多个传输晶体管的两个或多个读取电路，两个或多个读取电路可以连接至被配置为共用的信号线，并且两个或多个读取电路可以各自在不同的定时将像素信号输出至信号线。
15、宏像素可包括：两个以上光电转换单元，布置在传输像素信号的信号线延伸的方向上；两个以上传输晶体管，连接至所述两个以上光电转换单元；以及连接到两个以上传输晶体管的两个以上读取电路，两个以上读取电路可以各自连接到单独的信号线，并且两个以上读取电路可以将像素信号并行地输出到对应的信号线。
16、宏像素可包括：多个光电转换单元，布置在彼此相交的第一方向和第二方向中的每一个上；以及多个信号线，在第二方向上延伸，并且在第二方向上以不同级布置的多个光电转换单元可向对应的信号线并行地输出像素信号。
17、宏像素可包括：两个以上光电转换单元，布置在传输像素信号的信号线延伸的方向上；两个以上传输晶体管，连接至所述两个以上光电转换单元；以及由两个以上光电转换单元和两个以上传输晶体管共享的读取电路。
18、宏像素可包括：多个光电转换单元，布置在彼此相交的第一方向和第二方向中的每一个上；多个信号线，在所述第二方向上延伸；以及多个读取电路，连接至所述多个信号线，并且所述多个读取电路中的每个可以被沿着对应的信号线布置的多个光电转换单元共享。
19、宏像素可包括：多个光电转换单元，布置在彼此相交的第一方向和第二方向中的每一个上；多个信号线，在所述第二方向上延伸；以及一个读取电路，连接到多个信号线并被宏像素内部的所有像素共享。
20、在像素内部，通过光电转换获取的像素信号可加权用于卷积运算，然后输出。
21、可进一步包括将通过光电转换获取的像素信号转换成数字像素信号的模数转换器，其中，算术运算单元可对数字像素信号执行积和运算。
22、还可以包括将通过对经由光电转换而获取的像素信号执行积和运算而获取的信号从模拟转换为数字的模数转换器。
23、像素可输出通过执行像素信号的模数转换而获得的数字像素信号。
24、像素可以输出对应于亮度变化的像素信号。
25、根据本公开，提供了一种电子设备，包括：成像装置，被配置为输出通过光电转换获取的像素信号；以及信号处理单元，被配置为对像素信号执行信号处理，其中，成像装置包括像素阵列单元，在像素阵列单元中，执行光电转换的多个像素布置在二维的方向上；以及算术运算单元，被配置为通过选择未被选择并在像素阵列单元内部彼此不相邻的两个以上像素来重复执行积和运算的处理。
26、一种信息处理方法，其中，重复通过选择在像素阵列单元内部未被选择并且彼此不相邻的两个以上像素来执行积和运算的处理，其中，执行光电转换的多个像素布置在二维的方向上。
本文档来自技高网...【技术保护点】
1.一种成像装置，包括：
2.根据权利要求1所述的成像装置，
3.根据权利要求2所述的成像装置，其中，所述算术运算单元以包括两个以上所述宏像素的像素块为单位与滤波器执行卷积运算，并且通过从所述像素块内的所述宏像素中顺次选择未被选择并且未被相邻布置的像素来重复与所述滤波器内的对应滤波器系数执行积和运算的过程。
4.根据权利要求3所述的成像装置，其中，当所述滤波器的尺寸在第一方向上为N并且在与所述第一方向相交的第二方向上为M，所述像素在所述第一方向上的偏移量为K并且所述像素在所述第二方向上的偏移量为L(此处，N、M、K以及L是等于或大于1的整数)时，所述宏像素内的像素的数量等于或大于(N/K)×(M/L)。
5.根据权利要求2所述的成像装置，其中，进一步包括：滤色器，所述滤色器被布置为与所述像素相关联。
6.根据权利要求5所述的成像装置，其中，每个所述滤色器具有透射波段彼此不同的光的多个滤色单元。
7.根据权利要求2所述的成像装置，其中，进一步包括：滤色器，所述滤色器被布置为与所述像素相关联，
8.根
9.根据权利要求2所述的成像装置，
10.根据权利要求2所述的成像装置，
11.根据权利要求2所述的成像装置，
12.根据权利要求2所述的成像装置，
13.根据权利要求2所述的成像装置，
14.根据权利要求2所述的成像装置，
15.根据权利要求1所述的成像装置，其中，在所述像素内，对通过光电转换获取到的像素信号进行加权以用于卷积运算并且然后输出。
16.根据权利要求1所述的成像装置，进一步包括模数转换器，所述模数转换器将通过光电转换获取到的像素信号转换成数字像素信号，
17.根据权利要求1所述的成像装置，进一步包括模数转换器，所述模数转换器将通过对通过光电转换获取到的像素信号执行积和运算而获得的信号从模拟转换为数字。
18.根据权利要求1所述的成像装置，其中，所述像素输出通过执行像素信号的模数转换而获得的数字像素信号。
19.根据权利要求1所述的成像装置，其中，所述像素输出与亮度变化相对应的像素信号。
20.一种电子设备，包括：
21.一种信息处理方法，在所述信息处理方法中，重复通过选择在像素阵列单元内未被选择并且彼此不相邻的两个以上像素而执行积和运算的处理，在所述像素阵列单元中，执行光电转换的多个像素布置在二维的方向上。
...【技术特征摘要】
【国外来华专利技术】
1.一种成像装置，包括：
2.根据权利要求1所述的成像装置，
3.根据权利要求2所述的成像装置，其中，所述算术运算单元以包括两个以上所述宏像素的像素块为单位与滤波器执行卷积运算，并且通过从所述像素块内的所述宏像素中顺次选择未被选择并且未被相邻布置的像素来重复与所述滤波器内的对应滤波器系数执行积和运算的过程。
4.根据权利要求3所述的成像装置，其中，当所述滤波器的尺寸在第一方向上为n并且在与所述第一方向相交的第二方向上为m，所述像素在所述第一方向上的偏移量为k并且所述像素在所述第二方向上的偏移量为l(此处，n、m、k以及l是等于或大于1的整数)时，所述宏像素内的像素的数量等于或大于(n/k)×(m/l)。
5.根据权利要求2所述的成像装置，其中，进一步包括：滤色器，所述滤色器被布置为与所述像素相关联。
6.根据权利要求5所述的成像装置，其中，每个所述滤色器具有透射波段彼此不同的光的多个滤色单元。
7.根据权利要求2所述的成像装置，其中，进一步包括：滤色器，所述滤色器被布置为与所述像素相关联，
8.根据权利要求6所述的成像装置，其中，所述滤色器包括透射可见光波段的光的滤色单元、透射红外光波段的光的滤色单元和执行偏振控制的滤色单元中的至少一者。
9.根据权利要求...
【专利技术属性】
技术研发人员：半泽克彦，斋藤大辅，
申请(专利权)人：索尼半导体解决方案公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。