System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind() 图像传感器、数据处理装置和图像传感器系统制造方法及图纸_技高网

图像传感器、数据处理装置和图像传感器系统制造方法及图纸

技术编号:41382950 阅读:12 留言:0更新日期:2024-05-20 10:24
本公开涉及实现更大多功能性的图像传感器、数据处理装置和图像传感器系统。图像传感器包括:事件检测单元,用于检测作为由光电二极管接收的光的亮度的变化的事件的发生;以及数据发送单元,使用帧结构发送,在该帧结构中,表示事件的内容的事件数据构成有效载荷数据的一部分,并且在有效载荷数据的开始处,存储要添加到线路并与事件数据相关的线路信息。图像传感器还包括:亮度检测单元,用于检测由光电二极管接收的光的亮度,并输出表示其亮度值的亮度信号;以及附加信息生成单元,用于基于事件数据生成要添加到线路的线路信息,作为要附加提供的与事件数据相关的附加信息。例如,本技术可应用于基于事件的视觉传感器(EVS)。

【技术实现步骤摘要】
【国外来华专利技术】

本公开涉及图像传感器、数据处理装置和图像传感器系统,并且更具体地,涉及能够增强多功能性的图像传感器、数据处理装置和图像传感器系统。


技术介绍

1、近年来,已经发展了实时检测每一个像素的亮度变化作为事件的图像传感器(在下文中,称为基于事件的视觉传感器(evs))的开发。

2、例如,在专利文献1中,公开了一种传感器架构,其能够在基于帧的类型、基于事件的类型、以及关于基于帧的类型和基于事件的类型方法的混合类型中进行采样。

3、[引用列表]

4、[专利文献]

5、[专利文献1]:公开2017-535999


技术实现思路

1、[技术问题]

2、顺便提及,传统上,由于从evs输出的数据的特性是事件驱动的,因此输出格式没有被确定,并且需要设计新的评估系统来接收该数据。

3、鉴于这种情况做出本公开并且旨在进一步增强多功能性。

4、[问题的解决方案]

5、根据本公开的一方面的图像传感器包括:事件检测单元,被配置为检测作为光电二极管接收的光的亮度变化的事件的发生;以及数据发送单元,被配置为将表示事件的细节的事件数据设置为有效载荷数据的一部分,并且在帧结构中发送线路信息,该线路信息被添加到线路并且与事件数据相关,其中,线路信息存储在有效载荷数据的开始部分中。

6、根据本公开的一方面的数据处理装置包括:数据接收单元,被配置为接收从图像传感器发送的事件数据和线路信息,图像传感器包括:事件检测单元,被配置为检测事件的发生,事件是由光电二极管接收的光的亮度变化;以及事件相关的数据处理单元,被配置为参考线路信息并且对事件数据执行与由事件检测单元检测的事件相关的数据处理。

7、根据本公开的一方面的图像传感器系统包括:图像传感器,包括:事件检测单元,被配置为检测事件的发生,事件是由光电二极管接收的光的亮度变化;以及数据发送单元,被配置为将表示事件的细节的事件数据设置为有效载荷数据的一部分,并且在帧结构中发送线路信息,线路信息被添加到线路并且与事件数据相关,其中,线路信息被存储在有效载荷数据的开始部分中;以及数据处理装置,包括:数据接收单元,被配置为接收从图像传感器发送的事件数据和线路信息;以及事件相关的数据处理单元,被配置为参考线路信息并且对事件数据执行与由事件检测单元检测的事件有关的数据处理。

8、在本公开的一个方面中,检测由光电二极管接收的光的亮度变化的事件的发生,表示事件的细节的事件数据被设置为有效载荷数据的一部分,并且在帧结构中发送被添加到线路并且与事件数据相关的线路信息,其中,线路信息存储在有效载荷数据的开始部分中。然后,接收已经发送的事件数据和线路信息,参考线路信息,并且对事件数据执行与事件相关的数据处理。

本文档来自技高网...

【技术保护点】

1.一种图像传感器,包括:

2.根据权利要求1所述的图像传感器,其中,所述线路信息存储在存储CSI-2或SLVS-EC中指定的所述事件数据的数据包的数据包报头中。

3.根据权利要求1所述的图像传感器,其中,一部分所述线路信息存储在CSI-2或SLVS-EC中指定的嵌入式数据中。

4.根据权利要求1所述的图像传感器,其中,所述线路信息包括时间戳、线路的坐标和线路的事件极性中的至少一者。

5.根据权利要求1所述的图像传感器,其中,所述线路信息包括所述线路的事件检测阈值和所述线路的事件数量中的至少一者。

6.根据权利要求1所述的图像传感器,其中,所述线路信息包括基于所述事件数据生成的所述线路的闪烁信息。

7.根据权利要求1所述的图像传感器,其中,所述线路信息包括所述线路的数据量。

8.根据权利要求1所述的图像传感器,其中,所述线路信息包括用于压缩所述事件数据的压缩技术和压缩之后的数据中的至少一者。

9.根据权利要求1所述的图像传感器,还包括:

10.根据权利要求9所述的图像传感器,其中,在所述事件检测单元是仲裁器类型的情况下,所述附加信息生成单元具有帧生成单元,所述帧生成单元从来自所述事件检测单元的事件发生的时刻输出的所述事件数据生成帧。

11.根据权利要求9所述的图像传感器,

12.根据权利要求9所述的图像传感器,还包括:像素芯片,其中,布置用于获取所述事件数据的第一亮度检测单元和用于获取图像数据的第二亮度检测单元作为所述亮度检测单元。

13.根据权利要求12所述的图像传感器,其中,所述附加信息生成单元生成用于使所述事件数据与所述图像数据同步的帧数量和用于识别在与所述第二亮度检测单元作为附加布置在所述事件数据中的所述附加信息操作的时刻大致相同的时刻获取的所述事件数据的干扰信息。

14.根据权利要求13所述的图像传感器,其中,仅在短时间内停止与所述第二亮度检测单元操作的时刻大致相同的时刻的所述第一亮度检测单元的操作,并且跳过在所述时刻的所述事件数据的获取。

15.根据权利要求13所述的图像传感器,其中,以所述事件数据的线路为单位生成所述帧数量和所述干扰信息。

16.根据权利要求13所述的图像传感器,其中,在所述第一亮度检测单元和所述第二亮度检测单元不在一帧内在大致相同的时刻操作的情况下,所述帧数量以帧为单位被包括在帧信息中。

17.根据权利要求13所述的图像传感器,其中,所述附加信息生成单元具有:

18.一种数据处理装置,包括:

19.根据权利要求18所述的数据处理装置,

20.根据权利要求18所述的数据处理装置,还包括:处理单元,被配置为执行与从连接至数据总线的多个图像传感器中的每一个输出的事件数据形成的图像相关的控制,并且通过所述数据总线发送所述事件数据,

21.一种图像传感器系统,包括:

22.根据权利要求21所述的图像传感器系统,

23.根据权利要求21所述的图像传感器系统,

24.根据权利要求21所述的图像传感器系统,

...

【技术特征摘要】
【国外来华专利技术】

1.一种图像传感器,包括:

2.根据权利要求1所述的图像传感器,其中,所述线路信息存储在存储csi-2或slvs-ec中指定的所述事件数据的数据包的数据包报头中。

3.根据权利要求1所述的图像传感器,其中,一部分所述线路信息存储在csi-2或slvs-ec中指定的嵌入式数据中。

4.根据权利要求1所述的图像传感器,其中,所述线路信息包括时间戳、线路的坐标和线路的事件极性中的至少一者。

5.根据权利要求1所述的图像传感器,其中,所述线路信息包括所述线路的事件检测阈值和所述线路的事件数量中的至少一者。

6.根据权利要求1所述的图像传感器,其中,所述线路信息包括基于所述事件数据生成的所述线路的闪烁信息。

7.根据权利要求1所述的图像传感器,其中,所述线路信息包括所述线路的数据量。

8.根据权利要求1所述的图像传感器,其中,所述线路信息包括用于压缩所述事件数据的压缩技术和压缩之后的数据中的至少一者。

9.根据权利要求1所述的图像传感器,还包括:

10.根据权利要求9所述的图像传感器,其中,在所述事件检测单元是仲裁器类型的情况下,所述附加信息生成单元具有帧生成单元,所述帧生成单元从来自所述事件检测单元的事件发生的时刻输出的所述事件数据生成帧。

11.根据权利要求9所述的图像传感器,

12.根据权利要求9所述的图像传感器,还包括:像素芯片,其中,布置用于获取所述事件数据的第一亮度检测单元和用于获取图像数据的第二亮度检测单元作为所述亮...

【专利技术属性】
技术研发人员:宫崎高大
申请(专利权)人:索尼半导体解决方案公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1