用于计算计算机视觉特征的可配置硬件制造技术

各技术描述用于基于传感器读数产生经计算的结果以供检测例如边缘、拐角等特征的设备和方法。所述传感器设备可包含传感器元件阵列，所述阵列包含多个传感器元件。所述传感器元件可被布置成2维阵列，例如列和行。所述传感器元件可能够基于环境条件而产生传感器读数。所述传感器设备可包含在耦合到所述传感器元件阵列的像素内电路、外围电路或专用微处理器中且经配置以接收来自传感器元件中的一或多者的输出的专用计算机视觉CV计算硬件。所述专用CV计算硬件可包含用于使用CV运算检测特征的可配置块，其中所述可配置块可经配置以在多个CV运算之间切换，例如线性二值模式LBP和/或带正负号的梯度直方图HSG计算机视觉运算。

Configurable hardware for computing computer vision features

Each technique describes an apparatus and method for generating a calculated result based on sensor readings for detecting, for example, edges, corners, etc.. The sensor device may comprise a sensor element array comprising a plurality of sensor elements. The sensor elements may be arranged into 2 dimensional arrays, such as columns and rows. The sensor element is capable of generating sensor readings based on environmental conditions. The sensor device can be contained in the sensor element is coupled to the pixel array circuit, peripheral circuit or special microprocessor and special computer vision CV configured to receive the output from one or more sensors in the computing hardware. The special CV computing hardware can contain configurable blocks for the use of CV operation detection feature, wherein the configurable blocks can be configured to switch between multiple CV operations, such as linear two value model of LBP and / or signed the gradient histogram HSG computer vision algorithm.

【技术实现步骤摘要】
【国外来华专利技术】用于计算计算机视觉特征的可配置硬件
本专利技术大体上涉及启用计算机视觉，且更具体来说，涉及使用计算机视觉改善检测特征的效率。
技术介绍
计算机视觉是包含获取、处理、分析和理解图像以用于各应用中的方法的领域。传统地，耦合到传感器的处理器从传感器获取图像数据，并对从传感器接收的信息执行某些计算机视觉(CV)运算以用于检测CV特征且因此检测与那些特征相关联的对象。CV特征可包含例如边缘、拐角等的特征。此等特征可用于确定宏特征，例如人脸、笑容和手势。执行于处理器上的程序可在例如平面检测、人脸检测、笑容检测、手势检测等多种应用中利用所检测的特征。近年来已付出许多努力以使得计算装置能够检测在计算装置的视野中的特征和对象。计算装置(例如移动装置)经设计对由移动装置使用的处理资源量和功率量以及热消散具灵敏性。然而，传统地，使用相机检测计算装置的视野中的特征和对象需要大量处理资源，从而导致计算装置(例如移动装置)中的较高功率消耗及较低电池寿命。
技术实现思路
本专利技术大体上涉及启用计算机视觉，且更具体来说，涉及使用计算机视觉改善检测特征的效率。各技术描述用于基于传感器读数产生经计算的结果以供检测例如边缘本文档来自技高网...

【技术保护点】
一种视觉传感器，其包括：传感器元件阵列，其包括多个传感器元件，所述传感器元件沿着所述传感器元件阵列的至少一第一维度和第二维度布置，所述多个传感器元件中的每一者能够基于入射在所述传感器元件上的光而产生信号；以及专用计算机视觉CV计算硬件，其能够接收来自所述传感器元件阵列的图像数据，并可配置以基于来自所述传感器元件阵列内的一或多个二维分块中的每一者中的传感器元件的信号而以串行方式计算所述一或多个二维分块的CV特征，所述专用CV计算硬件包含开关以允许所述CV计算硬件在第一模式中计算第一类型的CV特征且在第二模式中计算第二类型的CV特征。

【技术特征摘要】
【国外来华专利技术】2014.09.30 US 62/057,822;2014.09.30 US 62/057,816;1.一种视觉传感器，其包括：传感器元件阵列，其包括多个传感器元件，所述传感器元件沿着所述传感器元件阵列的至少一第一维度和第二维度布置，所述多个传感器元件中的每一者能够基于入射在所述传感器元件上的光而产生信号；以及专用计算机视觉CV计算硬件，其能够接收来自所述传感器元件阵列的图像数据，并可配置以基于来自所述传感器元件阵列内的一或多个二维分块中的每一者中的传感器元件的信号而以串行方式计算所述一或多个二维分块的CV特征，所述专用CV计算硬件包含开关以允许所述CV计算硬件在第一模式中计算第一类型的CV特征且在第二模式中计算第二类型的CV特征。2.根据权利要求1所述的视觉传感器，其中所述专用CV计算硬件在所述传感器元件阵列的外围。3.根据权利要求1所述的视觉传感器，其中所述第一类型的CV特征是局部二值模式LBP标记。4.根据权利要求3所述的视觉传感器，其中所述第一类型的CV特征是LBP标记的第一变体，且所述第二类型的CV特征是LBP标记的第二变体。5.根据权利要求3所述的视觉传感器，其中所述第二类型的CV特征是带正负号的梯度直方图HSG标记。6.根据权利要求1所述的视觉传感器，其中所述专用CV计算硬件耦合到专用微处理器。7.根据权利要求1所述的视觉传感器，其中所述第一类型的CV特征是加速分段测试特征FAST拐角。8.根据权利要求1所述的视觉传感器，其中所述专用CV计算硬件耦合到应用程序处理器。9.根据权利要求1所述的视觉传感器，其中所述专用CV计算硬件包括比较器。10.根据权利要求1所述的视觉传感器，其中所述专用CV计算硬件包括用于执行加权总和运算的电路。11.根据权利要求8所述的视觉传感器，其中所述专用CV计算硬件包括电荷按比例缩放电路。12.根据权利要求1所述的视觉传感器，其中所述专用CV计算硬件经配置以切换到第三模式以供计算所述第一类型的CV特征和所述第二类型的CV特征。13.根据权利要求1所述的视觉传感器，其中使用旁通路径将所述专用CV计算硬件的一部分予以旁通以计算所述第一类型的CV特征或所述第二类型的CV特征。14.一种方法，其包括：接收基于入射在形成传感器元件阵列的多个传感器元件上的光的传感器读数，其中所述多个传感器元件沿着所述传感器元件阵列的至少一第一维度和第二维度布置；确定操作专用计算机视觉CV计算硬件的模式，所述计算硬件能够接收来自所述传感器元件阵列的图像数据并可配置以基于来自所述传感器元件阵列内的一或多个二维分块中的每一者中的传感器元件的信号而以串行方式计算所述一或多个二维分块的CV特征，所述专用CV计算硬件包含开关以允许所述CV计算硬件在第一模式中计算第一类型的CV特征且在第二模式中计算第二类型的CV特征；以及基于所述所确定的模式将所述专用CV计算硬件切换到所述第一模式或所述第二模式以供计算所述对应类型的CV特征。15.根据权利要求14所述的方法，其中所述专用CV计算硬件在所述传感器元件阵列...

【专利技术属性】
技术研发人员：A·戈维尔，E·P·古塞夫，金秀尹，
申请(专利权)人：高通股份有限公司，
类型：发明
国别省市：美国,US