图像处理方法、装置、计算机可读存储介质和电子设备制造方法及图纸

本申请涉及一种图像处理方法、装置、计算机可读存储介质和电子设备。所述方法包括：获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；将所述至少两帧第二图像拼接成一帧深度图像；对所述深度图像和所述第一图像进行处理。上述图像处理方法、装置、计算机可读存储介质和电子设备，可以防止TOF图像丢帧，提高图像处理稳定性。

【技术实现步骤摘要】
图像处理方法、装置、计算机可读存储介质和电子设备
本申请涉及计算机
，特别是涉及一种图像处理方法、装置、计算机可读存储介质和电子设备。
技术介绍
智能设备在对物体进行拍摄的时候，不仅能够采集物体的色彩信息，还能够采集物体的深度信息，通过深度信息可以对图像的色彩信息进行更精确地处理。例如，可以根据深度信息识别图像中的近景和远景，从而对近景和远景的色彩进行不同的处理；还可以根据深度信息判断识别到的人脸是否为活体，从而对活体人脸进行美颜处理等。通过图像处理的方法采集深度信息的方法有多种，例如双目测距法、结构光法、飞行时间法等。然而，由于TOF摄像头与可见光摄像头采集频率不一致，在相同曝光时间下，TOF摄像头采集到的图像容易丢帧，而一旦丢帧则会出现双目标定不准确，图像采集系统稳定性差。
技术实现思路
本申请实施例提供一种图像处理方法、装置、计算机可读存储介质和电子设备，可以提高图像处理系统稳定性。一种图像处理方法，所述方法包括：获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；将所述至少两帧第二图像拼接成一帧深度图像；对所述深度图像和所述第一图像进行处理。一种图像处理装置，所述装置包括：获取单元，用于获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；拼接单元，用于将所述至少两帧第二图像拼接成一帧深度图像；处理单元，用于对所述深度图像和所述第一图像进行处理。一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；将所述至少两帧第二图像拼接成一帧深度图像；对所述深度图像和所述第一图像进行处理。一种电子设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如下步骤：获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；将所述至少两帧第二图像拼接成一帧深度图像；对所述深度图像和所述第一图像进行处理。上述图像处理方法、装置、计算机可读存储介质和电子设备，可以在相同曝光时间内获取到第一图像及多帧第二图像后，将多帧第二图像进行图像拼接，拼接为一帧深度图像，并对第一图像与一帧深度图像进行处理，解决了现有技术中TOF摄像头容易丢帧的问题，提高了图像处理系统稳定性。附图说明为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。图1为一个实施例中图像处理方法的应用环境图；图2为一个实施例中图像处理方法的流程图；图3为另一个实施例中图像处理方法的流程图；图4为又一个实施例中图像处理方法的流程图；图5为一个实施例中TOF计算深度信息的原理图；图6为又一个实施例中图像处理方法的流程图；图7为又一个实施例中图像处理方法的流程图；图8为一个实施例中图像处理流程的示意图；图9为一个实施例中实现图像处理方法的软件框架图；图10为一个实施例中图像处理装置的结构示意图；图11为一个实施例中图像处理电路的示意图。具体实施方式为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一客户端称为第二客户端，且类似地，可将第二客户端称为第一客户端。第一客户端和第二客户端两者都是客户端，但其不是同一客户端。图1为一个实施例中图像处理方法的应用环境图。如图1所示，电子设备上可安装两个摄像头，包括第一摄像头102和第二摄像头104。具体的，电子设备可以通过第一摄像头102和第二摄像头104进行拍摄，获取第一摄像头102在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头104在曝光时段内根据第二帧率采集的至少两张第二图像，其中，第一帧率小于第二帧率。然后，根据第一图像生成第一图像，并根据第二图像生成深度图像，深度图像用于表示第一图像对应的深度信息；根据第一图像和深度图像进行处理。可以理解的是，上述电子设备可以是手机、电脑、可穿戴设备等，在此不做限定。其中，第一摄像头可以是可见光摄像头，又可称为RGB摄像头，如CCD、CMOS摄像头；第二摄像头为激光式的飞行时间(TimeofFlight,TOF)摄像头，可采集目标物体的深度信息(即摄像头与目标物体的距离信息)。在用于高精度距离测量的光检测与测距(LIDAR)中使用基于测量照明单元所发射的光行进到对象且返回到检测器所需的时间的飞行时间(TimeOfFlight,TOF)技术。目前，基于该原理已开发在标准CMOS或CCD技术中实现TOF测距，即TOF摄像头，TOF摄像头也称为范围成像(RIM)传感器。不同于其余3D系统，TOF摄像头已经成为实现采集目标物体距离(即深度信息)的新一代摄像头。目前TOF技术有两种方法，第一种方法利用经调制非相干光基于相位测量，称为相位差法。第二种方法则基于脉冲信号的持续发送及接收，通过时间差来计算目标物体的距离，称为时间差法。图2为一个实施例中图像处理方法的流程图，应用于电子设备。如图2所示，该图像处理方法包括步骤202至步骤206。其中：S202、获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；电子设备上可以安装摄像头，并通过安装的摄像头获取图像。摄像头可以根据获取的图像的不同分为激光摄像头、可见光摄像头等类型，激光摄像头可以获取激光照射到物体上所形成的图像，可见光图像可以获取可见光照射到物体上所形成的图像。电子设备上可以安装若干个摄像头，且安装的位置不做限定。例如，可以在电子设备的正面面板上安装一个摄像头，在背面面板上安装两个摄像头，摄像头还可以以内嵌的方式安装于电子设备的内部，然后通过旋转或滑动的方式打开摄像头。具体地，电子设备上可安装前置摄像头和本文档来自技高网...

【技术保护点】
1.一种图像处理方法，应用于电子设备，其特征在于，所述方法包括：获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；将所述至少两帧第二图像拼接成一帧深度图像；对所述深度图像和所述第一图像进行处理。

【技术特征摘要】
1.一种图像处理方法，应用于电子设备，其特征在于，所述方法包括：获取第一摄像头在曝光时段内根据第一帧率采集的第一图像，并获取第二摄像头在所述曝光时段内根据第二帧率采集的至少两帧第二图像，其中，所述第一帧率小于所述第二帧率，所述第二摄像头为飞行时间TOF摄像头，所述第二图像为包含深度信息的图像；将所述至少两帧第二图像拼接成一帧深度图像；对所述深度图像和所述第一图像进行处理。2.根据权利要求1所述的方法，其特征在于，所述第二图像包括图像数据及与所述图像数据对应的元数据，则将所述至少两帧第二图像拼接成一帧深度图像，包括：提取每一帧所述第二图像中的图像数据及元数据；将所述提取出的图像数据及元数据进行打包操作；存储所述打包后的图像数据及元数据，所述存储的图像数据及元数据为所述一帧深度图像数据。3.根据权利要求2所述的方法，其特征在于，将所述提取出的图像数据及元数据进行打包操作，包括：将所述至少两帧的图像数据及对应的元数据分别进行数据拼接，或，按照所述曝光时序依次将所述至少两帧第二图像的图像数据和元数据进行数据拼接。4.根据权利要求2所述的方法，其特征在于，所述至少两帧第二图像中至少一帧为关键帧，至少一帧为非关键帧，则将所述提取出的图像数据及元数据进行打包操作，包括：计算出所述关键帧与所述非关键帧中对应像素点的相位差数据；提取出所述关键帧的图像数据及元数据，将所述计算出的相位差数据与所述关键帧的图像数据及元数据进行打包操作。5.根据权利要求2所述的方法，其特征在于，所述元数据用于表示采集所述第二图像的先后顺序，则将所述至少两帧第...

【专利技术属性】
技术研发人员：陈岩，方攀，
申请(专利权)人：OPPO广东移动通信有限公司，
类型：发明
国别省市：广东,44