【技术实现步骤摘要】
确定面部深度图的方法和装置
本申请涉及计算机视觉
，特别涉及一种确定面部深度图的方法和装置。
技术介绍
随着图像处理技术的发展，面部图像处理技术也得到了广泛应用，例如，面部识别、面部跟踪、面部对齐等。很多面部图像处理都需要使用到面部深度图，面部深度图像由面部图像中面部像素点对应的深度值组成。对于面部深度图的确定主要有两类方法：一类是通过高精度的光学测量设备进行采集，例如，使用基于结构光技术和线激光技术的3D扫描仪进行面部深度图的确定；另一类是双目立体视觉方法。双目立体视觉方法，是利用两个拍摄部件在不同视角对目标用户的面部进行拍摄，得到两张面部图像。然后，对于其中一张面部图像中的每个像素点，在另一张面部图像中确定出与其相对应的像素点的位置信息，确定方法是，先基于该像素点位置确定出以该像素点为中心的像素块，其中，常用的像素块的尺寸为5×5。再在另一张面部图像上确定出与该像素块相似度最高的5×5的像素块，对这两个像素块的中心像素点的位置信息求差，得到两个中心像素点的视差值，再由视差值可计算得到该像素点对应的深...
【技术保护点】
1.一种确定面部深度图的方法，其特征在于，所述方法包括：/n获取目标用户的第一二维面部图像和第二二维面部图像，基于所述第一二维面部图像和第二二维面部图像，确定所述目标用户的初始的面部深度图；/n基于所述初始的面部深度图，确定所述第一二维面部图像中面部像素点的法向信息；/n对于所述第一二维面部图像中每个面部像素点，根据所述面部像素点的法向信息，在所述第二二维面部图像中，确定对应的像素值与所述面部像素点的像素值相似度最高的目标匹配位置，根据所述目标匹配位置，确定所述面部像素点对应的深度值；/n基于所述第一二维面部图像中每个面部像素点对应的深度值，确定所述目标用户的更正后的面部深度图。/n
【技术特征摘要】
1.一种确定面部深度图的方法，其特征在于，所述方法包括：
获取目标用户的第一二维面部图像和第二二维面部图像，基于所述第一二维面部图像和第二二维面部图像，确定所述目标用户的初始的面部深度图；
基于所述初始的面部深度图，确定所述第一二维面部图像中面部像素点的法向信息；
对于所述第一二维面部图像中每个面部像素点，根据所述面部像素点的法向信息，在所述第二二维面部图像中，确定对应的像素值与所述面部像素点的像素值相似度最高的目标匹配位置，根据所述目标匹配位置，确定所述面部像素点对应的深度值；
基于所述第一二维面部图像中每个面部像素点对应的深度值，确定所述目标用户的更正后的面部深度图。
2.根据权利要求1所述的方法，其特征在于，所述根据所述面部像素点的法向信息，在所述第二二维面部图像中，确定对应的像素值与所述面部像素点的像素值相似度最高的目标匹配位置，包括：
根据所述面部像素点的法向信息，确定所述面部像素点的深度值和匹配位置的函数关系，基于所述函数关系确定所述匹配位置的可取值集合，在所述可取值集合中，确定对应的像素值与所述面部像素点的像素值相似度最高的目标匹配位置，其中，所述匹配位置为所述面部像素点在所述第二二维面部图像中对应的面部像素点的位置；
所述根据所述目标匹配位置，确定所述面部像素点对应的深度值，包括：
确定在所述函数关系中所述目标匹配位置对应的深度值。
3.根据权利要求2所述的方法，其特征在于，根据所述面部像素点的法向信息，确定所述面部像素点的深度值和匹配位置的函数关系，包括：
根据所述面部像素点的法向信息，确定所述面部像素点的深度值和匹配位置的函数关系为Pr＝Kr(Rlr-tlr·nT/z)Kl-1·Pl；
其中，Pl为第一二维面部图像中的任一面部像素点的位置信息，Pr为第二二维面部图像中，与所述第一二维面部图像中面部像素点相对应的面部像素点的位置信息，Kl为拍摄得到第一二维面部图像的第一图像拍摄部件的内参矩阵，Kr为拍摄得到第二二维面部图像的第二图像拍摄部件的内参矩阵，Rlr为所述第一图像拍摄部件到所述第二图像拍摄部件的旋转参数矩阵、tlr为所述第一图像拍摄部件到所述第二图像拍摄部件的平移参数矩阵，n为所述第一二维面部图像中的所述任一面部像素点的法向信息，所述法向信息为法向量，z为所述任一面部像素点在所述第一二维面部图像中的深度值。
4.根据权利要求2或3所述的方法，其特征在于，所述基于所述函数关系确定所述匹配位置的可取值集合，包括：
基于所述第一二维面部图像和第二二维面部图像的分辨率，确定视差值的可取值集合；
基于所述视差值的可取值集合，确定所述深度值的可取值集合；
基于所述函数关系和所述深度值的可取值集合，确定所述匹配位置的可取值集合。
5.根据权利要求4所述的方法，其特征在于，所述基于所述视差值的可取值集合，确定所述深度值的可取值集合，包括：
基于公式z＝f·B/d和所述视差值的可取值集合，确定所述深度值的可取值集合；
其中，f为拍摄得到所述第一二维图像的拍摄部件的焦距，d为所述视差值的可取值集合中的视差值，B为两拍摄部件间的基线矩阵。
6.根据权利要求1所述的方法，其特征在于，所述获取目标用户的第一二维面部图像和第二二维面部图像，包括：
获取第一红外拍摄部件拍摄目标用户的第一二维图像、第二红外拍摄部件拍摄所述目标用户的第二二维图像、以及可见光拍摄部件拍摄所述目标用户的第三二维图像；
确定所述第三二维图像中面部关键点的位置信息，基于所述第三二维图像中面部关键点的位置信息，确定第一二维图像和第二二维图像中面部关键点的位置信息；
基于所述第一二维图像中面部关键点的位置信息，在所述第一二维图像中确定第一二维面部图像，基于所述第二二维图像中面部关键点的位置信息，在所述第二二维图像中确定第二二维面部图像。
7.根据权利要求1所述的方法，其特征在于，所述获取目标用户的第一二维面部图像和第二二维面部图像，基于所述第一二维面部图像和第二二维面部图像，确定所述目标用户的初始的面部深度图，包括：
获取目标用户的第一二维面部图像和第二二维面部图像，基于所述第一二维面部图像对应的第一降分辨率面部图像和第二二维面部图像对应的第二降分辨率面部图像，确定所述目标用户的初始的面部深度图；
所述基于所述初始的面部深度图，确定所述第一二维面部图像中面部...
【专利技术属性】
技术研发人员：杨宏伟，李杰，夏循龙，毛慧，浦世亮，
申请(专利权)人：杭州海康威视数字技术股份有限公司，
类型：发明
国别省市：浙江;33
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。