The invention provides a method of TOF depth camera based facial expression capture includes: the first step, the real people of capturing facial expressions using TOF depth camera; the second step, facial expression data capture, and generate the facial capture file; the third step to construct 3D virtual characters into geometric model, facial expression capture file, driver model. The method does not need to manually mark Marker, and uses the method of image recognition to recognize and record the movement data of facial key points directly. The captured data is the real motion data of the human face, the action is coherent and realistic, the expression is delicate and rich, and the facial expression capture file obtained by the method can be reused, and the cost is saved.
【技术实现步骤摘要】
一种基于TOF深度相机的面部表情捕捉方法
本专利技术涉及计算机视觉及计算机图形学
,尤其涉及一种利用单个TOF深度相机捕捉人脸面部的表情动作并存储为特定的数据格式用于动漫模型等的面部表情捕捉方法。
技术介绍
近年来,随着计算机图形学的发展,计算机动画技术合成人的面部表情动画是当前动画学科研究的一个重点之一,它使得动画制作者能够以演员的表情直接驱动画形象模型,受到了动画制作者们更多的关注。面部表情捕捉能够实时地检测、记录表演者的表情,转化为数字化的“抽象表情”,以便动画软件将它“赋予”模型,使模型具有和表演者一样的表情,并生成最终的表情动画序列。目前,人脸表情动画总体上可分为基于几何、基于图像、基于运动跟踪的研究方法。其中基于几何的研究方法主要包括关键帧插值法、参数化方法、肌肉模型法等;基于图像的方法主要包括:图像变形、动态纹理映射、面色变化的表情等。在基于几何的研究方法中,关键帧插值法首先在两个不同的时刻建立几何模型,然后在这两个模型之间进行插值得到中间时刻的模型,从而获得人脸表情动画,这是一种最传统的、最原始的人脸动画方法,同时也是一种标准的人脸动画方法,但它的不足之处是需要很大的工作量。参数化方法是由Parke首次应用于人脸动画(ParkeFI.AParametericModelforHumanFaces[D].SaltLakeCity:UniversityofUtah,1974),嘴唇说话时的动作就适合用这种方法,这种方法的不足是产生的人脸表情不够自然,并且在设置参数值时需要大量的手工调整。肌肉模型法是通过一组构成肌肉模型的弹性肌肉的收缩来控制 ...
【技术保护点】
一种基于TOF深度相机的面部表情捕捉方法,其特征在于,包括:第一步,使用TOF深度相机对真实人物进行面部表情捕捉;第二步,处理捕捉的面部表情数据,并生成面部表情捕捉文件;第三步,构建三维虚拟人物几何模型,导入面部表情捕捉文件,驱动模型。
【技术特征摘要】
1.一种基于TOF深度相机的面部表情捕捉方法,其特征在于,包括:第一步,使用TOF深度相机对真实人物进行面部表情捕捉;第二步,处理捕捉的面部表情数据,并生成面部表情捕捉文件;第三步,构建三维虚拟人物几何模型,导入面部表情捕捉文件,驱动模型。2.如权利要求1所述的基于TOF深度相机的面部表情捕捉方法,其特征在于:在第一步中采用AAM算法标定真实人物的面部特征点,使头部姿态各异的情况下我们也能够对面部特征点进行精确的定位,从而对真实人物进行面部表情捕捉。3.如权利要求1或2所述的基于TOF深度相机的面部表情捕捉方法,其特征在于:所述第一步进一步具体包括,a、利用TOF深度相机获取人脸彩色图像和深度图像;b、建立头部姿态判断模型;c、训练并建立AAM算法的模型;d、利用AAM算法定位面部特征点;e、获取面部特征点的三维坐标。4.如权利要求1至3所述的基于TOF深度相机的面部表情捕捉方法,其特征在于:第a步具体为利用TOF深度相机获取三维人脸的彩色数据流与深度数据流,并将彩色数据流转换成彩色图像,将深度数据流转换成深度图像。5.如权利要求1至4所述的基于TOF深度相机的面部表情捕捉方法,其特征在于:第b步具体为利用TOF深度相机获取不同的头部姿态相对应的深度图像,然后按照头部姿态的位置将获取到的深度图像分为多个不同的分类训练集,使用脸部近视平面的法向量来表示不同的头部姿态...
【专利技术属性】
技术研发人员:张维忠,袁翠梅,黄松,周绍致,王青林,
申请(专利权)人:张维忠,
类型:发明
国别省市:山东,37
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。