【技术实现步骤摘要】
本专利技术涉及一种基于线性注意力机制的语音驱动三维人脸动画生成方法和装置。
技术介绍
1、随着数字虚拟人的愈渐火热,语音驱动三维人脸动画技术在更大范围上引起了人们的关注,在电影、游戏以及vr/ar等领域中具有广阔的应用前景。语音驱动三维数字人脸动画,旨在通过输入语音序列,合成具有与其同步一致的面部运动。其内在机理在于,当人类说话时,许多面部运动由语音的产生直接引起,语音和面部姿态(尤其是嘴唇运动)之间存在高相关性。因此,这就使得通过输入语音,预测生成相应人脸面部表情成为可能。
2、为了实现逼真的3d人脸动画,传统的方法更多的依赖于相关从业者手工介入或通过捕捉设备实时驱动。前者需要大量复杂且专业的操作,在时效性和泛化性上不能良好的保证;后者则依赖高精度的捕捉设备,实现从真实人脸表情到虚拟人脸表情的映射,其不但在成本上十分昂贵,也极易在捕捉过程中受到环境因素的影响。因此,考虑到语音与面部表情的高相关性,通过语音序列直接预测生成3d人脸表情可以在泛化性,时效性以及成本节约等方面获得更好的结果。随着深度学习的火热,为了更便捷性的实现
...【技术保护点】
1.基于线性注意力机制的语音驱动三维人脸动画生成方法,包括如下步骤:
2.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤S1具体包括:
3.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤S2具体包括:
4.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤S3具体包括:
5.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤S4具体包括:
6.基于线性注意力机制的语音
...【技术特征摘要】
1.基于线性注意力机制的语音驱动三维人脸动画生成方法,包括如下步骤:
2.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤s1具体包括:
3.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤s2具体包括:
4.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸动画生成方法,其特征在于:步骤s3具体包括:
5.如权利要求1所述的基于线性注意力机制的语音驱动三维人脸...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。