一种2D虚拟人的实时驱动方法技术

技术编号:41904934 阅读:24 留言:0更新日期:2024-07-05 14:10
本发明专利技术涉及虚拟人,具体涉及一种2D虚拟人的实时驱动方法,选定2D虚拟人实时驱动的人像模板;录制人像模板按照汉语拼音的标准发音方法进行发音的标准发音口型视频;对每个标准发音口型视频进行逐帧拆解,并各自选取一张闭口口型图片和一张完整发音口型图片;对选取的图片进行人脸关键点检测和定位,并建立人脸关键点名称和人脸关键点坐标之间的映射关系,得到发音口型特征数据;对发音口型特征数据进行基准偏移计算,并为每个发音口型设定口型变化周期,得到发音口型特征模型;本发明专利技术提供的技术方案能够有效克服现有技术所存在的无法在普通配置的终端设备上对2D虚拟人进行实时驱动的缺陷。

【技术实现步骤摘要】

本专利技术涉及虚拟人,具体涉及一种2d虚拟人的实时驱动方法。


技术介绍

1、目前,对于真人2d虚拟人的实时驱动,通常采用的方案是:先拍摄一段包含各种发音口型的真人视频,然后通过机器学习的方式,训练出一个机器学习模型,再根据相关的文本内容,实现虚拟人的实时驱动。

2、然而,上述方案无法在普通配置(例如2核2g)的终端设备上实现2d虚拟人的实时驱动,对终端设备的硬件配置要求很高,需要强大的cpu、gpu以及内存空间予以支持。


技术实现思路

1、(一)解决的技术问题

2、针对现有技术所存在的上述缺点,本专利技术提供了一种2d虚拟人的实时驱动方法,能够有效克服现有技术所存在的无法在普通配置的终端设备上对2d虚拟人进行实时驱动的缺陷。

3、(二)技术方案

4、为实现以上目的,本专利技术通过以下技术方案予以实现:

5、一种2d虚拟人的实时驱动方法,包括以下步骤:

6、s1、选定2d虚拟人实时驱动的人像模板;

7、s2、录制人像模板按照汉语本文档来自技高网...

【技术保护点】

1.一种2D虚拟人的实时驱动方法,其特征在于:包括以下步骤:

2.根据权利要求1所述的2D虚拟人的实时驱动方法,其特征在于:S1中选定2D虚拟人实时驱动的人像模板,包括:

3.根据权利要求2所述的2D虚拟人的实时驱动方法,其特征在于:S2中录制人像模板按照汉语拼音的标准发音方法进行发音的标准发音口型视频,包括:

4.根据权利要求3所述的2D虚拟人的实时驱动方法,其特征在于:S3中对每个标准发音口型视频进行逐帧拆解,并各自选取一张闭口口型图片和一张完整发音口型图片,包括:

5.根据权利要求4所述的2D虚拟人的实时驱动方法,其特征在于:S4中对...

【技术特征摘要】

1.一种2d虚拟人的实时驱动方法,其特征在于:包括以下步骤:

2.根据权利要求1所述的2d虚拟人的实时驱动方法,其特征在于:s1中选定2d虚拟人实时驱动的人像模板,包括:

3.根据权利要求2所述的2d虚拟人的实时驱动方法,其特征在于:s2中录制人像模板按照汉语拼音的标准发音方法进行发音的标准发音口型视频,包括:

4.根据权利要求3所述的2d虚拟人的实时驱动方法,其特征在于:s3中对每个标准发音口型视频进行逐帧拆解,并各自选取一张闭口口型图片和一张完整发音口型图片,包括:

5.根据权利要求4所述的2d虚拟人的实时驱动方法,其特征在于:s4中对选取的图片进行人脸关键点检测和定位,并建立人脸关键点名称和人脸关键点坐标之间的映射关系,得到发音口型特征数据,包括:

6.根据权利要求5所述的2...

【专利技术属性】
技术研发人员:潘锗许宜华张江刁海俊高宜专
申请(专利权)人:安徽嘻哈智能科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1