一种结合头部姿态识别的数字人模型构建系统技术方案

技术编号:38226410 阅读:26 留言:0更新日期:2023-07-25 17:56
本发明专利技术提供一种结合头部姿态识别的数字人模型构建系统,涉及信息采集技术领域。该结合头部姿态识别的数字人模型构建系统,包括基础数据采集模块,所述基础数据采集模块连接有头部姿态估计网络,所述头部姿态估计网络连接有数据检测判断模块,所述数据检测判断模块连接有身份特征信息注入模块,所述数据检测判断模块和身份特征信息注入模块连接有关键点检测模块。通过以单张人脸动画模型和身份特征信息注入模块为核心,佐以头部姿态估计模块,通过身份信息注入模块将身份信息补充到合成帧中,改善大角度下身份信息失真的问题,便于使用者通过该系统实现将真实的人物图像转化为数字人的功能,增大该系统整体的适用范围,提升该系统整体的实用性。升该系统整体的实用性。升该系统整体的实用性。

【技术实现步骤摘要】
一种结合头部姿态识别的数字人模型构建系统


[0001]本专利技术涉及信息采集
,具体为一种结合头部姿态识别的数字人模型构建系统。

技术介绍

[0002]根据现代信息网络时代的发展,在各种领域都需要对人员信息、特征进行自助采集和身份识别,身份识别被广泛应用于日常生活中,对于考勤、出行或登记的场合下,均会涉及到身份识别的问题,现有的身份信息采集和识别系统进行头部识别的方法主要有两类,一类是利用单张人物二维图像进行人脸动画,另一类是用一张或多张二维图像对人物进行三维建模,再对三维模型进行动画,这两类方法都存在着明显的弊端,第一类方法需要限制驱动人物的动作范围,动作幅度过大会出现较大的人物失真,第二类方法建模需要很大的算力,同时所建模型相较于真实人物已经有明显差别,从而导致现有的系统在进行使用时,真实人像转化为数字人的效果不佳,整体的使用效果不好。

技术实现思路

[0003](一)解决的技术问题
[0004]针对现有技术的不足,本专利技术提供了一种结合头部姿态识别的数字人模型构建系统,解决了现有的身份信息识别系统在进行使用本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种结合头部姿态识别的数字人模型构建系统,包括基础数据采集模块(1),其特征在于:所述基础数据采集模块(1)连接有头部姿态估计网络(2),所述头部姿态估计网络(2)连接有数据检测判断模块(3);所述数据检测判断模块(3)连接有身份特征信息注入模块(6),所述数据检测判断模块(3)和身份特征信息注入模块(6)连接有关键点检测模块(4),所述关键点检测模块(4)连接有密集运动场估计模块(5),所述密集运动场估计模块(5)连接有图像补全模块(7),所述图像补全模块(7)连接有模型构建模块(8)。2.根据权利要求1所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述基础数据采集模块(1)包括源图像集获取模块(101)和驱动视频获取模块(102),所述源图像集获取模块(101)和驱动视频获取模块(102)连接有摄像机(103)和扫描仪(104)。3.根据权利要求1所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述头部姿态估计网络(2)包括ResNet50(201)和全连接层(206),所述全连接层(206)连接有全连接网络(207)。4.根据权利要求3所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述ResNet50(201)连接有欧拉角提取模块(202),所述欧拉角提取模块(202)连接有俯仰角提取模块(203)、偏航角提取模块(204)和滚动角提取模块(205)。5.根据权利要求1所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述关键点检测模块(4)包括ResNet18(401),所述ResNet18(401)连接有背景运动估计器(402)和关键点检测器(403)。6.根据权利要求1所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述密集运动场估计模块(5)包括薄板样条插值模块(501),所述薄板样条插值模块(501)连接有密集运动场输出模块(502)和掩膜对源图像输出模块(503)。7.根据权利要求1所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述身份特征信息注入模块(6)包括表情评估模块(601)和头部姿态估计模块(602),所述表情评估模块(601)和头部姿态估计模块(602)连接有人脸编辑模块(603)。8.根据权利要求1所述的一种结合头部姿态识别的数字人模型构建系统,其特征在于:所述模型构建模块(8)包括图像处理模块(801),所述图像处理模块(801)连接有特征处理模块(802)和模型生成模块(805),所述特征处理模块(802)连接有特征提取模块(803)和特征对比模块(804),所述模型生成模块(805)连接有草图生成模块(806)和模型拟合模块(807)。9.根据权利要求1所述的一种结合头部姿态识别的数字...

【专利技术属性】
技术研发人员:陈建文王文一朱翌帆梅渊宗白树伟
申请(专利权)人:四川萃雅教育科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1