一种肢体特效的渲染方法、装置、存储介质和设备制造方法及图纸

本申请提供一种肢体特效的渲染方法、装置、存储介质和设备，包括：获取目标对象的图像和参考肢体模型，所述图像包含所述目标对象的肢体，所述参考肢体模型用于呈现指定的肢体特效在参考三维模型上的渲染结果，所述参考肢体模型包含所述肢体特效与所述参考三维模型的映射关系；基于所述图像，生成与所述目标对象对应的三维模型，并获取所述图像对应的相机参数；根据所述肢体特效与所述参考三维模型的映射关系，确定所述肢体特效在所述目标对象的三维模型上的渲染结果，生成所述肢体特效对应所述目标对象的肢体特效模型；根据所述肢体特效模型和所述相机参数，在所述图像中渲染出所述肢体特效。本申请渲染的肢体特效贴合目标对象且立体感好。且立体感好。且立体感好。

【技术实现步骤摘要】
一种肢体特效的渲染方法、装置、存储介质和设备


[0001]本申请涉及计算机视觉
，尤其涉及一种肢体特效的渲染方法、装置、存储介质和设备。

技术介绍

[0002]目前，短视频、直播以及美颜相机等应用平台上存在着许多成熟的视频或图片特效，如表情特效、头套、贴图等。然而，市面上的大部分特效都是基于人脸或人的头部姿态的头部特效，而对人体结构化理解后的基于人的肢体的特效的研究却比较少，几乎没有落地的产品。

技术实现思路

[0003]为克服相关技术中存在的问题，本申请提供一种肢体特效的渲染方法、装置、存储介质和设备，用以解决相关技术中的缺陷。
[0004]根据本申请的第一方面，提供一种肢体特效的渲染方法，所述方法包括：
[0005]获取目标对象的图像和参考肢体模型，其中，所述图像包含所述目标对象的肢体，所述参考肢体模型用于呈现指定的肢体特效在参考三维模型上的渲染结果，所述参考肢体模型包含所述肢体特效与所述参考三维模型的映射关系；
[0006]基于所述图像，生成与所述目标对象对应的三维模型，并获取所述图像对应的相本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种肢体特效的渲染方法，其特征在于，所述方法包括：获取目标对象的图像和参考肢体模型，其中，所述图像包含所述目标对象的肢体，所述参考肢体模型用于呈现指定的肢体特效在参考三维模型上的渲染结果，所述参考肢体模型包含所述肢体特效与所述参考三维模型的映射关系；基于所述图像，生成与所述目标对象对应的三维模型，并获取所述图像对应的相机参数；根据所述肢体特效与所述参考三维模型的映射关系，确定所述肢体特效在所述目标对象的三维模型上的渲染结果，生成所述肢体特效对应所述目标对象的肢体特效模型；根据所述肢体特效模型和所述相机参数，在所述图像中渲染出所述肢体特效。2.根据权利要求1所述的方法，其特征在于，基于所述图像，生成与所述目标对象对应的三维模型，并获取所述图像对应的相机参数的步骤，包括：获取所述目标对象的肢体关键点，基于所述肢体关键点生成与所述目标对象对应的三维模型，并获取所述图像对应的相机参数。3.根据权利要求2所述的方法，其特征在于，所述肢体关键点通过将所述图像输入神经网络训练后获得。4.根据权利要求2所述的方法，其特征在于，基于所述肢体关键点生成与所述目标对象对应的三维模型，并获取所述图像对应的相机参数的步骤，包括：基于所述肢体关键点获取所述目标对象的姿态特征；基于所述姿态特征分别生成所述目标对象对应的姿态参数、形状参数和所述图像对应的相机参数；根据所述姿态参数和形状参数，通过人体参数化建模，生成与所述目标对象对应的三维模型。5.根据权利要求4所述的方法，其特征在于，基于所述肢体关键点获取所述目标对象的姿态特征的步骤之后，所述方法还包括：基于所述目标对象的姿态特征提取所述目标对象的局部特征，并根据所述目标对象的各个局部特征之间的相关性，对所述姿态特征进行优化，以基于优化后的姿态特征分别生成所述目标对象对应的姿态参数、形状参数和所述图像对应的相机参数。6.根据权利要求5所述的方法，其特征在于，基于所述目标对象的姿态特征提取所述目标对象的局部特征，并根据所述目标对象的各个局部特征之间的相关性，对所述姿态特征进行优化的步骤通过注意力机制实现。7.根据权利要求2所述的方法，其特征在于，生成与所述目标对象对应的三维模型，并获取所述图像对应的相机...

【专利技术属性】
技术研发人员：钱立辉，韩欣彤，
申请(专利权)人：佛山虎牙虎信科技有限公司，
类型：发明
国别省市：