当前位置: 首页 > 专利查询>清华大学专利>正文

动态人体渲染方法、装置、电子设备及存储介质制造方法及图纸

技术编号:41353228 阅读:16 留言:0更新日期:2024-05-20 10:05
本申请涉及一种动态人体渲染方法、装置、电子设备及存储介质,其中,方法包括:采集待渲染目标的多个目标采样图像,并获取对应的标准空间采样点,且对其进行非刚体变换,得到多个修正采样点;构建多尺度哈希表和细节补充网格,以生成待渲染目标的多尺度哈希表特征和三平面特征,并将多个修正采样点映射至目标视角,以提取待渲染目标的二维图像特征,并基于二维图像特征,获取待渲染目标的多视角特征;根据多视角特征、多尺度哈希表特征和三平面特征生成待渲染目标的融合特征,以利用融合特征渲染待渲染目标,得到动态人体渲染结果。由此,解决了现有的基于多视角图像的动态人物渲染方法难以兼顾最终的渲染速度和渲染质量等问题。

【技术实现步骤摘要】

本申请涉及计算机视觉,特别涉及一种动态人体渲染方法、装置、电子设备及存储介质


技术介绍

1、基于多视角rgb(red-green-blue,红绿蓝)的动态人体渲染技术指的是对一组给定的在多个相机下拍摄的运动中的人物形象实现自由视角观看;该任务的难点首先在于其涉及到如何有效利用多视角信息更好的恢复布料褶皱、头发运动等纹理细节,且一般的动态渲染方法也会面临可以表达的时长较短等问题。

2、传统多视角动态人体渲染算法dynamicfusion能够在rgbd相机的帮助下,实时估计动态场景中的非刚体变换,并且能够结合预测得到的深度图还原在标准空间下的人物几何形状,这种方法后续也被用于远程会议和全息通讯。然而,这些多视角重建系统都非常依赖深度传感器来获得精确的人物几何,这会导致数据的采集环境较为复杂,并且提高数据采集的成本。

3、近年来,神经隐式表达得到了越来越多的关注,并且已经在静态场景的多视角重建和渲染任务中得到了应用,其中,nerf(neural radiance field,神经辐射场)即可使用简单的体渲染公式以优化场景表达,且已能够胜本文档来自技高网...

【技术保护点】

1.一种动态人体渲染方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的方法,其特征在于,所述对所述标准空间采样点进行非刚体变换,得到多个修正采样点,包括:

3.根据权利要求1所述的方法,其特征在于,所述构建多尺度哈希表和细节补充网格,根据所述多尺度哈希表和所述细节补充网格生成所述待渲染目标的多尺度哈希表特征和三平面特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述多个修正采样点映射至目标视角,以提取所述待渲染目标的二维图像特征,并基于所述二维图像特征,获取所述待渲染目标的多视角特征,包括:

5.根据权利要求4所述的方...

【技术特征摘要】

1.一种动态人体渲染方法,其特征在于,包括以下步骤:

2.根据权利要求1所述的方法,其特征在于,所述对所述标准空间采样点进行非刚体变换,得到多个修正采样点,包括:

3.根据权利要求1所述的方法,其特征在于,所述构建多尺度哈希表和细节补充网格,根据所述多尺度哈希表和所述细节补充网格生成所述待渲染目标的多尺度哈希表特征和三平面特征,包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述多个修正采样点映射至目标视角,以提取所述待渲染目标的二维图像特征,并基于所述二维图像特征,获取所述待渲染目标的多视角特征,包括:

5.根据权利要求4所述的方法,其特征在于,所述根据所述多视角特征、所述多尺度哈希表特征和所述三平面特征生成所述待渲染目标的融合特征,以利用所述融合特征渲染所述所述待渲染目标...

【专利技术属性】
技术研发人员:季向阳杨嘉琪连晓聪李志刚王飞
申请(专利权)人:清华大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1