【技术实现步骤摘要】
本申请涉及计算机视觉,特别涉及一种动态人体渲染方法、装置、电子设备及存储介质。
技术介绍
1、基于多视角rgb(red-green-blue,红绿蓝)的动态人体渲染技术指的是对一组给定的在多个相机下拍摄的运动中的人物形象实现自由视角观看;该任务的难点首先在于其涉及到如何有效利用多视角信息更好的恢复布料褶皱、头发运动等纹理细节,且一般的动态渲染方法也会面临可以表达的时长较短等问题。
2、传统多视角动态人体渲染算法dynamicfusion能够在rgbd相机的帮助下,实时估计动态场景中的非刚体变换,并且能够结合预测得到的深度图还原在标准空间下的人物几何形状,这种方法后续也被用于远程会议和全息通讯。然而,这些多视角重建系统都非常依赖深度传感器来获得精确的人物几何,这会导致数据的采集环境较为复杂,并且提高数据采集的成本。
3、近年来,神经隐式表达得到了越来越多的关注,并且已经在静态场景的多视角重建和渲染任务中得到了应用,其中,nerf(neural radiance field,神经辐射场)即可使用简单的体渲染公式以优化
...【技术保护点】
1.一种动态人体渲染方法,其特征在于,包括以下步骤:
2.根据权利要求1所述的方法,其特征在于,所述对所述标准空间采样点进行非刚体变换,得到多个修正采样点,包括:
3.根据权利要求1所述的方法,其特征在于,所述构建多尺度哈希表和细节补充网格,根据所述多尺度哈希表和所述细节补充网格生成所述待渲染目标的多尺度哈希表特征和三平面特征,包括:
4.根据权利要求3所述的方法,其特征在于,所述将所述多个修正采样点映射至目标视角,以提取所述待渲染目标的二维图像特征,并基于所述二维图像特征,获取所述待渲染目标的多视角特征,包括:
5.根
...【技术特征摘要】
1.一种动态人体渲染方法,其特征在于,包括以下步骤:
2.根据权利要求1所述的方法,其特征在于,所述对所述标准空间采样点进行非刚体变换,得到多个修正采样点,包括:
3.根据权利要求1所述的方法,其特征在于,所述构建多尺度哈希表和细节补充网格,根据所述多尺度哈希表和所述细节补充网格生成所述待渲染目标的多尺度哈希表特征和三平面特征,包括:
4.根据权利要求3所述的方法,其特征在于,所述将所述多个修正采样点映射至目标视角,以提取所述待渲染目标的二维图像特征,并基于所述二维图像特征,获取所述待渲染目标的多视角特征,包括:
5.根据权利要求4所述的方法,其特征在于,所述根据所述多视角特征、所述多尺度哈希表特征和所述三平面特征生成所述待渲染目标的融合特征,以利用所述融合特征渲染所述所述待渲染目标...
【专利技术属性】
技术研发人员:季向阳,杨嘉琪,连晓聪,李志刚,王飞,
申请(专利权)人:清华大学,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。