渲染方法及装置、训练方法制造方法及图纸

技术编号:41407240 阅读:20 留言:0更新日期:2024-05-20 19:33
本申请实施例提供了一种渲染方法及装置、训练方法,涉及图像处理技术领域,该方法包括:先通过神经渲染得到较低分辨率的任意视角下预设三维对象的特征图,再对该特征图进行超分辨率处理,得到所需的较高分辨率的该预设三维对象在该任意视角下的渲染图像。由于神经渲染的特征图的分辨率较低,且图像超分辨率处理的复杂度也较低,从而降低算法复杂度,以提升对图像的渲染速度,满足实时地以自由视角来观看三维内容的图像需求。

【技术实现步骤摘要】

本申请实施例涉及图像处理,尤其涉及一种渲染方法及装置、训练方法


技术介绍

1、神经渲染(neural rendering)是一种对三维内容的渲染方法,神经渲染可对输入的任意视角,生成该三维内容在该视角下的图像。

2、但是,目前现有技术中的神经渲染方法的渲染速度较慢,无法满足实时地自由视角来观看三维内容的图像的需求。


技术实现思路

1、为了解决上述技术问题,本申请提供一种渲染方法及装置、训练方法。在该方法中,先通过神经渲染得到较低分辨率的任意视角下预设三维对象的特征图,再对该特征图进行超分辨率处理,得到所需的较高分辨率的该预设三维对象在该任意视角下的渲染图像。由于神经渲染的特征图的分辨率较低,且图像超分辨率处理的复杂度也较低,从而降低算法复杂度,以提升对图像的渲染速度,满足实时地以自由视角来观看三维内容的图像需求。

2、在一种可能的实施方式中,本申请提供一种渲染方法。该方法包括:获取第一视角;基于所述第一视角对预设三维对象进行神经渲染处理,得到第一分辨率的第一特征图;对所述第一特征图进本文档来自技高网...

【技术保护点】

1.一种渲染方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,保存所述预设三维对象在候选视角下的候选渲染结果,包括:

4.根据权利要求3所述的方法,其特征在于,所述方法还包括:

5.根据权利要求2至4中任意一项所述的方法,其特征在于,所述候选渲染结果包括所述预设三维对象在同一候选视角下的目标特征图或目标图像;

6.根据权利要求2至5中任意一项所述的方法,其特征在于,所述基于保存的所述预设三维对象在候选视角下的候选渲染结果,获取与所述第一视角相关...

【技术特征摘要】

1.一种渲染方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

3.根据权利要求2所述的方法,其特征在于,保存所述预设三维对象在候选视角下的候选渲染结果,包括:

4.根据权利要求3所述的方法,其特征在于,所述方法还包括:

5.根据权利要求2至4中任意一项所述的方法,其特征在于,所述候选渲染结果包括所述预设三维对象在同一候选视角下的目标特征图或目标图像;

6.根据权利要求2至5中任意一项所述的方法,其特征在于,所述基于保存的所述预设三维对象在候选视角下的候选渲染结果,获取与所述第一视角相关的第二视角的第一渲染结果,包括:

7.根据权利要求1至6中任意一项所述的方法,其特征在于,所述第一特征图的通道数大于3。

8.根据权利要求1至7中任意一项所述的方法,其特征在于,所述预设三维对象为虚拟三维对象或真实三维对象。

9.一种渲染装置,其特征在于,所述装置包括神经渲染模块和超分辨率模块;

10.根据权利要求9所述的装置,其特征在于,所述神经渲染模块包括第一模块,所述第一模块的输出结果的通道数大于3。

11.根据权利要求10所述的装置,其特征在于,所述第一模块为第一网络,所述第一网络中的最后一层网络的通道数大于4。

12.根据权利要求10所述的装置,其特征在于,所述第一模块为体表达模块,所述体表达模块存储的每个体素信息的通道数大于4。

13.根据权利要求10至12中任意一项所述的装置,其特征在于,所述神经渲染模块包括与所述第一模块连接的体渲染模块;

14.根据权利要求9至13中任意一项所述的装置,其特征在于,所述装置还包括:

15....

【专利技术属性】
技术研发人员:廖依伊李思成虞露曹潇然涂晨曦蔡康颖
申请(专利权)人:华为技术有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1