基于视觉感知辐射场的复杂场景高效渲染方法技术

技术编号:42670835 阅读:15 留言:0更新日期:2024-09-10 12:24
本公开的实施例公开了基于视觉感知辐射场的复杂场景高效渲染方法。该方法的一具体实施方式包括:构建初始视觉感知辐射场;从场景图像集中选出场景图像作为样本图像,执行以下步骤:基于用户注视点信息和初始视觉感知辐射场,生成视觉采样率图;基于视觉采样率图和初始视觉感知辐射场,确定图像渲染结果;确定图像渲染结果与样本图像渲染数据之间的目标差异值;响应于确定目标差异值小于预设差异阈值,将训练完成的初始视觉感知辐射场确定为视觉感知辐射场;将渲染视角信息输入视觉感知辐射场,以输出目标渲染图像;控制显示设备对目标渲染图像进行显示。该实施方式可以提高图像渲染的效率和质量,及时生成质量较高的新视角图像。

【技术实现步骤摘要】

本公开的实施例涉及计算机图形学和虚拟现实领域,具体涉及基于视觉感知辐射场的复杂场景高效渲染方法


技术介绍

1、在虚拟现实场景中,图像渲染性能对合成新视角图像的效率具有重要影响。目前,在进行图像渲染时,通常采用的方式为:采用神经辐射场或者基于多层感知机的神经辐射场变体方法,根据虚拟现实场景的几何信息(例如深度、不透明度)和中心视觉区域的特征,进行新视角图像的渲染合成。

2、然而,实践中发现,当采用上述方式进行图像渲染时,经常会存在如下技术问题:

3、第一,神经辐射场及其变体方法在训练以及运行时通常需要进行较长时间地网络推理,且容易忽略中心视觉区域外围的显著特征,使得图像渲染过程耗时较长、渲染结果质量降低,从而,导致难以及时生成质量较高的新视角图像;

4、第二,神经辐射场及其变体方法通常采用均匀采样或先粗采样再细采样的方式对光射线上的点进行采样,由于均匀采样方式容易使得视觉显著区域欠采样,同时先粗采样再细采样方式在部分视觉显著区域容易出现过采样的情况,从而,容易导致根据采样点合成的新视角图像质量较低。</p>

5、该背本文档来自技高网...

【技术保护点】

1.一种基于视觉感知辐射场的复杂场景高效渲染方法,包括:

2.根据权利要求1所述的方法,其中,所述方法还包括:

3.根据权利要求1所述的方法,其中,所述基于预先获取的对应目标三维场景的场景图像集,构建初始视觉感知辐射场,包括:

4.根据权利要求3所述的方法,其中,所述基于所选出的样本图像对应的用户注视点信息、初始视觉感知辐射场包括的初始密度网格和初始视觉显著性网格,生成视觉采样率图,包括:

5.根据权利要求4所述的方法,其中,所述基于所述射线集、初始视觉感知辐射场包括的初始密度网格和初始视觉显著性网格,构建初始对比敏感度图,包括:

<...

【技术特征摘要】

1.一种基于视觉感知辐射场的复杂场景高效渲染方法,包括:

2.根据权利要求1所述的方法,其中,所述方法还包括:

3.根据权利要求1所述的方法,其中,所述基于预先获取的对应目标三维场景的场景图像集,构建初始视觉感知辐射场,包括:

4.根据权利要求3所述的方法,其中,所述基于所选出的样本图像对应的用户注视点信息、初始视觉感知辐射场包括的初始密度网格和初始视觉显著性网格,生成视觉采样率图,包括:

5.根据权利要求4所述的方法,其中,所述基于所述射线集、初始视觉感知辐射场包括的初始密度网格和初始视觉显著性网格,构建初始对比敏感度图,包括:

6.根据权利要求5所述...

【专利技术属性】
技术研发人员:王莉莉王梓竣吴健赵沁平
申请(专利权)人:北京航空航天大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1