生成三维场景的方法、电子设备和计算机程序产品技术

技术编号:41206987 阅读:11 留言:0更新日期:2024-05-07 22:33
本公开的实施例提供了生成三维场景的方法、电子设备和计算机程序产品。该方法可以包括从多个二维源图像中获取源图像特征,所述多个二维源图像与要生成的所述三维场景相关联。该方法还可以包括从用户输入的针对所述三维场景的编辑指令中获取编辑特征,所述编辑特征中的每个特征分别与所述源图像特征中的每个特征组成特征对。此外,该方法可以包括通过最大化每个所述特征对的相关系数,更新所述源图像特征,并且至少基于经更新的所述源图像特征,生成所述三维场景。本公开的实施例能够实现对三维场景的任意编辑,从而提升人机交互的体验。此外,上述操作不依赖于具有大量昂贵标注样本的模型训练,因此节约了成本。

【技术实现步骤摘要】

本公开的实施例涉及计算机科学领域,并且更具体地,涉及生成三维场景的方法、电子设备和计算机程序产品


技术介绍

1、深度学习技术在各个领域得到了广泛应用,包括三维场景处理。使用深度学习进行三维新视图合成已经开始显示出较大前景,其基本思想是使用深度卷积神经网络来学习隐式表示。当前的图像生成模型已被证明有望基于二位图像合成三维视图。但是,这些图像生成模型提供很少或不提供交互式的三维场景编辑。例如,传统的图像生成模型无法接受用户的编辑指令来定制或修改三维场景。为了能够实现基于用户的编辑指令的三维场景编辑,需要训练更加复杂的图像生成模型,并且需要准备昂贵的数据注释。


技术实现思路

1、本公开的实施例提供了用于生成三维场景的方案。

2、在本公开的第一方面中,提供了一种生成三维场景的方法。该方法可以包括从多个二维源图像中获取源图像特征,所述多个二维源图像与要生成的所述三维场景相关联。该方法还可以包括从用户输入的针对所述三维场景的编辑指令中获取编辑特征,所述编辑特征中的每个特征分别与所述源图像特征中的每个特征组成本文档来自技高网...

【技术保护点】

1.一种生成三维场景的方法,包括:

2.根据权利要求1所述的方法,其中所述编辑指令至少包括编辑图像,所述方法还包括:

3.根据权利要求1所述的方法,其中获取所述源图像特征包括:

4.根据权利要求3所述的方法,其中所述编辑指令包括编辑图像,获取所述编辑特征包括:

5.根据权利要求3所述的方法,其中所述编辑指令包括编辑文本和编辑图像,获取所述编辑特征包括:

6.根据权利要求1所述的方法,其中所述多个二维源图像指示与三维场景相关联的拍摄角度和所述三维场景中的至少一个对象的三维坐标。

7.根据权利要求6所述的方法,其中生成所...

【技术特征摘要】

1.一种生成三维场景的方法,包括:

2.根据权利要求1所述的方法,其中所述编辑指令至少包括编辑图像,所述方法还包括:

3.根据权利要求1所述的方法,其中获取所述源图像特征包括:

4.根据权利要求3所述的方法,其中所述编辑指令包括编辑图像,获取所述编辑特征包括:

5.根据权利要求3所述的方法,其中所述编辑指令包括编辑文本和编辑图像,获取所述编辑特征包括:

6.根据权利要求1所述的方法,其中所述多个二维源图像指示与三维场景相关联的拍摄角度和所述三维场景中的至少一个对象的三维坐标。

7.根据权利要求6所述的方法,其中生成所述三维场景包括:

8.根据权利要求1所述的方法,其中所述编辑指令用于指示执行如下编辑操作中的至少一个:

9.一种电子设备,包括:

10.根据权利要求9所述的设备,其中所述编辑指令至少包括编辑图像,所述动作还包括:

11.根据权利要求9所述的设备,其中获取所述源图像特征包括:

12.根据权利要求11所述的设备...

【专利技术属性】
技术研发人员:刘志松王子嘉侯安州贾真
申请(专利权)人:戴尔产品有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1