一种基于草图的三维媒体资产生成方法及系统技术方案

技术编号:45058573 阅读:11 留言:0更新日期:2025-04-22 17:41
一种基于草图的三维媒体资产生成方法及系统,涉及三维媒体资产生成领域。解决了现有的从草图到3D资产生成过程中,因缺少风格化信息的有效融入与处理机制,而难以满足用户日益增长的多样化设计理念需求的问题。所述方法包括:采用扩散模型生成风格化参考图;并输入至3D扩散模型中,计算风格化参考图与对应视角下的3D渲染图的颜色损失和透明度损失;采用水平和垂直环绕的相机投影方法,生成不同视角且风格高度一致的引导图像;对所生成的不同视角的引导图像进行风格优化;对所生成风格高度一致的引导图像进行几何相似性优化,基于上述步骤完成从草图到三维媒体资产的生成。该方法及系统同样适用于三维媒体创作领域。

【技术实现步骤摘要】

本专利技术涉及三维媒体资产生成,具体涉及一种基于草图的三维媒体资产生成方法及系统


技术介绍

1、在当今科技飞速发展的时代背景下,图像到3d生成技术已然实现了令人瞩目的突破性进展。借助一系列复杂且先进的算法与模型体系,自然图像得以通过特定的转换流程被转化为极为精细、结构复杂且具有一定细节表现力的3d资产。这一技术成果无疑在诸多领域,如影视特效制作、虚拟现实体验构建以及3d打印设计等方面,展现出了巨大的应用潜力和创新驱动力。

2、然而,当我们将目光聚焦于现实应用场景时,却不难发现诸多棘手的问题。无论是那些缺乏专业图像素材资源库和图像处理技能的非专业用户,还是在设计领域深耕细作、经验丰富的专业设计师,在开展实际创作项目的过程中,常常会陷入难以获取到理想图像样本的困境。这种理想图像样本,不仅要求在内容主题上高度契合设计意图,还需在图像的清晰度、色彩准确性、构图合理性等多个维度达到较高的标准。由于此类理想图像样本的稀缺性,使得他们在表达自身独特的设计灵感时,不得不更多地依赖于一种更为原始且直观的方式,即草图绘制。

3、草图,作为一种以简单线本文档来自技高网...

【技术保护点】

1.一种基于草图的三维媒体资产生成方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于草图的三维媒体资产生成方法,其特征在于,步骤1采用扩散模型生成风格化参考图中包括前向扩散和反向去噪的步骤。

3.根据权利要求2所述的基于草图的三维媒体资产生成方法,其特征在于,所述扩散模型基于特征调制结构实现,所述特征调制包括一个双流编码器和一个单流解码器。

4.根据权利要求3所述的基于草图的三维媒体资产生成方法,其特征在于,所述双流编码器由两个参数共享的U-Net编码器组成,所述单流解码器基于U-Net解码器结构实现。

5.根据权利要求1所述的...

【技术特征摘要】

1.一种基于草图的三维媒体资产生成方法,其特征在于,所述方法包括:

2.根据权利要求1所述的基于草图的三维媒体资产生成方法,其特征在于,步骤1采用扩散模型生成风格化参考图中包括前向扩散和反向去噪的步骤。

3.根据权利要求2所述的基于草图的三维媒体资产生成方法,其特征在于,所述扩散模型基于特征调制结构实现,所述特征调制包括一个双流编码器和一个单流解码器。

4.根据权利要求3所述的基于草图的三维媒体资产生成方法,其特征在于,所述双流编码器由两个参数共享的u-net编码器组成,所述单流解码器基于u-net解码器结构实现。

5.根据权利要求1所述的基于草图的三维媒体资产生成方法,其特征在于,步骤2中计算风格化参考图与对应视角下的3d渲染图的颜色损失和透明度损失的方法为:

...

【专利技术属性】
技术研发人员:范晓鹏荆东东王兴涛
申请(专利权)人:哈尔滨工业大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1