一种基于情感标签驱动的虚拟场景生成方法技术

技术编号:46612062 阅读:1 留言:0更新日期:2025-10-14 21:10
本发明专利技术提供了一种基于情感标签驱动的虚拟场景生成方法,涉及虚拟现实、AI图像生成技术领域,步骤包括:采集当前场景的若干个视角图像,对视角图像中的各物体进行标记;通过情绪标签和AI语言模型设置虚拟场景的生成风格;采用文生图模型以及CUDA+xFormers模型,根据视角图像和生成风格生成新材质图像;采用Python脚本和C++脚本构建材质实例,将材质实例替换新材质图像中的材质;对替换后的新材质图像进行刷新,通过输入情绪标签调整新材质图像的风格,并结合VP设备生成虚拟场景。本方法实现了从用户情绪输入到虚拟场景动态更新的完整闭环,解决了现有技术中虚拟场景缺乏情感响应和材质替换需要人工干预的问题。

【技术实现步骤摘要】

本专利技术涉及虚拟现实、ai图像生成和三维引擎可视化,具体而言,涉及一种基于情感标签驱动的虚拟场景生成方法


技术介绍

1、随着人工智能技术的快速发展,特别是深度学习在计算机视觉和图像生成领域的应用,使得虚拟场景生成技术进入智能化阶段。例如,生成对抗网络(gan)、变分自编码器(vae)等生成模型被用于生成更加逼真、多样化的虚拟场景。同时,强化学习技术也被用于优化虚拟场景中的智能体行为和交互逻辑,使得虚拟场景更加动态和智能。此外,云计算和大数据技术的发展也为虚拟场景生成提供了强大的支持,使得复杂的场景生成和渲染可以在云端完成,用户可以通过网络访问高质量的虚拟场景应用。

2、然而,现有虚拟环境中的材质和视觉风格大多由预设静态资源决定,缺乏对用户实时情感变化的响应能力。尽管已有图生图(image-to-image generation)技术如stablediffusion被用于图像风格迁移,但尚未形成一个闭环:从用户情绪输入→场景图采集→ai图像生成→ unreal engine模型转换、材质替换、调节灯光参数形成可以3d场景的完整链路。此外,现有本文档来自技高网...

【技术保护点】

1.一种基于情感标签驱动的虚拟场景生成方法,其特征在于,包括:

2.根据权利要求1所述的基于情感标签驱动的虚拟场景生成方法,其特征在于,每个所述视角图像包含物体的空间和边界信息,用于后续图像生成及材质映射过程中的区域识别。

3.根据权利要求1所述的基于情感标签驱动的虚拟场景生成方法,其特征在于,将所述视角图像进行区域分割,采用Python 脚本自动识别分割区域中每个独立物品区域,并将每个区域与实际场景中对应的物体名称进行绑定,通过像素颜色的唯一性识别出每一个物体的实例区域,每种颜色代表一个独立的物体实例。

4.根据权利要求1所述的基于情感标签驱动的虚拟...

【技术特征摘要】

1.一种基于情感标签驱动的虚拟场景生成方法,其特征在于,包括:

2.根据权利要求1所述的基于情感标签驱动的虚拟场景生成方法,其特征在于,每个所述视角图像包含物体的空间和边界信息,用于后续图像生成及材质映射过程中的区域识别。

3.根据权利要求1所述的基于情感标签驱动的虚拟场景生成方法,其特征在于,将所述视角图像进行区域分割,采用python 脚本自动识别分割区域中每个独立物品区域,并将每个区域与实际场景中对应的物体名称进行绑定,通过像素颜色的唯一性识别出每一个物体的实例区域,每种颜色代表一个独立的物体实例。

4.根据权利要求1所述的基于情感标签驱动的虚拟场景生成方法,其特征...

【专利技术属性】
技术研发人员:张静方蕾杨帆
申请(专利权)人:河北工程大学
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1