基于增强现实技术的展示系统及方法技术方案

本申请涉及增强现实领域，提供了一种基于增强现实技术的展示系统及方法，其首先获取虚拟场景图像和真实场景图像并进行场景图像语义级特征融合，同步获取用户交互意图的自然语言描述进行语义理解，接着通过提取虚实场景的语义级特征编码表示，结合自然语言描述的多粒度语义嵌入，利用递归式跨模态注意力机制逐层强化用户意图表征，最终生成与场景上下文高度适配的交互画面。这样，通过跨模态层级交互递归机制，突破了传统单模态意图识别的局限性，实现了动态场景语义与用户语言意图的深度耦合，为高沉浸感AR交互提供了新的技术路径，提升了用户的参与感。

【技术实现步骤摘要】

本申请涉及增强现实的，且更为在本申请的实施例中，涉及一种基于增强现实技术的展示系统及方法。

技术介绍

1、近年来，增强现实（ar）技术通过虚实融合的特性，在工业、教育、医疗、娱乐等领域展现出巨大潜力，其核心在于将计算机生成的虚拟信息（如图像、3d模型）与真实环境实时叠加，形成多模态交互体验。然而，现有ar系统在用户意图理解层面仍面临关键挑战：传统方法多依赖单一模态（如手势识别或语音指令）推断用户意图，忽略了虚实场景的上下文语义对交互行为的动态约束作用，这导致用户意图与虚实场景的语义割裂，对用户交互意图理解准确率受限，尤其在复杂场景中易产生歧义反馈。

2、例如，在虚拟商品展示场景中，用户可能通过自然语言描述（如“将红色沙发放在靠窗位置”）表达交互意图，但系统需同时解析真实场景中的窗户位置、空间布局，以及虚拟沙发模型的特征，才能生成符合用户预期的画面。现有技术往往独立处理虚实场景信息，或仅通过简单特征拼接实现多模态融合，难以捕捉跨场景的语义关联性。此外，自然语言交互的模糊性与场景动态性进一步加剧了意图理解的难度。

3、因此，期望一种优化本文档来自技高网...

【技术保护点】

1.一种基于增强现实技术的展示系统，其特征在于，包括：

2.根据权利要求1所述的基于增强现实技术的展示系统，其特征在于，所述场景语义联合编码模块，包括：

3.根据权利要求2所述的基于增强现实技术的展示系统，其特征在于，所述场景图像语义级特征提取单元，用于：分别将所述虚拟场景图像和所述真实场景图像通过基于金字塔网络的场景语义特征提取器以得到所述虚拟场景图像特征编码图和所述真实场景图像特征编码图。

4.根据权利要求3所述的基于增强现实技术的展示系统，其特征在于，所述交互意图语义理解模块，用于：对所述用户交互意图的自然语言描述进行基于嵌入编码的语义理解以得到...

【技术特征摘要】

1.一种基于增强现实技术的展示系统，其特征在于，包括：

2.根据权利要求1所述的基于增强现实技术的展示系统，其特征在于，所述场景语义联合编码模块，包括：

3.根据权利要求2所述的基于增强现实技术的展示系统，其特征在于，所述场景图像语义级特征提取单元，用于：分别将所述虚拟场景图像和所述真实场景图像通过基于金字塔网络的场景语义特征提取器以得到所述虚拟场景图像特征编码图和所述真实场景图像特征编码图。

4.根据权利要求3所述的基于增强现实技术的展示系统，其特征在于，所述交互意图语义理解模块，用于：对所述用户交互意图的自然语言描述进行基于嵌入编码的语义理解以得到用户交互意图语义嵌入编码向量作为所述用户交互意图语义嵌入编码表示。

5.根据权利要求4所述的基于增强现实...

【专利技术属性】
技术研发人员：张先，
申请(专利权)人：上海合壹未来文化科技有限公司，
类型：发明
国别省市：