基于AR眼镜的多模态大模型的主动交互系统技术方案

技术编号:42654530 阅读:36 留言:0更新日期:2024-09-06 01:46
本发明专利技术公开了基于AR眼镜的多模态大模型的主动交互系统,涉及增强现实交互技术领域,本发明专利技术包括确定模块、交互分析模块、辅助分析模块及决策模块;确定模块用于根据应用场景和用户需求,选择最适合的主交互模态;收集用户的偏好信息,包括他们对不同交互模态的偏好和使用习惯;本发明专利技术,通过集成多种交互模态,包括视觉、语音、手势和触觉等,显著提升了交互命令的准确性和可靠性,利用先进的数据融合技术和机器学习算法,系统能够智能地处理并整合来自不同模态的信息,从而在复杂或变化的使用环境中做出更加准确的决策,系统能够识别并量化交互命令中的不确定性,通过触发辅助交互模态及时介入,确保了交互的准确性。

【技术实现步骤摘要】

本专利技术涉及增强现实交互,具体为基于ar眼镜的多模态大模型的主动交互系统。


技术介绍

1、随着ar技术的快速发展,用户期望获得更自然、直观的交互体验。然而,现有的ar交互系统多依赖单一的交互方式,如视觉或语音,这在多变的使用环境中可能受限,无法满足用户对于高效、准确交互的需求。此外,单一模态可能因环境噪声、用户行为的变化等因素而降低交互的准确性和可靠性;

2、为了克服单一交互模态的局限,多模态交互系统应运而生,它能够结合视觉、语音、手势等多种交互方式,提供更加丰富和适应性强的用户体验。但是,多模态系统在实际应用中面临着数据融合、模态选择、不确定性处理等技术挑战。如何有效地整合来自不同模态的信息,以及如何在不同场景下智能地选择合适的交互模态,是实现高效多模态交互系统的关键问题。此外,现有系统在处理模糊或不确定的交互命令时,往往缺乏有效的策略来提高交互的准确性。

3、为了解决上述缺陷,现提供技术方案。


技术实现思路

1、本专利技术的目的在于解决现有ar交互系统中单一模态局限性、多模态信息本文档来自技高网...

【技术保护点】

1.基于AR眼镜的多模态大模型的主动交互系统,其特征在于,包括:

2.根据权利要求1所述的基于AR眼镜的多模态大模型的主动交互系统,其特征在于,所述交互分析模块对主交互模态形成的交互命令进行分析的具体步骤如下:

3.根据权利要求2所述的基于AR眼镜的多模态大模型的主动交互系统,其特征在于,所述交互分析模块中识别不确定性或模糊性,准备触发辅助交互模态,当置信度低于阈值时,请求并触发辅助分析模块的具体操作步骤如下:

4.根据权利要求1所述的基于AR眼镜的多模态大模型的主动交互系统,其特征在于,所述辅助分析模块对交互分析模块分析的不确定交互命令通过辅助交互模...

【技术特征摘要】

1.基于ar眼镜的多模态大模型的主动交互系统,其特征在于,包括:

2.根据权利要求1所述的基于ar眼镜的多模态大模型的主动交互系统,其特征在于,所述交互分析模块对主交互模态形成的交互命令进行分析的具体步骤如下:

3.根据权利要求2所述的基于ar眼镜的多模态大模型的主动交互系统,其特征在于,所述交互分析模块中识别不确定性或模糊性,准备触发辅助交互模态,当置信度低于阈值时,请求并触发辅助分析模块的具体操作步骤如下:

4.根据权利要求1所述的基于ar眼镜的多模态大模型的主动交互系统,其特征在于,所述辅助分析模块对交互分析模块分析的不确定交互命令通过辅助交互模态进行确定的具体操作步骤如下:...

【专利技术属性】
技术研发人员:王加芳曹佰鑫古鉴茹忆
申请(专利权)人:杭州李未可科技有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1