温馨提示：您尚未登录，请点 登陆 后下载，如果您还没有账户请点 注册 ，登陆完成后，请刷新本页查看技术详细信息。

本发明公开了一种基于多模态大模型的自动化UI交互探索方法，包括如下步骤：(1)收集文本、图像、XML文件和历史操作记录信息，由多模态大模型分析上述信息并生成单步探索动作，通过执行系统实现动作正确识别、转化和执行；(2)向多模态大模型提供执行...
该专利属于浙江大学所有，仅供学习研究参考，未经过浙江大学授权不得商用。

详细技术文档下载地址

温馨提示：您尚未登录，请点 登陆 后下载，如果您还没有账户请点 注册 ，登陆完成后，请刷新本页查看技术详细信息。