下载基于多模态预训练模型的跨模态理解与生成方法和装置的技术资料

文档序号:30639477

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。

本发明提供一种基于多模态预训练模型的跨模态理解与生成方法和装置,方法包括:确定待处理的多模态信息,多模态信息包括图像、文本和音频;将多模态信息输入至多模态预训练模型,学习所述多模态信息的相互关联,得到多模态信息的融合表示,将融合表示输入至理...
该专利属于中国科学院自动化研究所所有,仅供学习研究参考,未经过中国科学院自动化研究所授权不得商用。

详细技术文档下载地址

温馨提示:您尚未登录,请点 登陆 后下载,如果您还没有账户请点 注册 ,登陆完成后,请刷新本页查看技术详细信息。