问答信息生成方法、装置、计算机设备及可读存储介质制造方法及图纸

技术编号:44586028 阅读:16 留言:0更新日期:2025-03-14 12:46
本申请提供了一种问答信息生成方法、装置、计算机设备及可读存储介质,方法包括:获取待回答的提问信息,提问信息至少包括第一图像信息;对第一图像信息进行图像处理,获取第一图像信息对应的第二图像信息;第二图像信息的分辨率低于第一图像信息;将第一图像信息输入至预训练的第一编码器,获取第一图像信息对应的特征图信息;将第二图像信息输入至预训练的第二编码器,获取第二图像信息对应的视觉嵌入信息;根据视觉嵌入信息在特征图信息中进行查询,以基于自注意力机制在特征图信息中获取视觉嵌入信息对应的相关信息;根据相关信息生成提问信息对应的回答信息,完成对提问信息的回答。

【技术实现步骤摘要】

本申请涉及机器学习,尤其涉及一种问答信息生成方法、装置、计算机设备及可读存储介质


技术介绍

1、随着互联网技术的迅猛发展,智能客服系统在各种行业中的应用逐渐普及。传统的智能客服系统主要依赖于文本信息的处理,通过自然语言处理(nlp)技术来理解用户的问题并提供相应的答案。当下,用户在与客服系统互动时,往往会上传图像、视频等多模态数据,以更直观地表达他们的需求或问题。

2、然而,传统的智能客服仍存在一些限制,例如功能单一、自动化水平有限、应对紧急情况的能力不足、个性化服务能力有限、用户体验有待提高以及人力成本高昂等。这些问题限制了智能客服在处理复杂业务和满足多样化客户需求时的表现。

3、因此,亟需一种面向多模态数据的问答信息生成方法,以提升方法所应用的智能客服的表现。


技术实现思路

1、本申请提供了一种问答信息生成方法、装置、计算机设备及可读存储介质,旨在解决传统的智能客服仍存在一些限制,例如功能单一、自动化水平有限、应对紧急情况的能力不足、个性化服务能力有限、用户体验有待提高以及人力成本文档来自技高网...

【技术保护点】

1.一种问答信息生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述第一图像信息的分辨率高于预设分辨率;所述对所述第一图像信息进行图像处理,获取所述第一图像信息对应的第二图像信息,包括:

3.根据权利要求1所述的方法,其特征在于,所述第一编码器为卷积神经网络编码器;所述将所述第一图像信息输入至预训练的第一编码器,获取所述第一图像信息对应的特征图信息,包括:

4.根据权利要求1所述的方法,其特征在于,所述第二编码器为视觉变换编码器;所述将所述第二图像信息输入至预训练的第二编码器,获取所述第二图像信息对应的视觉嵌入信息,包括:...

【技术特征摘要】

1.一种问答信息生成方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述第一图像信息的分辨率高于预设分辨率;所述对所述第一图像信息进行图像处理,获取所述第一图像信息对应的第二图像信息,包括:

3.根据权利要求1所述的方法,其特征在于,所述第一编码器为卷积神经网络编码器;所述将所述第一图像信息输入至预训练的第一编码器,获取所述第一图像信息对应的特征图信息,包括:

4.根据权利要求1所述的方法,其特征在于,所述第二编码器为视觉变换编码器;所述将所述第二图像信息输入至预训练的第二编码器,获取所述第二图像信息对应的视觉嵌入信息,包括:

5.根据权利要求1所述的方法,其特征在于,所述根据所述视觉嵌入信息在所述特征图信息中进行查询,以基...

【专利技术属性】
技术研发人员:李俊杰邓怿莹陈闽川王少军
申请(专利权)人:平安科技深圳有限公司
类型:发明
国别省市:

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1