【技术实现步骤摘要】
本申请涉及数据处理，尤其涉及一种多模态融合的问答方法、系统及电子设备。
技术介绍
1、随着人工智能技术的发展，智能对话系统已经广泛应用于各个领域，比如，客服对话、信息咨询等，智能对话系统已经逐渐取代了传统的人工服务，大大降低了工作人员的工作量。
2、在相关技术中，现有的智能对话系统主要依赖于单一的文本输入进行语义理解并生成对话内容。但仅仅依靠单一的文本输入进行对话内容生成，缺乏对用户情感状态的识别，无法全面捕捉用户情绪，导致在需要基于多模态信息理解用户意图的场景下无法很好的理解用户意图，生成的内容与用户的真实需求存在较大的偏差，使得用户满意度低。并且，在特定的领域(比如，金融领域)，智能对话系统生成的内容可能包含未经验证的金融术语或违规承诺，导致生成的内容违反实时监管条款，不符合金融监管要求。
3、有鉴于此，如何提供一种能够精确理解用户意图，且生成内容合法合规的问答方法是目前亟需解决的技术问题。
技术实现思路
1、本申请实施例提供了一种多模态融合的问答方法、系统及电...
【技术保护点】
1.一种多模态融合的问答方法，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，所述采用注意力机制对所述第一情感特征、所述第二情感特征以及所述第三情感特征进行特征融合，并输出融合情感标签，包括：
3.如权利要求1所述的方法，其特征在于，所述按照多级预设规则逐级依次对所述问答结果进行验证，包括：
4.如权利要求1或3所述的方法，其特征在于，若所述问答结果验证不通过，则还包括：
5.如权利要求1所述的方法，其特征在于，所述基于所述融合情感标签以及历史用户画像生成问答结果，包括：
6.如权利要求4...
【技术特征摘要】
1.一种多模态融合的问答方法，其特征在于，所述方法包括：
2.如权利要求1所述的方法，其特征在于，所述采用注意力机制对所述第一情感特征、所述第二情感特征以及所述第三情感特征进行特征融合，并输出融合情感标签，包括：
3.如权利要求1所述的方法，其特征在于，所述按照多级预设规则逐级依次对所述问答结果进行验证，包括：
4.如权利要求1或3所述的方法，其特征在于，若所述问答结果验证不通过，则还包括：
5.如权利要求1所述的方法，其特征在于，所述基于所述融合情感标签以及历史用户画像生成问答结果，包括：
6.如权利要求4所述的方法，其特征在于，在所述基于所述合规词对所述问...
【专利技术属性】
技术研发人员：刘斌，
申请(专利权)人：北银金融科技有限责任公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。