【技术实现步骤摘要】
本申请涉及大模型技术、机器学习领域，具体而言，涉及一种多媒体信息的处理方法、系统和电子设备。
技术介绍
1、目前，针对生成式问答系统，通常是利用工作学习的人工智能(artificialintelligence，简称为ai)助手完成对询问信息的答复。随着生成式问答系统的不断发展，在不同场景下，对生成式问答系统又提出了新的要求。需要生成式问答系统可以完成对多媒体信息做笔记、整理访谈等工作。但是，目前大部分的人工智能助手都只是通过内置的触发时机进行调用，用户无法与大语言模型进行主动交互，从而存在无法针对多媒体数据的内容提供个性化回答的技术问题。
2、针对上述的问题，目前尚未提出有效的解决方案。
技术实现思路
1、本申请实施例提供了一种多媒体信息的处理方法、系统和电子设备，以至少解决无法针对多媒体数据的内容提供个性化回答的技术问题。
2、根据本申请实施例的一个方面，提供了一种多媒体信息的处理方法。该方法可以应用于生成式问答系统，可以包括：接收到询问信息；将询问信息改写为用于对多媒体信息执行自定义提问的候选问题，其中，多媒体信息为预先上传至生成式问答系统的内容；从问答数据库中，查询得到与候选问题关联的数据片段，其中，问答数据库中存储至少一组数据片段，数据片段的数据源为多媒体信息；利用大语言模型处理数据片段，生成与询问信息匹配的至少一答复内容。
3、根据本申请实施例的另一个方面，还提供了另一种多媒体信息的处理方法。该方法可以应用于生成式问答系统，可以包括：响
4、根据本申请实施例的另一方面，还提供了一种电子设备，该电子设备可以包括存储器和处理器；存储器用于存储计算机可执行指令，处理器用于执行计算机可执行指令，上述计算机可执行指令被处理器执行时，实现上述任意一项的上述方法。
5、根据本申请实施例的另一方面，还提供了一种处理器，该处理器用于运行程序，其中，在程序运行时执行上述任意一项的上述方法。
6、根据本申请实施例的另一方面，还提供了一种计算机可读存储介质，计算机可读存储介质包括存储的程序，其中，在程序运行时控制存储介质所在设备执行上述任意一项的上述方法。
7、在本申请实施例中，接收到询问信息；将询问信息改写为用于对多媒体信息执行自定义提问的候选问题，其中，多媒体信息为预先上传至生成式问答系统的内容；从问答数据库中，查询得到与候选问题关联的数据片段，其中，问答数据库中存储至少一组数据片段，数据片段的数据源为多媒体信息；利用大语言模型处理数据片段，生成与询问信息匹配的至少一答复内容。也即，在该实施例中当接受到询问信息时，将询问信息改写为执行自定义提问的候选问题，从多媒体信息中确定与候选问题关联的数据片段，利用大语言模型处理数据片段，以得到与询问信息匹配的至少一答复内容，从而实现了可以针对多媒体信息的内容提供个性化回答的技术效果，解决了无法针对多媒体数据的内容提供个性化回答的技术问题。
8、容易注意到的是，上面的通用描述和后面的详细描述仅仅是为了对本申请进行举例和解释，并不构成对本申请的限定。
本文档来自技高网...【技术保护点】
1.一种多媒体信息的处理方法，其特征在于，应用于生成式问答系统，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述将所述询问信息改写为用于对所述多媒体信息执行自定义提问的所述候选问题，包括：
3.根据权利要求1所述的方法，其特征在于，在所述从所述问答数据库中，查询得到与所述候选问题关联的所述数据片段之前，所述方法还包括：
4.根据权利要求3所述的方法，其特征在于，所述将所述文本数据进行切分，得到至少一组所述数据片段，包括：
5.根据权利要求3或4所述的方法，所述从所述问答数据库中，查询得到与所述候选问题关联的数据片段，包括：
6.根据权利要求5所述的方法，其特征在于，所述获取每组所述数据片段与所述候选问题之间的语义相似度，包括：
7.根据权利要求6所述的方法，其特征在于，在确定与所述候选问题关联的数据片段之后，所述方法还包括：
8.根据权利要求1所述的方法，其特征在于，在所述将所述询问信息改写为用于对多媒体信息执行自定义提问的候选问题之后，所述方法还包括：
9.根据权利要求
10.根据权利要求9所述的方法，其特征在于，所述方法还包括：
11.根据权利要求1所述的方法，其特征在于，所述方法还包括：
12.根据权利要求11所述的方法，其特征在于，所述基于所述多组切分文本，构建所述训练数据，包括：
13.根据权利要求11所述的方法，其特征在于，所述基于所述多组切分文本，构建所述训练数据，包括：
14.一种多媒体信息的处理方法，其特征在于，应用于生成式问答系统，包括：
15.一种电子设备，其特征在于，包括：存储器和处理器；所述存储器用于存储计算机可执行指令，所述处理器用于执行所述计算机可执行指令，该计算机可执行指令被处理器执行时实现1-14任意一项方法的步骤。
...【技术特征摘要】
1.一种多媒体信息的处理方法，其特征在于，应用于生成式问答系统，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述将所述询问信息改写为用于对所述多媒体信息执行自定义提问的所述候选问题，包括：
3.根据权利要求1所述的方法，其特征在于，在所述从所述问答数据库中，查询得到与所述候选问题关联的所述数据片段之前，所述方法还包括：
4.根据权利要求3所述的方法，其特征在于，所述将所述文本数据进行切分，得到至少一组所述数据片段，包括：
5.根据权利要求3或4所述的方法，所述从所述问答数据库中，查询得到与所述候选问题关联的数据片段，包括：
6.根据权利要求5所述的方法，其特征在于，所述获取每组所述数据片段与所述候选问题之间的语义相似度，包括：
7.根据权利要求6所述的方法，其特征在于，在确定与所述候选问题关联的数据片段之后，所述方法还包括：
8.根据权利要求...
【专利技术属性】
技术研发人员：樊艳，刘雄，武玉川，黄非，李永彬，
申请(专利权)人：浙江阿里巴巴机器人有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。