【技术实现步骤摘要】
本申请涉及计算机，特别是涉及一种系统交互方法、装置、计算机设备、存储介质和计算机程序产品。
技术介绍
1、目前，计算机系统的交互方式主要是通过固定的界面展示输出，通过导航式的菜单进行组织交互，但这种交互方式受限于系统界面的数量级，当界面超过一定数量级后，用户想快速找到一个界面完成操作会越来越困难。随着通用人工智能技术的成熟，一些基于自然语言处理和图像识别等技术的智能交互方式也逐渐应用于计算机系统中。
2、传统技术中，计算机系统的菜单式交互方式只适合有限数量且逻辑关系简单的功能页面交互，如果功能页面超过一定数量，菜单的组织将非常复杂，层级将增加；用户寻找一个页面的难度将大大增加。该缺陷由菜单式组织的本质原理决定，无法通过优化菜单的不同组合或者位置来改善。另一种聊天机器人的交互方式，通过模拟人与人之间的对话方式提供系统能力，用户通过发送文字，系统通过返回文字来提供计算机系统能力，只能提供只读的文字或者媒体结果，无法让用户进行进一步的交互操作。
3、目前的系统交互方式无法满足海量功能页面的有效组织和有效展示，用户往往需要在复杂的页面中自行寻找页面入口，或者通过对话获得初级的文字回答，无法做进一步的交互操作。
技术实现思路
1、基于此，有必要针对上述技术问题，提供一种能够提高人机交互效率的系统交互方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
2、第一方面，本申请提供了一种计算机系统交互方法，包括：
3、获取多模态信息；多模态信
4、调用通用人工智能引擎对多模态信息进行处理，以获取通用人工智能引擎输出的识别信息；识别信息包括多模态信息的意图识别结果，以及与意图识别结果对应的答复信息；
5、获取识别信息对应的关键信息；关键信息用于表征意图识别结果和答复信息；
6、将关键信息与计算机系统预设的多个应用程序接口进行匹配，在存在与关键信息匹配的应用程序接口的情况下，根据与关键信息匹配的应用程序接口的调用结果，生成第一交互界面；第一交互界面用于显示调用结果。
7、在其中一个实施例中，获取识别信息对应的关键信息，包括：
8、对意图识别结果进行关键字提取，得到第一关键字，以及对答复信息进行关键字提取，得到第二关键字；
9、根据第一关键字和第二关键字，获取第三关键字，作为关键信息。
10、在其中一个实施例中，将关键信息与预设的多个应用程序接口进行匹配，包括：
11、确定各应用程序接口对应的预设关键字，在存在预设关键字与关键信息匹配的情况下，将与关键信息匹配的预设关键字对应的应用程序接口，作为与关键信息匹配的应用程序接口；
12、或者，确定各应用程序接口对应的预设分类标签，采用机器学习分类算法对关键信息进行处理，得到关键信息的预测分类标签，在存在预设分类标签与预测分类标签匹配的情况下，将与预测分类标签匹配的预设分类标签对应的应用程序接口，作为与关键信息匹配的应用程序接口。
13、在其中一个实施例中，根据与关键信息匹配的应用程序接口的调用结果，生成第一交互界面，包括：
14、调用与关键信息匹配的应用程序接口，获取相应的调用数据；
15、根据调用数据，生成人机交互界面代码；
16、根据人机交互界面代码，构建人机交互界面组件；
17、将人机交互界面组件添加至交互界面中的预设区域，得到第一交互界面。
18、在其中一个实施例中，根据与关键信息匹配的应用程序接口的调用结果，生成第一交互界面，包括：
19、调用与关键信息匹配的应用程序接口，获取相应的统一资源定位符；
20、根据统一资源定位符，生成内联框架组件；
21、将内联框架组件添加至交互界面中的预设区域，得到第一交互界面。
22、在其中一个实施例中，将关键信息与预设的多个应用程序接口进行匹配之后，还包括：
23、在不存在与关键信息匹配的应用程序接口的情况下，识别关键信息的异常类型；
24、生成与异常类型对应的异常提示信息；
25、根据异常提示信息，生成第二交互界面；第二交互界面用于指示根据异常提示信息再次输入多模态信息。
26、在其中一个实施例中，识别关键信息的异常类型，包括：
27、识别关键信息的数据格式；
28、根据数据格式，获取关键信息的格式异常信息；
29、对关键信息进行自然语言处理，获取关键信息的内容异常信息和内容缺失信息；
30、根据格式异常信息、内容异常信息和内容缺失信息，确定关键信息的异常类型。
31、第二方面，本申请还提供了一种计算机系统交互装置，包括：
32、获取模块，用于获取多模态信息；多模态信息包括文本信息、图像信息、音频信息或者视频信息中的一种或多种；
33、识别模块，用于调用通用人工智能引擎对多模态信息进行处理，以获取通用人工智能引擎输出的识别信息；识别信息包括多模态信息的意图识别结果，以及与意图识别结果对应的答复信息；
34、处理模块，用于获取识别信息对应的关键信息；关键信息用于表征意图识别结果和答复信息；
35、交互模块，用于将关键信息与计算机系统预设的多个应用程序接口进行匹配，在存在与关键信息匹配的应用程序接口的情况下，根据与关键信息匹配的应用程序接口的调用结果，生成第一交互界面；第一交互界面用于显示调用结果。
36、第三方面，本申请还提供了一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
37、获取多模态信息；多模态信息包括文本信息、图像信息、音频信息或者视频信息中的一种或多种；
38、调用通用人工智能引擎对多模态信息进行处理，以获取通用人工智能引擎输出的识别信息；识别信息包括多模态信息的意图识别结果，以及与意图识别结果对应的答复信息；
39、获取识别信息对应的关键信息；关键信息用于表征意图识别结果和答复信息；
40、将关键信息与计算机系统预设的多个应用程序接口进行匹配，在存在与关键信息匹配的应用程序接口的情况下，根据与关键信息匹配的应用程序接口的调用结果，生成第一交互界面；第一交互界面用于显示调用结果。
41、第四方面，本申请还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：
42、获取多模态信息；多模态信息包括文本信息、图像信息、音频信息或者视频信息中的一种或多种；
43、调用通用人工智能引擎对多模态信息进行处理，以获取通用人工智能引擎输出的识别信息；识别信息包括多模态信息的意图识别结果，以及与意图识别结果对应的答复信息；
44、获取识别信息对应本文档来自技高网...
【技术保护点】
1.一种计算机系统交互方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述获取所述识别信息对应的关键信息，包括：
3.根据权利要求1所述的方法，其特征在于，所述将所述关键信息与预设的多个应用程序接口进行匹配，包括：
4.根据权利要求1所述的方法，其特征在于，所述根据与所述关键信息匹配的应用程序接口的调用结果，生成第一交互界面，包括：
5.根据权利要求1所述的方法，其特征在于，所述根据与所述关键信息匹配的应用程序接口的调用结果，生成第一交互界面，包括：
6.根据权利要求1所述的方法，其特征在于，所述将所述关键信息与预设的多个应用程序接口进行匹配之后，还包括：
7.根据权利要求1所述的方法，其特征在于，所述识别所述关键信息的异常类型，包括：
8.一种计算机系统交互装置，其特征在于，所述装置包括：
9.一种计算机设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
11.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
...【技术特征摘要】
1.一种计算机系统交互方法，其特征在于，所述方法包括：
2.根据权利要求1所述的方法，其特征在于，所述获取所述识别信息对应的关键信息，包括：
3.根据权利要求1所述的方法，其特征在于，所述将所述关键信息与预设的多个应用程序接口进行匹配，包括：
4.根据权利要求1所述的方法，其特征在于，所述根据与所述关键信息匹配的应用程序接口的调用结果，生成第一交互界面，包括：
5.根据权利要求1所述的方法，其特征在于，所述根据与所述关键信息匹配的应用程序接口的调用结果，生成第一交互界面，包括：
6.根据权利要求1所述的方法，其特征在于，所述将所述关键信息与预设的多个应用程序接口进行匹...
【专利技术属性】
技术研发人员：刘文超，
申请(专利权)人：宁波路特斯机器人有限公司，
类型：发明
国别省市：
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。