一种面向电力物资业务场景的多模态人机交互系统技术方案

本发明专利技术提供一种面向电力物资业务场景的多模态人机交互系统，数据收集处理模块用于收集业务数据、场景数据以及电力物资数据，将数据信息进行储存；根据调用指令，调取相应数据；算法引擎模块用于对数据进行语义解析，支撑应用模块各类应用；应用模块用于提供基于电力物资业务应用程序。系统可以通过形象逼真、生动活泼的AI虚拟人与供应商进行实时语音互动，以代替传统人工服务的方式，减轻工作人员工作量，提高服务效率。用户可以直接以语音交互的方式与虚拟人进行互动。针对电力物资业务场景，业务专区主要有招投标业务、合同处理、供应商信息处理等应用，通过B/S部署模式调用数据中心数据，并协助供应商完成业务办理。并协助供应商完成业务办理。并协助供应商完成业务办理。

【技术实现步骤摘要】
一种面向电力物资业务场景的多模态人机交互系统


[0001]本专利技术涉及电力业务数据
，尤其涉及一种面向电力物资业务场景的多模态人机交互系统。

技术介绍

[0002]从第一台电脑出现到互联网时代到来之前，人与计算机的交互已经经历了早期手工作业阶段、作业控制语言及命令交互语言阶段、图形用户界面阶段、网络用户界面。目前人机交互技术正朝着拟人化、智能化、自然化、实体化发展，利用人的多种感觉和动作进行多模态人机交互越来越成为主流。
[0003]目前电力物资供应链服务主要依赖于人工作业，存在业务工作量大、流程复杂、逻辑简单、交互模式单一等问题，物资供应业务办理效率及服务水平有待提高。因此，如何利用基于数字虚拟人的多模态人机交互，提升交互效率，缩短业务办理时间，降低人工成本投入是当前亟待解决的技术问题。

技术实现思路

[0004]本专利技术提供一种面向电力物资业务场景的多模态人机交互系统，系统通过语义解析准确推理用户意图，精准执行业务流程，同时借助AI虚拟人可以起到缩短业务办理时间，降低人工成本投入。/>[0005]系统本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种面向电力物资业务场景的多模态人机交互系统，其特征在于，包括：数据收集处理模块、算法引擎模块以及应用模块；所述数据收集处理模块用于收集业务数据、场景数据以及电力物资数据，将数据信息进行储存；根据调用指令，调取相应数据；所述算法引擎模块用于对数据进行语义解析，支撑应用模块各类应用；所述应用模块用于提供基于电力物资业务应用程序。2.根据权利要求1所述的面向电力物资业务场景的多模态人机交互系统，其特征在于，数据收集处理模块包括：外部数据收集单元、数据库单元以及数据中心单元；外部数据收集单元用于收集用户交互信息，收集方式包括：通过视频采集交互信息，或者通过声音采集交互信息，或者通过触摸采集交互信息，或通过鼠标键盘采集交互信息；数据库单元用于存储收集用户交互信息和训练更新模型；数据中心单元用于存储业务相关数据，作为业务办理数据来源。3.根据权利要求1所述的面向电力物资业务场景的多模态人机交互系统，其特征在于，还包括：数据库以及电力业务数据处理模块；电力业务数据处理模块用于在数据库中构建电力业务信息之间的关联关系，构建关联网图；分析电力业务信息，从中提取出具有实现功能的逻辑关系，或者具有前后执行顺序逻辑关系，或具有时间前后发展关系的电力业务信息，并在关联网图中将电力业务信息配置相互之间的逻辑关系图；将具有指向关系的电力业务信息配置为多元电力业务矩阵，将多元电力业务矩阵配置到预设深度神经网络所构建的电力业务逻辑关系图，得到包含各种电力业务信息之间的有向关系的电力服务信息；按照遍历顺序分析电力业务信息与电力业务信息之间的电力业务有向关系图，并将有向关系配置成电力特征值。4.根据权利要求3所述的面向电力物资业务场景的多模态人机交互系统，其特征在于，电力业务数据处理模块还用于预先训练多层深度神经网络，获取系统中的历史电力业务信息，将获取的电力业务信息进行匹配得到电力业务信息与电力业务信息之间的电力业务有向关系图，通过构建的电力业务有向关系图，将电力业务有向关系做成多元电力业务矩阵，将相邻采样时刻的多元电力业务矩阵作为多层深度神经网络的输入和输出；多层深度神经网络包括脉冲神经网络、卷积神经网络、循环神经网络。5.根据权利要...

【专利技术属性】
技术研发人员：邓努波，刘珮，张丽娟，陈丽娟，徐世阳，向洪伟，巫俊洁，邓燕晶，张建华，
申请(专利权)人：国网重庆市电力公司国网重庆市电力公司物资分公司，
类型：发明
国别省市：