一种流量数据的可视化展示系统、方法、介质和电子设备技术方案

本发明专利技术提供了一种流量数据的可视化展示系统、方法、介质和电子设备，该系统包括：流量数据收集单元，用于从流量缓存中间件的缓存队列中消费第一流量数据，将第一流量数据转换为符合预设数据格式类型的第二流量数据，并将第二流量数据批量插入时序数据库中；流量统计服务单元，用于根据检索请求接入至对应的第二流量数据的统计接口，并根据检索请求从时序数据库中调取对应类型的第二流量数据，并对调取的第二流量数据进行统计，得到统计结果；可视化展示单元，用于对统计结果进行可视化展示。本公开通过引入可视化展示单元，对流量统计服务单元的统计结果进行可视化展示，可以更加直观地看到统计结果，提高了用户体验度。

A visual display system, method, medium and electronic equipment for flow data

【技术实现步骤摘要】
一种流量数据的可视化展示系统、方法、介质和电子设备
本专利技术涉及计算机
，具体而言，涉及一种流量数据的可视化展示系统、方法、介质和电子设备。
技术介绍
工控系统面临着日益严峻的安全风险，工控安全已经提升到国家战略层面，如果可以对网络流量大数据进行有效的分析和存储，并对流量数据进行统计计算，进而利用可视化技术对流量数据进行展现，对整个工控网络设计优化、网络威胁的实时监测、以及安全事件的定位追溯都具有重要意义。传统的基于关系型数据库的schema设计往往基于确定的数据结构(属性列)，无法满足针对灵活的不可以预知属性的动态扩展存储，同时也无法满足对大数据集的复杂逻辑的聚合查询功能；目前比较流行的NOSQL数据库，如Redis，MongoDB等无法满足面对大数据集的聚合分析功能。由于网络流量数据量大、且统计方式与展现方式多样灵活等特征，因此，给流量数据的存储结构设计、统计检索性能、以及灵活易用的界面展现带来了挑战。因此，在长期的研发当中，专利技术人对流量展示方法进行了大量的研究，提出了一种流量展示方法，以解决上述技术问题之一。
技术实现思路
本专利技术的目的在于提供一种流量数据的可视化展示系统、方法、介质和电子设备，能够解决上述提到的至少一个技术问题。具体方案如下：根据本专利技术的具体实施方式，第一方面，本公开提供一种流量数据的可视化展示系统，包括：流量缓存中间件，用于通过多个流量引擎收集流量数据，并将收集到的流量数据缓存至本地磁盘；流量数据收集单元，用于从所述流量缓存中间件的缓存队列中消费第一流量数据，将所述第一流量数据转换为符合预设数据格式类型的第二流量数据，并将所述第二流量数据批量插入所述时序数据库中；所述时序数据库，用于存储和管理所述流量数据收集单元转换得到的所述第二流量数据；流量统计服务单元，用于根据检索请求接入至对应的所述时序数据库存储的第二流量数据的统计接口，并根据所述检索请求从所述时序数据库中调取对应类型的第二流量数据，并对调取的所述第二流量数据进行统计，得到统计结果；可视化展示单元，用于对所述统计结果进行可视化展示。可选的，所述系统还包括：获取单元，用于获取所述第二流量数据的格式类型信息；其中，所述获取单元获取到的所述第二流量数据的所述数据格式类型信息至少包括：属性名信息、类型信息、字段类型信息和对应的描述信息。可选的，可视化展示单元还用于：可视化展示所述第二流量数据的各项数据格式类型信息。可选的，通过所述可视化展示单元对所述第二流量数据的各项数据格式类型信息以地图展示的方式进行可视化展示。可选的，通过所述可视化展示单元对所述第二流量数据的各项数据格式类型信息以表格展示的方式进行可视化展示。可选的，通过所述可视化展示单元对所述第二流量数据的各项数据格式类型信息以图表展示的方式进行可视化展示。根据本专利技术的具体实施方式，第二方面，本专利技术提供一种使用可视化展示系统对流量数据进行可视化展示的方法，包括：从所述流量缓存中间件的缓存队列中消费第一流量数据，将所述第一流量数据转换为符合预设数据格式类型的第二流量数据，并将所述第二流量数据批量插入所述时序数据库中；对所述时序数据库中的所述第二流量数据进行分析，并分析出对应的数据格式类型信息；根据所述数据格式类型信息，通过所述可视化展示单元对所述第二流量数据进行可视化展示；其中，所述数据格式类型信息至少包括：属性名信息、类型信息、字段类型信息和对应的描述信息。可选的，通过所述可视化展示单元对所述第二流量数据的可视化展示方式至少包括：以地图展示的方式、以表格展示的方式和以图表展示的方式。根据本专利技术的具体实施方式，第三方面，本专利技术提供一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上任一项所述的可视化展示的方法。根据本专利技术的具体实施方式，第四方面，本专利技术提供一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如上任一项所述的可视化展示的方法。本专利技术实施例的上述方案与现有技术相比，至少具有以下有益效果：本公开通过提供一种流量数据的可视化展示系统、方法、介质和电子设备，通过引入可视化展示单元，对流量统计服务单元的统计结果进行可视化展示，可以更加直观地看到统计结果，提高了用户体验度。附图说明此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本专利技术的实施例，并与说明书一起用于解释本专利技术的原理。显而易见地，下面描述中的附图仅仅是本专利技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：图1示出了根据本专利技术实施例的流量数据的可视化系统结构示意图；图2示出了根据本专利技术的实施例的流量数据的可视化方法流程图；图3示出了根据本专利技术的实施例的电子设备连接结构示意图。具体实施方式为了使本专利技术的目的、技术方案和优点更加清楚，下面将结合附图对本专利技术作进一步地详细描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本专利技术保护的范围。在本专利技术实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本专利技术。在本专利技术实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义，“多种”一般包含至少两种。应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。应当理解，尽管在本专利技术实施例中可能采用术语第一、第二、第三等来描述……，但这些……不应限于这些术语。这些术语仅用来将……区分开。例如，在不脱离本专利技术实施例范围的情况下，第一……也可以被称为第二……，类似地，第二……也可以被称为第一……。取决于语境，如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的商品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种商品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括本文档来自技高网...

【技术保护点】
1.一种流量数据的可视化展示系统，其特征在于，包括：/n流量缓存中间件，用于通过多个流量引擎收集流量数据，并将收集到的流量数据缓存至本地磁盘；/n流量数据收集单元，用于从所述流量缓存中间件的缓存队列中消费第一流量数据，将所述第一流量数据转换为符合预设数据格式类型的第二流量数据，并将所述第二流量数据批量插入所述时序数据库中；/n所述时序数据库，用于存储和管理所述流量数据收集单元转换得到的所述第二流量数据；/n流量统计服务单元，用于根据检索请求接入至对应的所述时序数据库存储的第二流量数据的统计接口，并根据所述检索请求从所述时序数据库中调取对应类型的第二流量数据，并对调取的所述第二流量数据进行统计，得到统计结果；/n可视化展示单元，用于对所述统计结果进行可视化展示。/n

【技术特征摘要】
1.一种流量数据的可视化展示系统，其特征在于，包括：
流量缓存中间件，用于通过多个流量引擎收集流量数据，并将收集到的流量数据缓存至本地磁盘；
流量数据收集单元，用于从所述流量缓存中间件的缓存队列中消费第一流量数据，将所述第一流量数据转换为符合预设数据格式类型的第二流量数据，并将所述第二流量数据批量插入所述时序数据库中；
所述时序数据库，用于存储和管理所述流量数据收集单元转换得到的所述第二流量数据；
流量统计服务单元，用于根据检索请求接入至对应的所述时序数据库存储的第二流量数据的统计接口，并根据所述检索请求从所述时序数据库中调取对应类型的第二流量数据，并对调取的所述第二流量数据进行统计，得到统计结果；
可视化展示单元，用于对所述统计结果进行可视化展示。


2.根据权利要求1所述的系统，其特征在于，所述系统还包括：
获取单元，用于获取所述第二流量数据的格式类型信息；
其中，所述获取单元获取到的所述第二流量数据的所述数据格式类型信息至少包括：
属性名信息、类型信息、字段类型信息和对应的描述信息。


3.根据权利要求2所述的系统，其特征在于，
可视化展示单元还用于：
可视化展示所述第二流量数据的各项数据格式类型信息。


4.根据权利要求3所述的系统，其特征在于，
通过所述可视化展示单元对所述第二流量数据的各项数据格式类型信息以地图展示的方式进行可视化展示。


5.根据权利要求3所述的系统，其特征在于，
通过所述可视化展示...

【专利技术属性】
技术研发人员：延帅，李太斌，张冲，颜天成，
申请(专利权)人：华能四川水电有限公司，
类型：发明
国别省市：四川;51