基于数据中台的实时流式数据采集与处理的可视化方法技术

本发明专利技术公开了一种基于数据中台的实时流式数据采集与处理的可视化方法，包括三个部分，即主频及重要子信号可视化部分、时域采样可视化部分和异常数据可视化部分，数据中心对实时流式数据的可视化通过主频及重要子信号可视化部分来呈现实时流式数据的主频信号和重要子信号，主频及重要子信号可视化部分通过离散傅里叶变换算法将实时流式数据转换到频域获得主频数据。本发明专利技术可以轻松处理大规模的数据流，既可以有效地存储和展示数据流的主要数据，也可以识别和显示异常数据。

【技术实现步骤摘要】

本专利技术属于数据可视化系统，具体涉及一种基于数据中台的实时流式数据采集与处理的可视化方法。

技术介绍

1、数据中台是在公司数字化转型过程中，对各业务单元业务与数据的沉淀，构建包括数据技术、数据治理、数据运营等数据建设、管理、使用体系，实现数据赋能。数据中台，是新型信息化应用框架体系中的核心，目前，随着数字化转型和数据中台建设的快速推进，国网公司已基本建成企业级统一云服务平台和数据中台，初步实现平台资源和跨专业数据汇聚，海量级数据资源逐渐沉淀于数据中台之上，为数据的分析挖掘与价值变现提供有效来源与强大支撑。然而，电力系统作为一个复杂的实时系统，如何对这些贯穿发电、输电、变电、配电、用电各个环节的实时数据进行可视化分析，发现潜在的优化空间和问题，并基于数据驱动的决策进行运营调整和优化，提升能源利用效率和电力系统的稳定性，是一个迫在眉睫的问题。

2、实时流式数据可视化过程中，存在一些亟需面对的困难，包括：1、数据复杂性，即实时流式数据具有高维度、高速度和大规模的特征，处理和可视化这些复杂数据需要有效的算法和技术，以确保高性能和可扩展性；2、可视化效本文档来自技高网...

【技术保护点】

1.一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：在所述S1中FFT变换公式为：

3.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：在S2中离散小波公式为：

4.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：在S3中k-means算法，余弦距离公式：

5.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于...

【技术特征摘要】

1.一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：包括以下步骤：

2.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：在所述s1中fft变换公式为：

3.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：在s2中离散小波公式为：

4.根据权利要求1所述的一种基于数据中台的实时流式数据采集与处理的可视化方法，其特征在于：在s3中k-means算法，余弦距离公式：

【专利技术属性】
技术研发人员：杜森，仇红剑，陆康，李阳春，
申请(专利权)人：江苏电力信息技术有限公司，
类型：发明
国别省市：