一种基于采集数据处理的可视化方法技术

本发明专利技术公开了一种基于采集数据处理的可视化方法，所述可视化方法的前期准备包括构建数据库、改造采集运维闭环管理模块、改造用电信息采集系统接口和改造营销系统接口，所述构建数据库包括基础数据处理功能、指标比例计算功能、计量配置功能、硬件分类功能、采集曲线数据实时统计功能、户表漏抄问题解决及排查功能与现有营销业务工单调试接入功能项，所述改造采集运维闭环管理模块包括采集异常工单实时监控、采集异常工单实时派发、采集排发工单归档延期超时的处理，该基于采集数据处理的可视化方法，通过数据指标区间的计算，为采集指标制定提供参考依据，使采集指标的制定更加贴合实际情况，解决采集指标承包过程中的指标计算问题。问题。

【技术实现步骤摘要】
一种基于采集数据处理的可视化方法


[0001]本专利技术涉及用电信息采集数据的可视化展示
，具体为一种基于采集数据处理的可视化方法。

技术介绍

[0002]采集系统在设备不漏抄情况下确保设备对数据曲线的完整读取，但基于曲线采集的前提基础配置要求高，系统数据分析量大，故而进展缓慢，主要因素体现在HPLC模块未能达到全量覆盖；电能表参数不正确(用户类型、通讯规约、时钟)；集中器是否具备抄曲线的功能；曲线采集任务下发是否正确；系统不达标数据全量分析、分类、下发：常规化的数据对比通报，问题数据是监控跟踪。
[0003]前期设备配置工作量巨大，基于大量设备终端不具备曲线采集功能或未能完整的读取曲线数据，所以前期需将前期设备配置问题尽快解决，而根据现有数据量，我们也需要实时跟进监控现有曲线数据的分析和通报下发，为此，我们提出一种基于采集数据处理的可视化方法。

技术实现思路

[0004]本专利技术的目的在于提供一种基于采集数据处理的可视化方法，以解决上述
技术介绍
中提出的问题。
[0005]为实现上述目的，本专利技术提供如下技术方案：一种基于采集数据处理的可视化方法，所述可视化方法的前期准备包括构建数据库、改造采集运维闭环管理模块、改造用电信息采集系统接口和改造营销系统接口，所述构建数据库包括基础数据处理功能、指标比例计算功能、计量配置功能、硬件分类功能、采集曲线数据实时统计功能、户表漏抄问题解决及排查功能与现有营销业务工单调试接入功能项，所述改造采集运维闭环管理模块包括采集异常工单实时监控、采集异常工单实时派发、采集排发工单归档延期超时的处理，所述改造用电信息采集系统接口包括计量档案数据推送接口、台区用户日漏抄数据推送接口、采集曲线漏抄统计数据推送接口、采集调试工单数据推送接口、市场化用户数据推送接口、台区4G及HPLC覆盖数据推送接口，所述改造营销系统接口包括计量09版表记更换数据推送接口、采集调试待办工单数据推送接口，所述可视化方法包括以下步骤：
[0006]数据导入：批量历史数据接入与处理实施在采集数据分类合理区间模块首次运行时需要部署实施相关脚本，导入海量的历史数据进行模型训练与初始计算；
[0007]增量数据接入与处理实施：部署实施脚本，将增量数据不断导入模块，并进行处理；
[0008]计算机系统安装部署实施：数据指标合理区间计算模块所用计算机的部署实施，包含计算机操作系统安装、安全防护加固、网络调试，基础软件包安装，设备调试；
[0009]基础环境部署实施：数据指标合理区间计算模块的部署，包括模块依赖的各类组件、如神经网络、python、jdk软件部署安装，将计算模块程序、运行软件环境需安装的组件
部署到容器环境中，创建Docker镜像；创建计算模块程序各个模块的部署脚本，梳理依赖的软件环境清单；
[0010]核心算法模块部署实施：数据指标合理区间应用模块核心部分涵盖了数据清洗程序、模型特征因子计算模型、数据分类模型、合理区间计算模型、合理区间模糊评价算法四部分，将上述核心算法模型封装统一部署，并进行调试、升级维护；
[0011]模型优化部署实施：随着数据指标合理区间模块核心算法模型的不断完善，结合应用过程中系统模型的持续迭代，对系统程序、功能进行优化更新，含系统架构、应用功能、技术组套件有优化部署实施。
[0012]优选的，所述可视化方法应用采集监控和指挥应用模块，且采集监控和指挥应用模块技术架构分为接口层、应用层、数据层。
[0013]优选的，所述接口层通过数据中台传输接口协议，采用数据文件格式的方式，从业务系统获取考核指标监控与处理应用模块计算所需的数据。
[0014]优选的，所述应用层包括Spring Boot技术，简化应用的初始搭建过程。
[0015]优选的，所述数据层采用关系型数据库Oracle进行数据存储，通过k
‑
Means聚类、BP神经网络、模糊评价等Al算法对获取的数据进行分析。
[0016]优选的，所述可视化方法的实施工作包括差异分析及方案设计、数据收集及处理、系统部署及配置、系统测试、培训、上线准备及切换、上线试运行支持七个环节，在每个环节进行WBS分解，关键节点将设置任务里程碑，并通过里程碑核查方式作为阶段结束的标志。
[0017]优选的，所述功能项包括采集系统拓展支撑能力的计算、曲线采集成功率的计算、4G覆盖率的计算、公专变台区4G覆盖情况及对应覆盖率的计算、曲线公专变达成数量及达成率的计算、采集异常工单消缺率的计算、采集调试工单处理量的计算、采集调通率及预警情况处理量的计算、日常户表漏抄的处理量的计算、00P台区占比计算、HPLC户数占比计算、00P+HPLC台区占比的计算、整体HPLC户数量的计算、09版表记中市场化用户的数量计算量、09版表记更换进度计算。
[0018]优选的，所述WBS分解采用自上而下的方法，从项目的目标开始，逐级分解项目工作。
[0019]与现有技术相比，本专利技术的有益效果是：该基于采集数据处理的可视化方法通过数据指标区间的计算，为采集指标制定提供参考依据，使采集指标的制定更加贴合实际情况，解决采集指标承包过程中的指标计算问题；
[0020]通过全面的数据分析，可快速定位问题所在，准确的下达问题处理方案，可使现场运维人员精准高效的解决问题，极大提高了工作效率；
[0021]根据采集曲线和户表漏抄的差异，更精准的确定采集指标及问题下发的优先级，科学制定治理计划，有序的指导基层工作人员开展采集问题治理工作；
[0022]通过采集监控指标管控，提供规范化分析模型，实现供电单位规范化管理流程，及时发现问题数据及问题工单，迅速下发反应，从而提高公司的经济效益；
[0023]通过采集监控指标管控，可实时预警异常台区，精准定位异常因素，并且提供异常台区解决方案，避免以往的全方位人工排查时间，降低人工消耗成本；
[0024]提高电力异常工单的解决效率，使发现的问题都能够迅速且有效的解决，提升电网管控力度。现场人员使用掌机直接进行消缺，减少因数据查询不便、工作流程衔接不紧密
造成的工作量，提升工作效率，减少电力资源、自然资源的浪费，提升资源的利用率。
具体实施方式
[0025]下面将结合本专利技术实施例，对本专利技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本专利技术一部分实施例，而不是全部的实施例。基于本专利技术中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本专利技术保护的范围。
[0026]本专利技术提供一种技术方案：一种基于采集数据处理的可视化方法，可视化方法的前期准备包括构建数据库、改造采集运维闭环管理模块、改造用电信息采集系统接口和改造营销系统接口，构建数据库包括基础数据处理功能、指标比例计算功能、计量配置软、硬件分类功能、采集曲线数据实时统计功能、户表漏抄问题解决及排查功能与现有营销业务工单调试接入等15个功能项的开发及实施，改造采集本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种基于采集数据处理的可视化方法，其特征在于，所述可视化方法的前期准备包括构建数据库、改造采集运维闭环管理模块、改造用电信息采集系统接口和改造营销系统接口，所述构建数据库包括基础数据处理功能、指标比例计算功能、计量配置功能、硬件分类功能、采集曲线数据实时统计功能、户表漏抄问题解决及排查功能与现有营销业务工单调试接入功能项，所述改造采集运维闭环管理模块包括采集异常工单实时监控、采集异常工单实时派发、采集排发工单归档延期超时的处理，所述改造用电信息采集系统接口包括计量档案数据推送接口、台区用户日漏抄数据推送接口、采集曲线漏抄统计数据推送接口、采集调试工单数据推送接口、市场化用户数据推送接口、台区4G及HPLC覆盖数据推送接口，所述改造营销系统接口包括计量09版表记更换数据推送接口、采集调试待办工单数据推送接口，所述可视化方法包括以下步骤：数据导入：批量历史数据接入与处理实施在采集数据分类合理区间模块首次运行时需要部署实施相关脚本，导入海量的历史数据进行模型训练与初始计算：增量数据接入与处理实施：部署实施脚本，将增量数据不断导入模块，并进行处理：计算机系统安装部署实施：数据指标合理区间计算模块所用计算机的部署实施，包含计算机操作系统安装、安全防护加固、网络调试，基础软件包安装，设备调试；基础环境部署实施：数据指标合理区间计算模块的部署，包括模块依赖的各类组件、如神经网络、python、jdk软件部署安装，将计算模块程序、运行软件环境需安装的组件部署到容器环境中，创建Docker镜像；创建计算模块程序各个模块的部署脚本，梳理依赖的软件环境清单；核心算法模块部署实施：数据指标合理区间应用模块核心部分涵盖了数据清洗程序、模型特征因子计算模型、数据分类模型、合理区间计算模型、合理区间模糊评价算法四部分，将上述核心算法模型封装统一部署，并进行调试、升级维护；模型优化部署实施：随着数据指标合理区间模块核心算法模型的不断完善，结合应用过程中系统模型的持续迭代，对系统程序、功能进行优化更新，含系统架构、应用功...

【专利技术属性】
技术研发人员：龙兵，左常进，董伟，吴飞，陈墨，李霞，
申请(专利权)人：国网湖北省电力有限公司宜昌供电公司，
类型：发明
国别省市：