System.ArgumentOutOfRangeException: 索引和长度必须引用该字符串内的位置。 参数名: length 在 System.String.Substring(Int32 startIndex, Int32 length) 在 zhuanliShow.Bind()
【技术实现步骤摘要】
本专利技术涉及数字化电力数据管理,尤其是涉及一种数字化电力数据管理方法及系统。
技术介绍
1、随着电力信息化发展,产生越来越多的信息化电力数据,需要将大量数据添加到数据库中进行保存,然后由上层应用程序提取并用于数据挖掘,科学计算以及报告和图像的生成等。将这些庞大的数据量一次存储在不同的关系数据库报告表单中是非常耗时的,并且从不同的关系数据库中提取这些数据并不容易报告表格。不同部门的信息系统彼此分离,导致数据孤岛从企业的中心角度分散到整个组织。现有技术中的电力数据在采集并上传后没有形成统一的工作平台,无法有序并有效的管理电力数据,从而导致各台区以及供电所的数据管理较为混乱,给工作人员查阅和管理带来了极大的困扰。
技术实现思路
1、本专利技术旨在至少解决现有技术中存在的技术问题之一。为此,本专利技术提出一种数字化电力数据管理方法及系统,通过统一数据管理,能够保证数据的实效性,提高工作效率。
2、第一方面,本专利技术实施例提供了一种数字化电力数据管理方法,所述数字化电力数据管理方法包括:
3、将源业务系统获取的实时电力数据和非实时电力数据传输至数字化应用平台,所述实时电力数据通过卡夫卡同步至所述数字化应用平台,所述非实时电力数据通过定时抽取和计算,将计算后的数据传输至所述数字化应用平台;
4、将所述实时电力数据和所述非实时电力数据存储至所述数字化应用平台中的数据库;
5、通过所述数字化应用平台中的数据可视化工具展示所述实时电力数据和所述非实
6、与现有技术相比,本专利技术第一方面具有以下有益效果:
7、本方法通过将源业务系统获取的实时电力数据和非实时电力数据传输至数字化应用平台,实时电力数据通过卡夫卡同步至数字化应用平台,非实时电力数据通过定时抽取和计算,将计算后的数据传输至数字化应用平台,通过kafka实时接入,能过确保基层人员使用过程中数据的时效性;将电力数据存储至数字化应用平台中的数据库,通过数字化应用平台中的数据可视化工具展示电力数据,并对异常的电力数据进行预警提醒,本方法统一了数据获取、数据存储、数据展示和数据预警的数据管理,能够保证数据的实效性,提高工作效率。
8、根据本专利技术的一些实施例,所述实时电力数据包括遥测数据、遥信数据和数据库存储数据,所述实时电力数据通过卡夫卡同步至所述数字化应用平台,包括:
9、将所述遥测数据和所述遥信数据直接通过卡夫卡消息推送至所述数字化应用平台;
10、将所述数据库存储数据通过数据复制服务进行数据抓取,并将抓取后的数据库存储数据进行数据回放;
11、将数据回放后的数据库存储数据通过卡夫卡消息通道推送至所述数字化应用平台。
12、根据本专利技术的一些实施例,所述非实时电力数据通过定时抽取和计算,将计算后的数据传输至所述数字化应用平台,包括:
13、通过dayu-cdm定时抽取所述非实时电力数据并发送至pg数据库;
14、对计算简单的所述数字化应用平台中的数据库,采用dayu-cdm数据开发从所述pg数据库中抽取、计算所述非实时电力数据生成结果表,并将所述结果表推送至所述数字化应用平台;
15、对计算复杂的所述数字化应用平台中的数据库,通过数据挖掘分析ai进行流程开发调用分布式计算系统对所述非实时电力数据进行计算处理,并将计算结果推送至所述数字化应用平台。
16、根据本专利技术的一些实施例,所述数字化应用平台中的数据库包括物联网时序库和rds数据库,所述将所述实时电力数据和所述非实时电力数据存储至所述数字化应用平台中的数据库,包括:
17、通过卡夫卡将所述实时电力数据存储至所述物联网时序库;
18、通过python脚本,从所述物联网时序库中获取对应的实时电力数据,并根据所述对应的实时电力数据计算对应的指标,将所述指标存储至所述rds数据库中;
19、通过定时抽取、计算所述非实时电力数据后,将所述结果表和所述计算结果存储至所述rds数据库中。
20、根据本专利技术的一些实施例,所述通过所述数字化应用平台中的数据可视化工具展示所述实时电力数据和所述非实时电力数据,并对异常的电力数据进行预警提醒,包括:
21、通过所述数据可视化工具读取所述rds数据库中的所述实时电力数据和所述非实时电力数据,并对所述实时电力数据和所述非实时电力数据进行展示;
22、通过所述数据可视化工具对异常的电力数据进行判断,并采用表单组件和js组件对所述异常的电力数据进行可视化图形展示;
23、对所述异常的电力数据进行预警提醒,并通过js开发将预警提醒的数据通过卡夫卡传输至所述源业务系统中的应用程序。
24、第二方面,本专利技术实施例还提供了一种数字化电力数据管理系统,所述数字化电力数据管理系统包括:
25、源业务子系统,用于获取实时电力数据和非实时电力数据,并将所述实时电力数据通过卡夫卡同步至数字化应用平台,以及将所述非实时电力数据通过定时抽取至所述数字化应用平台;
26、数据中台子系统,用于通过卡夫卡消息通道将所述实时电力数据存储至所述数字化应用平台中的数据库;所述数据中台子系统还用于通过dayu-cdm定时抽取所述非实时电力数据,并对所述非实时电力数据进行计算,将计算后的数据传输至所述数字化应用平台;
27、所述数字化应用平台,用于将获取的所述实时电力数据和所述非实时电力数据存储至所述数字化应用平台中的数据库;所述数字化应用平台还用于通过所述数字化应用平台中的数据可视化工具展示所述电力数据,并对异常的电力数据进行预警提醒。
28、与现有技术相比,本专利技术第二方面具有以下有益效果:
29、本系统通过源业务子系统获取实时电力数据和非实时电力数据,并将实时电力数据通过卡夫卡同步至数字化应用平台,以及将非实时电力数据通过定时抽取至数字化应用平台,通过kafka实时接入,能过确保基层人员使用过程中数据的时效性;数据中台子系统通过卡夫卡消息通道将实时电力数据存储至数字化应用平台中的数据库,数据中台子系统还用于通过dayu-cdm定时抽取非实时电力数据,并对非实时电力数据进行计算,将计算后的数据传输至数字化应用平台,通过有效的存储数据,能够帮助工作人员有效查阅和管理;数字化应用平台将获取的实时电力数据和非实时电力数据存储至数字化应用平台中的数据库;数字化应用平台还用于通过数字化应用平台中的数据可视化工具展示电力数据,并对异常的电力数据进行预警提醒,通过可视化工具展示电力数据,能够提高数据查阅效率,对异常的电力数据进行预警提醒能够提高工作的效率和质量。本系统构建了数据获取、数据存储、数据展示和数据预警的数据管理系统,通过统一的数据管理系统能够保证数据的实效性,提高工作效率。
30、根据本专利技术的一些实施例,所述源业务子系统包括实时测量中心、采集单元、营销系统数据库、供服系统本文档来自技高网...
【技术保护点】
1.一种数字化电力数据管理方法,其特征在于,所述数字化电力数据管理方法包括:
2.根据权利要求1所述的数字化电力数据管理方法,其特征在于,所述实时电力数据包括遥测数据、遥信数据和数据库存储数据,所述实时电力数据通过卡夫卡同步至所述数字化应用平台,包括:
3.根据权利要求1所述的数字化电力数据管理方法,其特征在于,所述非实时电力数据通过定时抽取和计算,将计算后的数据传输至所述数字化应用平台,包括:
4.根据权利要求3所述的数字化电力数据管理方法,其特征在于,所述数字化应用平台中的数据库包括物联网时序库和RDS数据库,所述将所述实时电力数据和所述非实时电力数据存储至所述数字化应用平台中的数据库,包括:
5.根据权利要求4所述的数字化电力数据管理方法,其特征在于,所述通过所述数字化应用平台中的数据可视化工具展示所述实时电力数据和所述非实时电力数据,并对异常的电力数据进行预警提醒,包括:
6.一种数字化电力数据管理系统,其特征在于,所述数字化电力数据管理系统包括:
7.根据权利要求6所述的数字化电力数据管理系统,其特
8.根据权利要求7所述的数字化电力数据管理系统,其特征在于,所述数据中台子系统包括数据抓取单元、数据回放单元、DAYU-CDM抽取组件以及PG数据库,其中:
9.根据权利要求8所述的数字化电力数据管理系统,其特征在于,所述数据中台子系统还包括第一计算单元和第二计算单元,其中:
10.根据权利要求9所述的数字化电力数据管理系统,其特征在于,所述数字化应用平台中的数据库包括物联网时序库和RDS数据库,其中:
...【技术特征摘要】
1.一种数字化电力数据管理方法,其特征在于,所述数字化电力数据管理方法包括:
2.根据权利要求1所述的数字化电力数据管理方法,其特征在于,所述实时电力数据包括遥测数据、遥信数据和数据库存储数据,所述实时电力数据通过卡夫卡同步至所述数字化应用平台,包括:
3.根据权利要求1所述的数字化电力数据管理方法,其特征在于,所述非实时电力数据通过定时抽取和计算,将计算后的数据传输至所述数字化应用平台,包括:
4.根据权利要求3所述的数字化电力数据管理方法,其特征在于,所述数字化应用平台中的数据库包括物联网时序库和rds数据库,所述将所述实时电力数据和所述非实时电力数据存储至所述数字化应用平台中的数据库,包括:
5.根据权利要求4所述的数字化电力数据管理方法,其特征在于,所述通过所述数字化应用平台中的数据可视化工具展示所述实时电力数据和所述非实时...
【专利技术属性】
技术研发人员:贾博,胡建军,李斌,吴双,于烨,张波,赵中英,秦振威,谢一德,吴宗后,
申请(专利权)人:国网宁夏电力有限公司信息通信公司,
类型:发明
国别省市:
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。