【技术实现步骤摘要】
一种并行式数据优化统计系统及方法
本专利技术涉及物联网领域中的采集数据加工,具体涉及一种并行式数据优化统计系统及方法。
技术介绍
目前在对电器设备的运行状况进行数据采集时,经常会有对数据点进行统计分析的情况,而传统的统计分析比如计算一日内每小时的数据趋势曲线,就只能将一日内的数据取出,做分组平均,计算量太过集中,很容易造成高计算压力从而不能达到快速稳定的提供统计数据。
技术实现思路
为了解决上述问题,本专利技术提出了一种并行式数据优化统计系统及方法,其在记录数据时就进行部分简单统计已达到尽量不失真的压缩部分时间段数据,已达到在做统计分析时减少数据量。本专利技术的具体技术方案如下:一种并行式数据优化统计系统,包括数据采集系统、前置采集负载系统、数据统计负载系统和数据库,其中:所述前置采集负载系统包括数据接收负载模块、数据传输服务器和前置系统,所述数据接收负载模块用于为数据传输服务器配置负载;所述前置系统包括报文订阅模块和报文解析模块,所述报文订阅模块用于订阅数据传输服务器的相关主题,所述报文解析模块按照指定的报文格式将数据采集系统向数据传输服务器的相关主题发送的数据解析 ...
【技术保护点】
1.一种并行式数据优化统计系统,其特征在于,包括数据采集系统、前置采集负载系统、数据统计负载系统和数据库,其中:所述前置采集负载系统包括数据接收负载模块、数据传输服务器和前置系统,所述数据接收负载模块用于为数据传输服务器配置负载;所述前置系统包括报文订阅模块和报文解析模块,所述报文订阅模块用于订阅数据传输服务器的相关主题,所述报文解析模块按照指定的报文格式将数据采集系统向数据传输服务器的相关主题发送的数据解析,并将解析后的数据导入数据库中;所述数据统计负载系统包括数据统计负载模块和数据统计系统,所述数据统计负载模块用于为数据统计系统配置负载,所述数据统计系统结合从前置采集负 ...
【技术特征摘要】
1.一种并行式数据优化统计系统,其特征在于,包括数据采集系统、前置采集负载系统、数据统计负载系统和数据库,其中:所述前置采集负载系统包括数据接收负载模块、数据传输服务器和前置系统,所述数据接收负载模块用于为数据传输服务器配置负载;所述前置系统包括报文订阅模块和报文解析模块,所述报文订阅模块用于订阅数据传输服务器的相关主题,所述报文解析模块按照指定的报文格式将数据采集系统向数据传输服务器的相关主题发送的数据解析,并将解析后的数据导入数据库中;所述数据统计负载系统包括数据统计负载模块和数据统计系统,所述数据统计负载模块用于为数据统计系统配置负载,所述数据统计系统结合从前置采集负载系统获得的最新的解析后的数据和从数据库中获得的历史统计数据进行增量统计,并将统计结果以统计数据的形式导入数据库中。2.根据权利要求1所述的并行式数据优化统计系统,其特征在于,所述数据传输服务器为MQTT服务器,MQTT服务器和前置系统使用node.js搭建。3.根据权利要求1所述的并行式数据优化统计系统,其特征在于,所述数据库为NoSQL内存型数据库。4.根据权利要求1所述的并行式数据优化统计系统,其特征在于...
【专利技术属性】
技术研发人员:鲁锦伸,刘亮,
申请(专利权)人:南京大全自动化科技有限公司,南京大全电气研究院有限公司,
类型:发明
国别省市:江苏,32
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。