【技术实现步骤摘要】
利用大数据进行数据收集的防丢失系统
本专利技术涉及一种数据防丢失系统，具体涉及利用大数据进行数据收集的防丢失系统。
技术介绍
随着大数据时代的来临，用户群体的迅速扩张，用户对数据的稳定性、可靠性和安全性的要求越来越高。数据采集处理和存储服务是配电自动化系统的基本功能，也是实现馈线故障自动处理、实时拓扑分析和电网动态着色等高级应用的基础。而在大容量情况下进行压力测试，即短时间内模拟大量遥信和遥测变化，就有可能导致配电自动化系统丢失实时数据，此时要进行计算机节点或通讯链路的切换，切换过程中一般也会丢失实时数据。常见的用于配电自动化系统防止数据丢失的方法是利用数据缓存技术，该技术可在一定程度上缓解计算机节点或通讯链路的切换过程中丢失实时信息的情况，但难点是缓存时间的选择：缓存的时间过长，会对系统性能造成较大的影响，而缓存时间过短又可能导致实时信息丢失。另外，用于数据存储的商用数据库异常，也会造成历史数据丢失。
技术实现思路
本专利技术所要解决的技术问题是目前的数据收集时，不能够有效对数据来源进行备份存储，对数据...
【技术保护点】
1.利用大数据进行数据收集的防丢失系统，包括数据采集模块、信息过滤模块、数据存储模块、日志备份模块、安全监控模块和数据溢出警示模块，所述数据采集模块在网络上进行目标数据的采集，并将采集数据发送至信息过滤模块，所述信息过滤模块将数据采集模块的数据进行整理并分类，将分类后的数据发送至安全监控模块和数据存储模块，所述数据存储模块将数据资料进行存储保存，所述日志备份模块在数据存储模块接入资料时，从数据存储模块内调取接入数据来源信息，并将其来源信息进行备份存储，所述安全监控模块对数据采集模块采集的数据进行监控，将异常的采集数据进行隔离，所述数据溢出警示模块在数据存储模块存储量达到总存...
【技术特征摘要】
1.利用大数据进行数据收集的防丢失系统，包括数据采集模块、信息过滤模块、数据存储模块、日志备份模块、安全监控模块和数据溢出警示模块，所述数据采集模块在网络上进行目标数据的采集，并将采集数据发送至信息过滤模块，所述信息过滤模块将数据采集模块的数据进行整理并分类，将分类后的数据发送至安全监控模块和数据存储模块，所述数据存储模块将数据资料进行存储保存，所述日志备份模块在数据存储模块接入资料时，从数据存储模块内调取接入数据来源信息，并将其来源信息进行备份存储，所述安全监控模块对数据采集模块采集的数据进行监控，将异常的采集数据进行隔离，所述数据溢出警示模...
还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。