一种预警系统的运维流程管理性能优化方法技术方案

本发明专利技术公开了一种预警系统的运维流程管理性能优化方法，可以实现从数据交互和应用响应两个方面，软件、硬件和网络三个层次，对信息安全运行监测预警系统进行了全面的性能优化设计，针对数据交互的优化，主要从高性能技术应用、数据库优化、结构性能优化、数据泛化、采用多线程技术、数据压缩传输、数据缓存、数据访问优化及多层次性能保证优化几个方面做出优化，以实现大数据量交互时能及时响应用户操作，并满足系统的性能要求，在应用响应方面，从UI的响应优化、编程语言的选择、代码性能设计、减少不必要的请求、压缩界面元素几方面考虑优化，确保了系统的高性能。

【技术实现步骤摘要】
一种预警系统的运维流程管理性能优化方法
本专利技术涉及信息安全
，更具体地说，涉及一种预警系统的运维流程管理性能优化方法。
技术介绍
信息作为一种资源,它的普遍性、共享性、增值性、可处理性和多效用性,使其对于人类具有特别重要的意义。信息安全的实质就是要保护信息系统或信息网络中的信息资源免受各种类型的威胁、干扰和破坏,即保证信息的安全性。根据国际标准化组织的定义,信息安全性的含义主要是指信息的完整性、可用性、保密性和可靠性。信息安全是任何国家、政府、部门、行业都必须十分重视的问题,是一个不容忽视的国家安全战略。为保障信息安全，许多机构会选择建立信息安全运行监测预警系统。与工业控制的监控应用不同，信息安全运行监测预警系统涉及的数据具有更加复杂的结构和关系，多样化的采集频率，不同的数据压缩损耗率，还要涉及非数值信息的存储，为了确保信息安全运行监测预警系统的高性能，需要进行系统性能优化，因此，我们提出一种预警系统的运维流程管理性能优化方法。
技术实现思路
针对现有技术中存在的问题，本专利技术的目的在于提供一种预警系统的运维流程管理性能优化方法，它可以实现从数据交互和应用响应两个方面，软件、硬件和网络三个层次，对信息安全运行监测预警系统进行了全面的性能优化设计，针对数据交互的优化，主要从高性能技术应用、数据库优化、结构性能优化、数据泛化、采用多线程技术、数据压缩传输、数据缓存、数据访问优化及多层次性能保证优化几个方面做出优化，以实现大数据量交互时能及时响应用户操作，并满足系统的性能要求，在应用响应方面，从UI的响应优化、编程语言的选择、代码性能设计、减少不必要的请求、压缩界面元素几方面考虑优化，确保了系统的高性能。为解决上述问题，本专利技术采用如下的技术方案。一种预警系统的运维流程管理性能优化方法，包括数据交互优化策略和应用优化策略，所述数据优化策略包括以下步骤：S1、高性能技术应用：应用实时数据过滤链架构，采用分布式数据中心，实现对来自不同采集器监控数据的分布式处理；S2、数据库优化：从物理优化和逻辑优化两个方面对数据库进行优化，数据库性能最关键的因素在于IO，因为操作内存是快速的，但是读写磁盘是速度很慢的，优化数据库最关键的问题在于减少磁盘的IO，因此应该分为物理的和逻辑的优化，物理的是指oracle产品本身的一些优化，逻辑优化是指应用程序级别的优化；S3、结构性能优化：将生产数据与历史数据分离，并进行分布式部署；S4、数据泛化：对挖掘的数据进行统一的规格化，以符合数据库的数据存储要求，并提高数据读取速度，数据库中的数据和对象通常包含原始概念层的细节信息，将数据库中跟任务相关的大型数据集，从相对较低的概念层抽象到较高的概念层，各接口将监控业务数据发送到IT集中运行平台，通过数据解析和泛化以统一的格式存储在IT集中运行监控系统数据库；S5、采用多线程技术：以用户界面线程为主线程，主线程给出系统的集中展示窗口，拥有自己的消息循环，也就是系统的主体部分，并以数据接收线程、数据分析线程为辅线程，数据接收线程负责监控数据，数据分析线程负责集成、分析接收的数据，并进行图例的绘制，多线程技术是为了使系统能够并行地处理多项工作任务而采用的技术，以便提高系统运行效率，每个线程就是系统中的一个处理过程，完成一项工作任务，多线程应用能够充分利用设备硬件资源，高效率的完成计算工作；S6、数据压缩传输：在将数据传输给信息安全运行监测预警系统之前，先对数据进行压缩，可减少网络的数据传输量，从而以更快的速度响应到信息安全运行监测预警系统进行解压；S7、数据缓存：在数据层和应用层之间增加数据缓存层，提供全局数据服务，可大大减少数据库往返次数，从而充分利用服务器的大内存，提高数据提取效率和并发数访问效率；S8、数据访问优化：对所有的数据访问采用统一的API封装，即建立一个数据访问接口层，接口层中定义了应用程序所需要的所有数据操作方法，应用程序访问数据时均需通过此接口层进行，从而确保数据操作的独立性、安全性和可靠性；S9、多层次性能保证优化：从软件、硬件和网络三个层次上进行性能保证优化。进一步的，所述应用优化策略包括以下步骤：A、UI的响应优化：进行UI的响应优化，将其分成即时响应、过渡效果和位移三个方面，综合应用即时响应、过渡效果、位移手段进行响应优化，保证良好的系统操作,其中，即时响应：即点即看，当请求失败时再进行信息反馈；过渡过程：操作信息安全运行监测预警系统的界面切换、数据向下挖掘查看等操作时，提供一个过渡过程或转场的效果，如：延时移动、淡入淡出、滑动、缩放、翻转等；移位：在不弹层、弹窗情况下的内容移位，合理的运用界面内容的展开、收起；B、编程语言的选择：从系统的可移植性及灵活性方面进行考虑，采用移植性较好的编程语言，比如Java、Python等；C、代码性能设计：采用分页，减少传输的数据量，界面设计采用数据异步加载、数据初始化、启动加速方式提高界面响应速度；D、减少不必要的请求：减少不必要的文件复用，如css文件，并优化缓存，对于没有变化的网页元素，用户再次访问的时候没有必要重新下载，直接从浏览器缓存读取可有效减少http请求数；E、压缩界面元素：每个元素越小，下载时间就越小，对集中显示的元素进行合适的压缩，以保证能够正常、快速的显示，如：图片的实际尺寸是2800*1024，大小是771KB，可将显示的尺寸大小压缩为320*240。进一步的，所述步骤S1中的高性能技术应用还包括：通过分布式的独立功能单元形成单向连接过滤链，对实时监控的整个过程及形成的数据流进行处理，同时，应用双队列采集技术，实现数据采集和数据发送的分离与高效执行。进一步的，所述步骤S2中物理优化可采用以下措施：优化Oracle的运行环境，如网络、硬件等；使用合适的优化器；合理配置Oracle实例参数；建立合适的索引，可减少IO；将索引数据和表数据分开在不同的表空间上，可降低IO冲突；建立表分区，将数据分别存储在不同的分区上，从而以空间换取时间，减少IO；扩展集群的实体服务器数量，对集群进行扩展。进一步的，所述步骤S2中的逻辑优化可采用以下措施：对表进行逻辑分割，数据存储进行按时间的裁剪汇总，及时统计裁剪历史数据，减少存储占用空间，提高查询性能；SQL语句使用占位符语句，并且开发时按照规定编写SQL语句，如全部大写，全部小写等；耗时的操作，在用户较少的情况下执行，错开系统使用的高峰时间，提高数据库性能；选择有效的表名；使用ExitsNotExits替代InNotin；合理使用事务，合理设置事务隔离性，对比较消耗数据库资源的数据操作，使用批量处理。进一步的，所述步骤S3中生产数据与历史数据分离的具体操作为：建立生产数据库和历史数据库，把生产数据与历史归档数据分开存储，减少在运行生产数据库的数据量。进一步的，所述步骤S3中分布式部署的具体操作为：把不同来源的数据分别存储在不同物理数据库上，减少单个数据库的数据量。进一本文档来自技高网...

【技术保护点】
1.一种预警系统的运维流程管理性能优化方法，包括数据交互优化策略和应用优化策略，其特征在于：所述数据优化策略包括以下步骤：/nS1、高性能技术应用：应用实时数据过滤链架构，采用分布式数据中心，实现对来自不同采集器监控数据的分布式处理；/nS2、数据库优化：从物理优化和逻辑优化两个方面对数据库进行优化；/nS3、结构性能优化：将生产数据与历史数据分离，并进行分布式部署；/nS4、数据泛化：对挖掘的数据进行统一的规格化，各接口将监控业务数据发送到IT集中运行平台，通过数据解析和泛化以统一的格式存储在IT集中运行监控系统数据库；/nS5、采用多线程技术：以用户界面线程为主线程，并以数据接收线程、数据分析线程为辅线程；/nS6、数据压缩传输：在将数据传输给信息安全运行监测预警系统之前，先对数据进行压缩；/nS7、数据缓存：在数据层和应用层之间增加数据缓存层，提供全局数据服务；/nS8、数据访问优化：对所有的数据访问采用统一的API封装，即建立一个数据访问接口层，接口层中定义了应用程序所需要的所有数据操作方法；/nS9、多层次性能保证优化：从软件、硬件和网络三个层次上进行性能保证优化。/n

【技术特征摘要】
1.一种预警系统的运维流程管理性能优化方法，包括数据交互优化策略和应用优化策略，其特征在于：所述数据优化策略包括以下步骤：
S1、高性能技术应用：应用实时数据过滤链架构，采用分布式数据中心，实现对来自不同采集器监控数据的分布式处理；
S2、数据库优化：从物理优化和逻辑优化两个方面对数据库进行优化；
S3、结构性能优化：将生产数据与历史数据分离，并进行分布式部署；
S4、数据泛化：对挖掘的数据进行统一的规格化，各接口将监控业务数据发送到IT集中运行平台，通过数据解析和泛化以统一的格式存储在IT集中运行监控系统数据库；
S5、采用多线程技术：以用户界面线程为主线程，并以数据接收线程、数据分析线程为辅线程；
S6、数据压缩传输：在将数据传输给信息安全运行监测预警系统之前，先对数据进行压缩；
S7、数据缓存：在数据层和应用层之间增加数据缓存层，提供全局数据服务；
S8、数据访问优化：对所有的数据访问采用统一的API封装，即建立一个数据访问接口层，接口层中定义了应用程序所需要的所有数据操作方法；
S9、多层次性能保证优化：从软件、硬件和网络三个层次上进行性能保证优化。


2.根据权利要求1所述的一种预警系统的运维流程管理性能优化方法，其特征在于：所述应用优化策略包括以下步骤：
A、UI的响应优化：进行UI的响应优化，将其分成即时响应、过渡效果和位移三个方面，综合应用即时响应、过渡效果、位移手段进行响应优化，保证良好的系统操作；
B、编程语言的选择：从系统的可移植性及灵活性方面进行考虑，采用移植性较好的编程语言；
C、代码性能设计：采用分页，减少传输的数据量，界面设计采用数据异步加载、数据初始化、启动加速方式提高界面响应速度；
D、减少不必要的请求：减少不必要的文件复用，并优化缓存；
E、压缩界面元素：对集中显示的元素进行合适的压缩，以保证能够正常、快速的显示。


3.根据权利要求1所述的一种预警系统的运维流程管理性能优化方法，其特征在于：所述步骤S1中的高性能技术应用还包括：通过分布式的独立功能单元形成单向连接过滤链，对实时监控的整个过程及形成的数据流进行处理，同时，应用双队列采集技术，实现数据采集和数据发送的分离与高效执行。


4.根据权利要求1所述的一种预警系统的运维流程管理性能优化方法，其特征在于：所述步骤S2中物...

【专利技术属性】
技术研发人员：林志达，张华兵，曹小明，陈华军，付志博，卢伟开，
申请(专利权)人：南方电网数字电网研究院有限公司，中国南方电网有限责任公司，
类型：发明
国别省市：广东;44