一种疲劳评价的数据筛选系统和方法技术方案

本发明专利技术具体涉及一种疲劳评价的数据筛选系统，包括数据筛选模块，所述数据筛选模块包括筛选算法组件；所述筛选算法组件用于访问筛选前的数据文件，根据热工参数数据的筛选规则对筛选前的热工参数数据进行筛选，并将筛选后的热工参数数据存储在筛选后的数据文件中。本发明专利技术提供的疲劳评价的数据筛选系统，在海量热工数据中筛选出对疲劳损伤因子有贡献的数据，将筛选后的数据生成了一系列的压缩数据文件，实现了大数据的清洗；对于疲劳评价而言，这将文件存储量比未筛选的数据存储量减少了10倍以上，并且不会丢失任何对疲劳瞬态监测有贡献的数据。的数据。的数据。

【技术实现步骤摘要】
一种疲劳评价的数据筛选系统和方法


[0001]本专利技术涉及算法
，特别是涉及一种疲劳评价的数据筛选系统和方法。

技术介绍

[0002]在疲劳评价体系中，热工参数是计算应力以及疲劳损伤因子的基础数据。在疲劳评价中，计算目标监测点的疲劳损伤因子时涉及热工参数多达上百项，并且核电厂热工数据采样频率以秒为单位存储，因此计算多年累计疲劳损伤因子时输入数据量十分庞大，并且分析发现某一段时间内的输入数据对疲劳寿命的影响微乎其微，说明数据存在一定程度的冗余，这样导致计算疲劳损伤因子十分耗时，降低计算效率。在现有疲劳评价应用中，采用增大采样周期的方法，一定程度上减少了数据量，但可能会过滤掉有效数据，降低数据准确率。

技术实现思路

[0003]基于此，有必要针对疲劳评价中输入大数据的问题，提供一种疲劳评价的数据筛选系统和方法，在计算疲劳损伤因子之前筛选出对疲劳损伤因子有贡献的数据,大大减少疲劳评价的输入数据量,在确保数据有效性的前提下，提高疲劳损伤因子的计算效率，对疲劳评价提供有效数据支撑。
[0004]为了实现上述目的，本专利技术提供如下技术方案：
[0005]本专利技术提供一种疲劳评价的数据筛选系统，包括数据筛选模块，所述数据筛选模块包括筛选算法组件；所述筛选算法组件用于访问筛选前的数据文件，根据热工参数数据的筛选规则对筛选前的热工参数数据进行筛选，并将筛选后的热工参数数据存储在筛选后的数据文件中。
[0006]进一步地，所述筛选前的热工参数数据按照时间顺序和特征指标固定的数据存储格式存储在筛选前的数据文件中；所述热工参数数据的筛选规则根据热工参数数据的筛选范围和阈值来确定，每个时刻的热工参数数据都要在其对应的筛选范围内，并且热工参数当前时刻与上一时刻的变化值大于或者等于阈值，则在筛选后的数据文件中记录该热工参数，否则过滤掉该热工参数，然后一直遍历数据，直到数据都遍历完，当前数据筛选结束。
[0007]进一步地，所述热工参数数据按照特征指标分类包括温度参数、压力参数、流量参数和阀门参数；不同特征指标的热工参数数据匹配对应的筛选规则。
[0008]进一步地，所述热工参数数据的特征指标、阈值和变化值均以数据表的形式存储在Oracle数据库服务器中，其中，所述热工参数数据的特征指标和阈值存储在热工参数基本信息表中，所述热工参数的变化值存储在热工参数记录值更新表中；所述筛选算法组件通过数据库访问层访问Oracle数据库服务器对Oracle数据库服务器中的数据表进行增删改查操作。
[0009]进一步地，所述筛选算法组件根据热工参数数据的筛选范围访问筛选前的数据文件和Oracle数据库服务器中的数据表,从筛选前的数据文件中依次读取筛选范围内所有热
工参数的值，将每个热工参数当前时刻的值与热工参数记录值更新表中的值进行比较；如果该热工参数当前时刻与热工参数记录值更新表中的变化值大于或等于阈值，则在筛选后的数据文件中记录数据行以及时间，并在热工参数记录值更新表更新热工参数的值；如果该热工参数当前时刻与热工参数记录值更新表中的变化值小于阈值，则过滤掉该热工参数。
[0010]进一步地，所述筛选后的热工参数数据按照标准数据表格式存储在筛选后的数据文件中；所述标准数据表格式包括关键字、标签和数值；所述关键字用于区分标准数据表中的各个数据块；所述标签用于将热工参数按照特征指标分类；所述数值用于记录热工参数的数值。
[0011]进一步地，所述数据块包括初始值数据块和记录值数据块；所述初始值数据块用于存储热工参数的初始值，所述记录值数据块用于存储热工参数的变化值；所述热工参数按照特征指标分类包括温度参数、压力参数、流量参数和阀门开关参数；所述数值包括初始值和变化值。
[0012]进一步地，每个热工参数的初始值通过以下步骤确定：筛选算法组件从筛选前的数据文件中依次读取所有热工参数的值，判断每个热工参数的最初记录值是否缺省；
[0013]如果该热工参数的最初记录值未缺省，则将该热工参数的最初记录值作为该热工参数的初始值；
[0014]如果该热工参数的最初记录值缺省，则将该热工参数的允许最小值作为该热工参数的初始值。
[0015]本专利技术还提供一种疲劳评价系统，包括数据采集模块、数据筛选模块和疲劳损伤因子计算模块；
[0016]所述数据采集模块用于采集热工参数数据，并将采集的热工参数数据存储在筛选前的数据文件中；
[0017]所述数据筛选模块用于访问筛选前的数据文件，根据热工参数数据的筛选规则对筛选前的热工参数数据进行筛选，并将筛选后的热工参数数据存储在筛选后的数据文件中；
[0018]所述疲劳损伤因子计算模块用于访问筛选后的数据文件，根据筛选后的热工参数数据计算疲劳损伤因子。
[0019]进一步地，所述数据采集模块包括核岛安装的传感器、采集主机、常规岛安装的副控工程机和Hadoop大数据系统；所述传感器、采集主机和副控工程机之间通过采集柜等数据传输设备实现数据的传输；所述传感器采集的热工参数数据，通过采集柜等数据传输设备依次传输到采集主机和副控工程机，并存储在副控工程机中，然后上传到Hadoop大数据系统中，并通过Hadoop大数据系统提供的数据调用接口抽取计算疲劳损伤因子所需的热工参数数据，并将热工参数数据按照时间顺序和标签固定的数据存储格式存储在文本文件中。
[0020]进一步地，所述数据筛选模块包括筛选前的数据文件、筛选后的数据文件和筛选算法组件；所述筛选前的数据文件用于存储筛选前的热工参数数据；所述筛选后的数据文件用于存储筛选后的热工参数数据；所述筛选算法组件用于访问筛选前的数据文件，根据热工参数数据的筛选规则对筛选前的热工参数数据进行筛选，并将筛选后的热工参数数据
存储在筛选后的数据文件中。
[0021]进一步地，所述筛选前的热工参数数据按照时间顺序和特征指标固定的数据存储格式存储在筛选前的数据文件中；所述热工参数数据的筛选规则根据热工参数数据的筛选范围和阈值来确定，每个时刻的热工参数数据都要在其对应的筛选范围内，并且热工参数当前时刻与上一时刻的变化值大于或者等于阈值，则在筛选后的数据文件中记录该热工参数，否则过滤掉该热工参数，然后一直遍历数据，直到数据都遍历完，当前数据筛选结束。
[0022]进一步地，所述热工参数数据按照特征指标分类包括温度参数、压力参数、流量参数和阀门参数；不同特征指标的热工参数数据匹配对应的筛选规则。
[0023]进一步地，所述热工参数数据的特征指标、阈值和变化值均以数据表的形式存储在Oracle数据库服务器中，其中，所述热工参数数据的特征指标和阈值存储在热工参数基本信息表中，所述热工参数的变化值存储在热工参数记录值更新表中；所述筛选算法组件通过数据库访问层访问Oracle数据库服务器对Oracle数据库服务器中的数据表进行增删改查操作。
[0024]进一步地，所述筛选算法组件根据热工参数数据的筛选范围访问筛选前的数据文件和Oracle数据库服务器中的数据表,从筛选前的数本文档来自技高网...

【技术保护点】

【技术特征摘要】
1.一种疲劳评价的数据筛选系统，其特征在于，包括数据筛选模块，所述数据筛选模块包括筛选算法组件；所述筛选算法组件用于访问筛选前的数据文件，根据热工参数数据的筛选规则对筛选前的热工参数数据进行筛选，并将筛选后的热工参数数据存储在筛选后的数据文件中。2.根据权利要求1所述的疲劳评价的数据筛选系统，其特征在于，所述筛选前的热工参数数据按照时间顺序和特征指标固定的数据存储格式存储在筛选前的数据文件中；所述热工参数数据的筛选规则根据热工参数数据的筛选范围和阈值来确定，每个时刻的热工参数数据都要在其对应的筛选范围内，并且热工参数当前时刻与上一时刻的变化值大于或者等于阈值，则在筛选后的数据文件中记录该热工参数，否则过滤掉该热工参数，然后一直遍历数据，直到数据都遍历完，当前数据筛选结束。3.根据权利要求2所述的疲劳评价的数据筛选系统，其特征在于，所述热工参数数据按照特征指标分类包括温度参数、压力参数、流量参数和阀门参数；不同特征指标的热工参数数据匹配对应的筛选规则。4.根据权利要求2所述的疲劳评价的数据筛选系统，其特征在于，所述热工参数数据的特征指标、阈值和变化值均以数据表的形式存储在Oracle数据库服务器中，其中，所述热工参数数据的特征指标和阈值存储在热工参数基本信息表中，所述热工参数的变化值存储在热工参数记录值更新表中；所述筛选算法组件通过数据库访问层访问Oracle数据库服务器对Oracle数据库服务器中的数据表进行增删改查操作。5.根据权利要求4所述的疲劳评价的数据筛选系统，其特征在于，所述筛选算法组件根据热工参数数据的筛选范围访问筛选前的数据文件和Oracle数据库服务器中的数据表,从筛选前的数据文件中依次读取筛选范围内所有热工参数的值，将每个热工参数当前时刻的值与热工参数记录值更新表中的值进行比较；如果该热工参数当前时刻与热工参数记录值更新表中的变化值大于或等于阈值，则在筛选后的数据文件中记录数据行以及时间，并在热工参数记录值更新表更新热工参数的值；如果该热工参数当前时刻与热工参数记录值更新表中的变化值小于阈值，则过滤掉该热工参数。6.根据权利要求1所述的疲劳评价的数据筛选系统，其特征在于，所述筛选后的热工参数数据按照标准数据表格式存储在筛选后的数据文件中；所述标准数据表格...

【专利技术属性】
技术研发人员：张娜妮，陈银强，桂春，
申请(专利权)人：中核武汉核电运行技术股份有限公司，
类型：发明
国别省市：