当前位置: 首页 > 专利查询>浙江大学专利>正文

基于自注意力双向长短期记忆网络的时序数据监测方法技术

技术编号:24708015 阅读:90 留言:0更新日期:2020-06-30 23:58
本发明专利技术提供了一种基于自注意力双向长短期记忆网络的时序数据监测方法,包括:S1,获取预设时间段内待监测设备的时序数据,并采用数据预处理算法转化为可输入自注意力双向长短期记忆网络模型的标准数据;S2,将处理后数据输入双向长短期记忆网络,将输入序列转化为两个特征向量,拼接得到输出特征向量;S3,S2中的输出特征向量经自注意力网络得到各时刻的注意力分数,将该分数赋权到输出特征向量上,得到最终的输出特征向量;S4,最终的输出特征向量经全连接分类器网络得到预测概率;S5,获取非预设时间段内待监测设备的时序数据并转化为标准数据,输入到训练完成的模型中,得到预测结果,实现基于自注意力双向长短期记忆网络的时序数据监测。

【技术实现步骤摘要】
基于自注意力双向长短期记忆网络的时序数据监测方法
本专利技术涉及工业时间序列处理和工业大数据应用领域,具体来说是一种基于自注意力双向长短期记忆网络的时序数据监测方法。
技术介绍
目前,对于工业领域时序数据建模策略主要可以分为两大类,第一类为机理建模,主要利用物理或化学机理进行理论分析和研究,建立机理模型。第二类主要以传感器采集的实时工况数据建立数据驱动模型,建模目标在于建立从以工况参数为主要变量,其他环境因素为辅助变量到相关目标预测的函数关系。对比机理建模的思路,基于数据驱动建模的方法弱化了对复杂机理模型的研究,在充足数据的前提下,即使对某些很难建立机理模型的复杂系统,数据驱动模型也能够取得非常好的效果。先进控制系统的发展和普及,使得复杂系统能够记录各种工况下的大量数据,一定程度上也为数据驱动建模发展打下了坚实的基础,基于统计学习的数据驱动建模方法已经应用于化工、控制、计算机等多个领域。但是对于统计学习模型而言,其捕捉特征的维度仅是数据的输入特征维度,而对于时间序列数据,随着时间变化而导致数据状态的变化是非常明显的,在时间维度上本文档来自技高网...

【技术保护点】
1.一种基于自注意力双向长短期记忆网络的时序数据监测方法,其特征在于,所述方法包括:/nS1,获取预设时间段内由待监测生产设备的工况数据构成的时序数据X={x

【技术特征摘要】
1.一种基于自注意力双向长短期记忆网络的时序数据监测方法,其特征在于,所述方法包括:
S1,获取预设时间段内由待监测生产设备的工况数据构成的时序数据X={x1,x2…xt}和对应的数据标签Y={y1,y2…yt},并将所述时序数据采用数据预处理算法转化为可以输入到自注意力双向长短期记忆网络模型的标准数据所述数据预处理算法包括PauTa准则法、标准差标准化法与数据划分法,所述自注意力双向长短期记忆网络模型包括双向长短期记忆网络、自注意力网络与分类器网络;
S2,所述双向长短期记忆网络,包括正向长短期记忆网络与逆向长短期记忆网络,所述正向长短期记忆网络的输入为所述标准数据的正向序列{x′1,x′2…x′k},所述逆向长短期记忆网络的输入为所述标准数据的逆向序列{x′k,x′k-1…x′1},所述正向序列与所述逆向序列通过双向长短期记忆网络转化为两个稠密的特征向量,将两个特征向量进行拼接,得到所述双向长短期记忆网络的输出特征向量;
S3,将所述双向长短期记忆网络的输出特征向量输入到S1所述的自注意力网络中,经全连接神经网络和Softmax层可以计算输入序列中每个时刻与输入序列中其他时刻的注意力分数,所述注意力分数的数值范围在[0,1]之间,数值越大,表明输入序列中该时刻对最终结果的贡献越大,将计算得到的所述注意力分数通过矩阵点乘的方式赋权到所述双向长短期记忆网络的输出特征向量上,得到所述自注意力双向长短期记忆网络的最终输出特征向量;
S4,采用所述分类器网络,将所述自注意力双向长短期记忆网络得到的最终输出特征向量输入到全连接分类器网络中,输出为2维的向量,并经多分类Softmax层输出得到待预测类别的概率;
S5,获取非所述预设时间段内由待监测生产设备的工况数据构成的时序数据,采用S1所述的数据预处理算法转化为可以输入到自注意力双向长短期记忆网络模型中的标准数据,将该批数据输入到训练完成的自注意力双向长短期记忆网络中,得到模型的预测结果,实现基于自注意力双向长短期记忆网络的时序数据监测。


2.根据权利要求1所述方法,其特征在于,步骤S1中获取的预设时间段内由待监测生产设备的工况数据构成...

【专利技术属性】
技术研发人员:卢建刚罗轶凡陈金水
申请(专利权)人:浙江大学
类型:发明
国别省市:浙江;33

网友询问留言 已有0条评论
  • 还没有人留言评论。发表了对其他浏览者有用的留言会获得科技券。

1