[发明专利]一种基于SAM-BiLSTM时间序列分类方法在审
申请号: | 202011500369.0 | 申请日: | 2020-12-18 |
公开(公告)号: | CN114722990A | 公开(公告)日: | 2022-07-08 |
发明(设计)人: | 王以忠;陈露;郭肖勇;杨国威;李宁 | 申请(专利权)人: | 天津科技大学 |
主分类号: | G06N3/04 | 分类号: | G06N3/04;G06K9/62 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 300222 天津市河西区大沽南路1*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 sam bilstm 时间 序列 分类 方法 | ||
1.一种基于SAM-BiLSTM时间序列分类方法,其特征在于,包括以下步骤:
步骤1:获取一维时间序列数据集,并对一维时间序列数据进行归一化处理;
步骤2:构建一种基于SAM-BiLSTM时间序列分类网络模型;
步骤3:使用一维时间序列数据集对一种基于SAM-BiLSTM时间序列分类网络模型进行训练;
步骤4:利用训练好的一种基于SAM-BiLSTM时间序列分类网络模型对待测的一维时间序列数据进行分类。
2.根据权利要求1所述的一种基于SAM-BiLSTM时间序列分类方法,其特征在于,步骤(1)通过MATLAB仿真得到的电能质量数据集并进行归一化处理。
3.根据权利要求1所述的一种基于SAM-BiLSTM时间序列分类方法,其特征在于,步骤(2)中包括:
(1)利用Bi-LSTM神经网络进行时间特征的提取,使用的是包括输入门、输出门、遗忘门和状态单元的长短期记忆神经元模块,其输出结果的计算公式如下:
ft=δ(Wfxt+Ufht-1+bf)
it=δ(Wixt+Uiht-1+bi)
Ct=fi*Ct-1+it*tanh(Wcxt+Ucht-1+bc)
Ot=δ(Woxt+Uoht-1+bo)
ht=Ot*tanh(Ct)
由于本发明模型采用的是双向的LSTM,即在原有的正向LSTM网络层上添加一层反向的LSTM层,可以表示为:
其中,xt为第t时刻的时间序列,W为权重矩阵,该权重矩阵包括输入权重矩阵Wi,遗忘权重矩阵Wfx,输出、遗忘、输出细胞单元权重矩阵Wi、Wf、Wo,细胞单元权重矩阵Wc,输出权重矩阵Wo;b为偏置向量,该偏置向量包括输入、遗忘、细胞单元、输出偏置,下标分别为i、f、c、o;分别为时刻t的输入门,遗忘门,输出门和状态,Ct-1和Ct表示第t-1时刻和第t时刻的细胞单元状态,ht表示t时刻LSTM的输出向量,Ht表示t时刻Bi-LSTM的输出向量;
(2)在Bi-LSTM层后添加自注意力机制,利用Bi-LSTM进行时间序列数据的特征提取,然后对提取到的特征进行权重加权,自动寻找出对输出贡献大的部分,加以较高的权重,从而使其对输出的影响加强。
Cij=aijhij
其中,HT表示输入数据通过特征提取得到的隐层状态的转置,表示训练学习到的参数,Softmax函数是对结果进行归一化,a是注意力系数。
(3)输出层是接收来自注意力机制加权之后的特征向量,然后在输出层上进行分类操作。根据实际情况,使用Softmax设定分类的数目对一维时间序列进行分类。
4.根据权利要求1所述的一种基于SAM-BiLSTM时间序列分类方法,其特征在于,步骤(3)中包括:
训练采用Adam算法,学习率初始化为0.001,衰减速率初始化为0.9。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津科技大学,未经天津科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011500369.0/1.html,转载请声明来源钻瓜专利网。