基于多模态时频图融合的风电机组齿轮箱故障诊断方法.pdf

第8卷 第3期2 0 2 3年6月分布式能源D i s t r i b u t e d E n e r g yV o l.8 N o.3J u n.2 0 2 3D O I:1 0.1 6 5 1 3/j.2 0 9 6-2 1 8 5.D E.2 3 0 8 3 0 3基于多模态时频图融合的风电机组齿轮箱故障诊断方法陈 阳1,刘永前1,韩 爽1,王 罗2(1.新能源电力系统国家重点实验室(华北电力大学),北京市 昌平区 1 0 2 2 0 6;2.中国长江三峡集团有限公司,北京市 海淀区 1 0 0 0 3 8)摘要:特征提取是故障诊断问题的关键,风电机组齿轮箱负载多变,振动数据量大、信息密度低,导致多模态融合诊断方法的特征学习性能和计算成本难以兼顾。为此,提出了基于多模态时频图融合的风电机组齿轮箱故障诊断方法。首先,使用小波包分解算法对齿轮箱振动数据集进行故障特征分析;然后,将所得分解子信号和原始信号分别转化为二维时频图像,形成体现小波域和时频域的互补故障特征;最后,利用卷积神经网络(c o n v o l u t i o n a l n e u r a l n e t w o r k s,C NN)分别学习图像纹理的深层特征并进行特征融合,训练 基 于C NN-V i T(v i s i o n t r a n s f o r m e r)的多模态故障诊断模型。以凯斯西储大学齿轮箱轴承数据进行验证,所提模型在变负载和未知故障下,相比其他单模态和多模态方法具有较高的准确率,时频图融合方法能够以较低计算成本实现小波域和时频域双模态的故障特征学习。关键词:风电机组齿轮箱;故障诊断;小波包分析;多模态融合;图像分类中图分类号:T K 8 1 文献标志码:AF a u l t D i a g n o s i s M e t h o d o f W i n d T u r b i n e G e a r b o x B a s e d o n M u l t i-M o d e T i m e-F r e q u e n c y I m a g e F u s i o nCHAN Y a n g1,L I U Y o n g q i a n1,HAN S h u a n g1,WANG L u o2(1.S t a t e K e y L a b o r a t o r y o f N e w E n e r g y P o w e r S y s t e m s,N o r t h C h i n a E l e c t r i c P o w e r U n i v e r s i t y,C h a n g p i n g D i s t r i c t,B e i j i n g 1 0 2 2 0 6,C h i n a;2.C h i n a T h r e e G o r g e s C o r p o r a t i o n,H a i d i a n D i s t r i c t,B e i j i n g 1 0 0 0 3 8,C h i n a)A B S T R A C T:F e a t u r e e x t r a c t i o n i s t h e k e y t o t h e f a u l t d i a g n o s i s p r o b l e m,a n d t h e v a r i a b l e l o a d o f w i n d t u r b i n e g e a r b o x e s,l a r g e a m o u n t o f v i b r a t i o n d a t a a n d l o w i n f o r m a t i o n d e n s i t y m a k e i t d i f f i c u l t t o b a l a n c e t h e f e a t u r e l e a r n i n g p e r f o r m a n c e a n d c o m p u t a t i o n a l c o s t o f m u l t i m o d a l f u s i o n d i a g n o s i s m e t h o d.T o t h i s e n d,a w i n d t u r b i n e g e a r b o x f a u l t d i a g n o s i s m e t h o d b a s e d o n m u l t i m o d a l t i m e-f r e q u e n c y m a p f u s i o n i s p r o p o s e d.F i r s t,a w a v e l e t p a c k e t d e c o m p o s i t i o n a l g o r i t h m i s u s e d t o a n a l y z e t h e f a u l t f e a t u r e s o f t h e g e a r b o x v i b r a t i o n d a t a s e t;t h e n,t h e d e c o m p o s e d s u b-s i g n a l a n d t h e o r i g i n a l s i g n a l a r e t r a n s f o r m e d i n t o t w o-d i m e n s i o n a l t i m e-f r e q u e n c y i m a g e s t o f o r m c o m p l e m e n t a r y f a u l t f e a t u r e s r e f l e c t i n g t h e w a v e l e t d o m a i n a n d t h e t i m e-f r e q u e n c y d o m a i n;f i n a l l y,a c o n v o l u t i o n a l n e u r a l n e t w o r k(C NN)i s u s e d t o l e a r n t h e d e e p f e a t u r e s o f t h e i m a g e t e x t u r e a n d f u s e t h e m s e p a r a t e l y t o t r a i n a C NN-V i T(v i s i o n t r a n s f o r m e r)m u l t i m o d a l f a u l t d i a g n o s i s m o d e l.T h e p r o p o s e d m o d e l i s v a l i d a t e d w i t h C a s e W e s t e r n R e s e r v e U n i v e r s i t y g e a r b o x b e a r i n g d a t a,a n d h a s h i g h e r a c c u r a c y c o m p a r e d w i t h o t h e r u n i m o d a l a n d m u l t i m o d a l m e t h o d s u n d e r v a r i a b l e l o a d a n d u n k n o w n f a u l t s,a n d t h e t i m e-f r e q u e n c y m a p f u s i o n m e t h o d c a n r e a l i z e t h e f a u l t f e a t u r e l e a r n i n g i n b o t h w a v e l e t d o m a i n a n d t i m e-f r e q u e n c y d o m a i n d u a l m o d a l i t y w i t h l o w e r c o m p u t a t i o n a l c o s t.K E Y WO R D S:w i n d t u r b i n e g e a r b o x;f a u l t d i a g n o s i s;w a v e l e t p a c k e t a n a l y s i s;m u l t i m o d a l f u s i o n;i m a g e c l a s s i f i c a t i o n基金项目:中国长江三峡集团科技项目(2 1 2 1 0 3 3 6 8)T h i s w o r k i s s u p p o r t e d b y S c i e n c e a n d T e c h n o l o g y P r o j e c t o f C h i n a T h r e e G o r g e s G r o u p(2 1 2 1 0 3 3 6 8)0 引言 由近年来,风电机组齿轮箱呈现大型化发展趋势,齿轮箱传递功率增加、转速下降、扭矩增加对可靠性提出了更高要求1。此外,恶劣自然环境中风速和风向复杂多变,造成齿轮箱转速持续不规律波动,对内部轴承、齿轮等部件产生无规律的载荷冲击,加速了齿轮箱核心部件的退化2。文献3 统计1 8 分布式能源第8卷 第3期了风电机组各子系统故障次数和停机时间,其中风电机组齿轮箱的故障次数较少,停机时间最长,对齿轮箱进行数据驱动的故障诊断可以有效减少停机引发的电量损失并降低维护成本。充分有效利用振动信号的故障特征信息仍是一个挑战4,根据故障特征信息的来源、形式可以将诊断模型划分为单模态模型和多模态模型。单模态模型需要事先对振动信号进行滤波、变换、分析以提取故障特征信息,特征提取方法包括:基于统计指标的时域分析方法;基于谱分析的频域分析方法;基于变换和分解的时频域分析方法5等。在特征提取的基础上,文献6-9 应用深度学习算法建立故障特征信息与故障类别之间的映射关系,形成了单模态故障诊断方法的基本结构。单一来源的故障特征信息存在信息遗漏或信息冗余现象,单模态模型不能保证挖掘故障特征任务的有效性。多模态模型由单模态模型发展而来,多模态融合技术(m u l t i m o d a l f u s i o n t e c h n o l o g y,MF T)可以充分利用不同模态数据之间的互补性,通过融合故障特征得到更好的特征表示,以达到提高诊断效果的目的1 0。文献1 1 分别采用带自适应噪声的完全集成经验模态分解和快速傅里叶变换提取时域和频域故障特征,通过选取其最优特征子集实现了数据级的多模态故障特征融合;文献1 2-1 3 结合了多模态 融 合 技 术 与 卷 积 神 经 网 络(c o n v o l u t i o n a l n e u r a l n e t w o r k s,C NN),分别提取滚动轴承的故障数据的时 域、频 域2个 模 态 特 征 并 融 合,建 立 了MF-C NN诊断模型;文献1 4 直接以振动、电信号为输入,分别 经过独立 的 堆 叠 自 编 码 器(s t a c k e d a u t o-e n c o d e r,S A E)进行特征提取与信号重构,借助S A E的隐藏层输出实现特征融合。然而,现有多模态融合诊断模型普遍计算成本高、复杂度大,导致特征学习困难。因此,多模态诊断模型需要减少计算成本,同时还要兼顾不同模态之间的融合交互,提高诊断准确率。为此,提出了基于多模态时频图融合的风电机组齿轮箱故障诊断方法。将原始振动信号和小波包分解子信号转换为时频图像,把复杂的故障特征信息转化为数据量较少的图像纹理特征,减少输入数据量;采用图像特征融合的方法建立诊断模型,将故障诊断问题转换为图像分类问题,实现不同模态信息的充分、高效利用。1 小波包时频图特征小波 包 分 解(w a v e l e t p a c k e t d e c o m p o s i t i o n,WP D)1 5-1 6由小波分析发展而来,克服了小波变换在信号分解的每层次上只对低频子带进行分解,无法提取具有相同分辨率的高频子带信息的问题。通过小波包分解能够同时得到低频分量和高频分量,各频带分量具有更高的平稳性与周期性,可以较好地反映振动信号的本质特征。WP D利用低通滤波器h、高通滤波器g将整个信号的频带进行树状分解,从而得到几个不同的子频带。对于给定的基本尺度函数t 和基本小波函数t ,需要满足双尺度方程:t =kZhk2t-k t =kZgk2t-k (1)设u0=t 、u1=t 双尺度方程可改写为u2nt =2kZhkun2t-k u2n+1t =kZgkun2t-k (2)式中unt 是t 的正交小波包,小波包函数可以通过二进制缩放移位得到:unj,kt =2-j/2un2-jt-k (3)式中:j是比例因子,k是移动因子,n是频率系数。原始信号yt 的小波包分解可表示为yt =2j-1n=0jZkZunj,kt =2j-1n=0yijt (4)式中i=1,2,2j。通过不同级别的小波包带通滤波器对原始振动信号进行滤波,得到各子带信号;yijt 表示频率范围在i2j+1fs,i+12j+1fs 之间的子带信号;fs为采样频率。小波包3层分解如图1所示。子带信号的能量特征可以有效反映齿轮箱在不同频带内的运行状态。设子带信号yijt 的数据长度为l,其能量E yij 可表示为E yij =1lNi=1yijt 2(5)子带信号yijt 的能量比上原始信号yt 的总能量得到yijt 的能量百分比例。根据能理守恒,该层全部子频带能量比例的总和应等于1。通过小V o l.8 N o.3陈 阳,等:基于多模态时频图融合的风电机组齿轮箱故障诊断方法1 9 图1 小波包分解树形结构F i g.1 W a v e l e t p a c k e t d e c o m p o s i t i o n t r e e s t r u c t u r e 波包能量特征选择不同频带的信号作为多模态模型输入数据,实现负载大小、故障类型、损伤程度等信息的补充。为了保留了大部分故障特征信息,同时大幅减少模型输入数据量,将小波包能量特征分析得到的互补信号作傅里叶变换,以横轴为时间,纵轴为频率,颜色表示幅值绘制时频图1 7-1 9,图像纹理表示信号的频率、幅度随时间的变化情况,如图2(b)所示。图2 子带信号及其时频图F i g.2 S u b b a n d s i g n a l a n d i t s t i m e-f r e q u e n c y g r a p h 2 多模态融合 CNN-ViT 模型C NN网络结构由于其平移不变性和局部相关性而擅长提取图像的局部特征,但其感受野有限,很难捕获全局信息2 0。T r a n s f o r m e r网络结构可以捕获长距离依赖关系,多头自注意力模块可以捕获长距离的特征依赖,但会忽略局部特征的细节。为此提出了多模态融合的C NN-V i T神经网络结构,最大程度保留不同模态数据的全局和局部特征。2.1 CNN 模块对于每个模态的时频图特征,分别输入至C NN网络结构中,输入图像的大小由时频图滑窗和重叠数据共同决定,隐层由3层C o n v 2 d层、3层P o o l i n g层和F l a t t e n层组成。2.2 多模态融合多模态融合方法根据融合方式可分为数据级融合、特征级融合与决策级融合3种2 1。当模态信息针对同一内容而又不互相包含时,特征级融合能最大限度地保留原始信息,在理论上能达到最佳的诊断效果,因此选择特征级融合方式融合时频图像的纹理特征。各模态时频图像的纹理特征用Xi、Yi表示,用C o n c a t e n a t e层进行特征级融合,即Zc o n c a t e n a t e=ci=1XiKi+ci=1YiKi+c+(6)式中:Xi及Yi表示2个模态第i通道上的高阶特征,Ki、Ki+c表示第i个通道特征图对应的卷积核,Zc o n c a t e n a t e为mn的特征块。2.3 ViT 模块V i T是G o o g l e在2 0 2 0年提出的基于T r a n s f o r m e r的图像分类模型2 2-2 3,具有优越的图像分类性能。V i T由Em b e d d i n g层、T r a n s f o r m e r E n c o d e r层和ML P层构成。V i T首先通过Em b e d d i n g层将大小为mn特征块Zc o n c a t e n a t e分割为H个大小为pp的特征块z;接着对H个p2维的小特征块z作线性变换E,使得原本的特征块z被转化成了N个D维的特征向量。H=m np2(7)T r a n s f o r m e r E n c o d e r层则同时接受N个D维的特征向量及各特征块z的位置信息Epo s,公式可表示为:G0L=zc l s;z1E;z2E;.;zHE +Ep o s(8)G L=MHA L NGL-1 +GL-1(9)GL=ML P L NG L +G L(1 0)式中:G0L、G L、GLa2+b2表示第L个T r a n s f o r m e r层的输入特征、中间层特征以及输出特征;zc l s为类标记向量;z1E表示对第1个小特征块做线性变换,MHA表示多头注意力机制;ML P表示前馈神经网络;L N表示对隐藏层标准化操作。多头注意力机制是多个独立的自注意力运算的叠加,每个特征块通过线性变换得到QRddk、KRddk和VRddv这3个嵌入式矩阵,经过式(1 1)得到单个注意力头的输出:hi=A t t e n t i o nQ,K,V =s o f t m a xQ KTdk V(1 1)2 0 分布式能源第8卷 第3期 将多个头的输出进行拼接得到多头的输出:MHAQ,K,V =C o n t a c th1,h2,hn (1 2)式中C o n t a c t()是拼接操作。所提多模态融合C NN-V i T网络模型结构如图3所示。图3 多模态融合C N N-V i T模型F i g.3 M u l t i-m o d a l f u s i o n C N N-V i T m o d e l 3 故障诊断流程基于多模态时频图融合的风电机组齿轮箱故障诊断方法流程如下:(1)采集振动信号。利用振动加速度传感器采集风电机组齿轮箱的故障信号。(2)确定多模态输入数据。选择合适的参数对采集的信号进行小波包分解,利用小波包能量特征分析方法选择互补的多模态输入数据,多模态输入数据应内含齿轮箱负载大小、故障类型、损伤程度等方面的信息。(3)时频图特征构造。分别构造多模态输入信号的时频图像,并划分训练样本集和测试样本集。(4)构建多模态融合C NN-V i T诊断模型。用构建的时频图样本集进行训练,得到多模态融合C NN-V i T故障诊断模型。(5)故障识别。将构建的测试样本集输入故障诊断模型中,实现风电机组齿轮箱未知故障的识别。4 试验案例4.1 数据来源试验案例使用美国凯斯 西储大学电气工程实验室的齿轮箱轴承试验台数据集。试验台由电机、扭矩传感器/编码器、测功机和控制电子设备组成。测试轴承型号为S K F 6 2 0 5,以1 2k H z采样频率采集了0 H P3 H P这4种不同负载状态下的齿轮箱输入端轴承振动数据。数据包含滚动轴承正常状态、内圈故障、外圈故障和滚动体故障共4种不同类型,故障直径为70.0 2 54、1 40.0 2 54、2 10.0 2 54mm。试验案例将数据集按照61的比例设置训练和测试数据集,数据集共计28 8 0个样本。4.2 小波包能量特征分析对所取振动数据进行小波包分解和能量特征分析。相同故障深度(70.0 2 54mm)、小波基函数(d b 4小波)、分解层数(3层)的条件下,各故障类型的第0子带能量占比均最高,重点分析17子带的能量特征,对比结果如图4所示。正常状态下17子带能量占比呈现递减趋势;轴承内圈故障下能量集中在15子带上;轴承滚动体故障下能量主要集中在3、4子带上;轴承外圈故障下各子带能量整体较高,能量主要分布在3、4子带上。因此,使用d b 4小波进行3层小波包分解后,可以根据各子带的能量特征有效区分不同故障类型。图4 小波包分解各子带能量(不同故障类型)F i g.4 W a v e l e t p a c k e t d e c o m p o s e s t h e e n e r g y o f e a c h s u b b a n d(D i f f e r e n t f a u l t t y p e s)相同故障类型(轴承外圈故障)、相同故障深度(2 10.0 2 54mm)、不同负载条件下的小波包子带能量对比图如图5所示,可以看出变负载下的小波包能量特征没有明显规律,无法实现变负载的故障特征提取。在小波包子信号的基础上,需要融合原始信号补充整体的振幅和波形信息。根据转子动力学及润滑理论2 2-2 3,轴承负载增加,油膜刚度增大,摩擦程度增加,最终导致振幅减小。其次,随着故障深度增加,产生的冲击强度显著增加。最终选择原始信号和3层小波包分解子信号的时频图像,作为小V o l.8 N o.3陈 阳,等:基于多模态时频图融合的风电机组齿轮箱故障诊断方法2 1 图5 小波包分解各子带能量(不同负载)F i g.5 W a v e l e t p a c k e t d e c o m p o s i t i o n o f s u b-b a n d e n e r g y(d i f f e r e n t l o a d)波域和时频域的互补故障特征,训练多模态融合的C NN-V i T诊断模型。图6 各模型混淆矩阵F i g.6 T h e c o n f u s i o n m a t r i x o f e a c h m o d e l 4.3 模型验证引入混淆矩阵来评估多模态融合C NN-V i T故障诊断模型的准确率。首先,记录验证集下,诊断模型预测正确和预测错误的样本个数。将正常状态和故障状态分别命名为阳性类和阴性类。在计算过程中使用了以下标签:NT P(t r u e p o s i t i v e)表示正 确 识 别 为 正 常 状 态 的 病 例 数;NF P(f a l s e p o s i t i v e)是指被错误识 别为正常状 态的病例数;NTN(t r u e n e g a t i v e)是指正确识别为故障状态的案例数;NF N(f a l s e n e g a t i v e)是指错误地识别为故障状态的情况的数量。利用标签设置精确率(p r e c i s i o n)p、召回率(r e c a l l)r、准确率(a c c u r a c y)a、F 1分数(F 1 S c o r e)F 1这4个评价指标。各评价指标的计算公式如下:p=NT PNT P+NF P(1 3)r=NT PNT P+NF N(1 4)a=NT P+NT NNT P+NF P+NT N+NF N(1 5)F 1=2prp+r(1 6)为了进一步验证所提模型的有效性,分别建立多模态C NN-V i T、多模态C NN、C NN、WD C NN、S VM、X G B o o s t的故障诊断模型并对诊断结果进行对比,训练集和测试集样本比例为61,取1 0次模型训练效果最优情况。各模型混淆矩阵如图6所示,故障诊断结果总准确率统计表如表1。2 2 分布式能源第8卷 第3期表1 各模型评价指标统计T a b l e 1 S t a t i s t i c s o f e v a l u a t i o n i n d i c a t o r s f o r e a c h m o d e l模型p/%r/%a/%F 1S VM7 7.4 57 7.7 17 3.2 50.7 7 5 7X G B o o s t8 4.6 38 3.7 58 1.5 00.8 4 1 9C NN8 7.4 78 9.3 88 7.2 50.8 8 4 1WD C NN9 4.1 89 4.1 79 3.0 00.9 4 1 7多模态C NN9 6.9 59 7.2 99 6.7 50.9 7 1 2多模态C NN-V i T9 9.7 99 9.7 99 9.7 50.9 9 7 9 对比图6(a)、6(b)、6(c)、6(d)混淆矩阵可以看出单模态条件下,深度学习模型C NN和WD C NN的诊断效果整体上优于浅层机器学习模型S VM和X G B o o s t。根据图6(c)、6(d),单模态C NN模型和WD C NN模型在3类故障的诊断上均存在误报现象,C N N模型内圈故障、滚动体故障和外圈故障的准确率分别为7 4.1 7%、9 0.8 3%、9 2.5 0%,而WD C N N有宽核提取特征,小核特征表示的优势,能够准确诊断内圈故障、滚动体故障,但是外圈故障诊断准确率较低为7 6.6 7%,单模态模型在变负载条件下的诊断仍有一定局限性。根据图6(c)、6(d),多模态C NN模型对比单模态C NN模型,误判情况有所改善,3种故障诊断准确率分别为9 4.1 7%、9 6.6 7%、9 8.3 3%,同比均有提升。图6(f)多模态C NN-V i T模型的诊断准确率为9 9%,诊断结果均优于其他单、多模态模型。表1展示了上述模型的评价指标统计,多模 态C NN-V i T模型各指标 均 优 于 其 他模型。相同模型结构下多模态C NN-V i T模型的平均计算速度为1 6m s/样本,而多模态C NN模型为3 7m s/样本,振动信号转图像的方法可以减少数据量使得计算速度加快。5 结论针对变负载条件下多模态融合故障诊断模型的特征学习困难问题提出一种图像融合的诊断方法。该方法利用多模态融合技术提高诊断准确率,时频图融合方法将故障诊断问题转换为图像分类问题,降低计算成本。通过齿轮箱试验台测得的正常、内圈故障、外圈故障和滚动体故障4种类型信号数据对该方法进行验证,得到以下结论:(1)小波域和时频域多模态融合,实现了变负载下的故障特征提取。多模态融合方法能够提高模型诊断准确率,单模态C N N模型准确率为9 6.7 5%,而所提多模态C NN-V i T模型准确率为9 9%。(2)时频图方法把复杂的故障特征信息转化为数据量较少的图像纹理特征,通过减少输入数据量降低了计算成本和计算复杂度。参考文献1 李辉,胡姚刚,李洋,等.大功率并网风电机组状态监测与故障诊断研究综述J.电力自动化设备,2 0 1 6,3 6(1):6-1 6.L I H u i,HU Y a o g a n g,L I Y a n g,e t a l.R e s e a r c h r e v i e w o n c o n d i t i o n m o n i t o r i n g a n d f a u l t d i a g n o s i s o f h i g h p o w e r g r i d-c o n n e c t e d w i n d t u r b i n e sJ.E l e c t r i c P o w e r A u t o m a t i o n E q u i p m e n t,2 0 1 6,3 6(1):6-1 6.2 张真真,吴立东,陈晓敏,等.基于支持向量机的风电机组变桨系统故障诊断J.分布式能源,2 0 2 1,6(3):7 0-7 5.Z HAN G Z h e n z h e n,WU L i d o n g,C HE N X i a o m i n,e t a l.F a u l t d i a g n o s i s o f w i n d t u r b i n e p i t c h s y s t e m b a s e d o n s u p p o r t v e c t o r m a c h i n eJ.D i s t r i b u t e d E n e r g y,2 0 2 1,6(3):7 0-7 5.3 K I M K,P A R THA S A R A THY G,U L UYO L O,e t a l.U s e o f S C A D A d a t a f o r f a i l u r e d e t e c t i o n i n w i n d t u r b i n e sC/P r e s e n t e d a t t h e 2 0 1 1 E n e r g y S u s t a i n a b i l i t y C o n f e r e n c e a n d F u e l C e l l C o n f e r e n c e,7-1 0 A u g u s t 2 0 1 1,W a s h i n g t o n,D.C.Am e r i c a n S o c i e t y o f M e c h a n i c a l E n g i n e e r s D i g i t a l C o l l e c t i o n,2 0 1 1.4 陈雪峰,郭艳婕,许才彬,等.风电装备故障诊断与健康监测研究综述J.中国机械工程,2 0 2 0,3 1(2):1 7 5-1 8 9.C HE N X u e f e n g,GUO Y a n j i e,XU C a i b i n,e t a l.R e v i e w o f f a u l t d i a g n o s i s a n d m o n i t o r i n g f o r w i n d p o w e r e q u i p m e n tJ.C h i n a M e c h a n i c a l E n g i n e e r i n g,2 0 2 0,3 1(2):1 7 5-1 8 9.5 李浪,刘辉海,赵洪山.风力发电机振动监测与故障诊断方法综述J.电网与清洁能源,2 0 1 7,3 3(8):9 4-1 0 0,1 0 8.L I L a n g,L I U H u i h a i,Z HAO H o n g s h a n.R e v i e w o f v i b r a t i o n m o n i t o r i n g a n d f a u l t d i a g n o s i s m e t h o d s o f w i n d t u r b i n e sJ.P o w e r G r i d a n d C l e a n E n e r g y,2 0 1 7,3 3(8):9 4-1 0 0,1 0 8.6 P I C H I KA S N,ME GANAA G,G E E THA R S,e t a l.M u l t i-c o m p o n e n t f a u l t c l a s s i f i c a t i o n o f a w i n d t u r b i n e g e a r b o x u s i n g i n t e g r a t e d c o n d i t i o n m o n i t o r i n g a n d h y b r i d e n s e m b l e m e t h o d a p p r o a c hJ.A p p l i e d A c o u s t i c s,2 0 2 2,1 9 5.7 L I AN G P,D E N G C,YUAN X,e t a l.A d e e p c a p s u l e n e u r a l n e t w o r k w i t h d a t a a u g m e n t a t i o n g e n e r a t i v e a d v e r s a r i a l n e t w o r k s f o r s i n g l e a n d s i m u l t a n e o u s f a u l t d i a g n o s i s o f w i n d t u r b i n e g e a r b o xJ.I S A T r a n s a c t i o n s,2 0 2 2.8 李东东,刘宇航,赵阳,等.基于改进生成对抗网络的风机行星齿轮箱故障诊断方法J.中国电机工程学报,2 0 2 1,4 1(2 1):7 4 9 6-7 5 0 7.L I D o n g d i n g,L I U Y u h a n g,Z HAO Y a n g,e t a l.F a u l t d i a g n o s i s m e t h o d o f w i n d t u r b i n e p l a n e t a r y g e a r b o x b a s e d o n i m p r o v e d g e n e r a t i v e a d v e r s a r i a l n e t w o r kJ.P r o c e e d i n g s o f t h e C S E E,2 0 2 1,4 1(2 1):7 4 9 6-7 5 0 7.9 Z HAN G K,T AN G B,D E N G L,e t a l.A h y b r i d a t t e n t i o n i m p r o v e d R e s N e t b a s e d f a u l t d i a g n o s i s m e t h o d o f w i n d t u r b i n e s g e a r b o xJ.M e a s u r e m e n t,2 0 2 1,1 7 9:1 0 9 4 9 1.1 0J I AN G G,J I A C,N I E S,e t a l.M u l t i v i e w e n h a n c e d f a u l t d i a g n o s i s f o r w i n d t u r b i n e g e a r b o x b e a r i n g s w i t h f u s i o n o f v i b r a t i o n a n d c u r r e n t s i g n a l sJ.M e a s u r e m e n t,2 0 2 2,1 9 6.1 1T AN G Z,WANG M,OUYAN G T,e t a l.A w i n d t u r b i n e V o l.8 N o.3陈 阳,等:基于多模态时频图融合的风电机组齿轮箱故障诊断方法2 3 b e a r i n g f a u l t d i a g n o s i s m e t h o d b a s e d o n f u s e d d e p t h f e a t u r e s i n t i m e-f r e q u e n c y d o m a i nJ.E n e r g y R e p o r t s,2 0 2 2,8.1 2薛阳,雷文平,岳帅旭,等.多模态学习方法在滚动轴承故障诊断中的应用J.机械科学 与 技 术,2 0 2 2,4 1(8):1