[发明专利]一种牵引变电所户外绝缘子异常检测方法

权利要求书

1.一种牵引变电所户外绝缘子异常检测方法，包括如下步骤：

步骤一、绝缘子定位网络数据集构建

采用牵引变电所内杆塔搭载监控摄像头拍摄的图像构成图像库，对图像库中每张图像进行中值滤波处理以抑制噪声，具体为：用3×3像素滑窗算法遍历图像，对滑窗内9个像素点按像素值大小进行排序，取中值作为该滑窗中心点像素值；通过人工标注的方式，使用能够包围完整绝缘子的包围框标注出图像中的绝缘子区域，所有图像及其标注结果共同构成绝缘子定位网络数据集；

步骤二、绝缘子图像生成网络数据集构建

对图像库中的图像进行裁剪，提取出单独的绝缘子图像，考虑到实际中存在异常的绝缘子图像较少，对每一张正常绝缘子图像，通过人工制作其对应的裂纹、掉磁、闪络的异常绝缘子图像，使每张正常绝缘子图像都有一张异常绝缘子图像所对应；所有的两种图像共同构成绝缘子图像生成网络数据集；

步骤三、绝缘子定位网络的构建与训练

绝缘子定位网络采取Faster R-CNN网络模型，包括特征提取网络，候选区域生成网络和分类与边界框回归网络；采用在大型分类识别数据集ImageNet上经预训练的VGG-16的前16层作为特征提取网络，生成特征图；在原始图像的对应位置生成不同面积和宽高比的区域，利用softmax函数计算每个区域内含有绝缘子的概率P，作为候选区域生成网络；再将候选区域输入到分类与边界框回归网络对目标进行分类，同时对目标边界框进行回归，输出绝缘子包围框位置及其经全连接层被分类为绝缘子的概率P₀，具体为：特征图进入候选区域生成网络后，用3×3像素滑窗算法遍历特征图，在每个滑窗位置上基于9个固定比例的默认边界框生成多个区域，选取概率P最高的前300个区域作为候选区域；设置候选区域默认边界框的长宽比为0.5，1，2，尺寸为8倍，16倍，32倍；设置基础边界框坐标为[0,0,15,15]，其中(0,0)为边界框左上角坐标，(15,15)为边界框右下角坐标；保持该边界框面积与中心点不变，根据三种长宽比可得三个新边界框，将三种尺寸与三个新边界框的长与宽相乘，保持中心点不变，即可得到9个默认边界框；将得到的候选区域作用于特征图，通过RoI池化提取区域特征，分类与边界框回归网络对这些特征进行分类与边界框的预测；使用绝缘子定位网络数据集对绝缘子定位网络进行训练，使其获得对图像中绝缘子定位能力；

步骤四、绝缘子图像生成网络的构建与训练

绝缘子图像生成网络基于GAN网络结构搭建，包含三个部分：生成器、判别器、重构编码器；其中生成器基于自动编码器结构搭建，包含一个编码器和一个解码器；编码器将一张3通道的图片X映射为一个32维的向量Z；在解码器一端加入U-Net跨层连接方式，以获得更佳的图像生成效果，最终将编码得到的32维向量Z重建为3通道图片X`；判别器采取与生成器中编码器相同的网络结构，用于区分原图与生成器生成的重建图；重构编码器将生成器生成的重建图片X`再映射为一个32维的向量Z`，其结构与生成器中编码器相同，用于对比原图与重建图在高一层抽象空间中的差异，具体为：编码器由4个4×4卷积层组成，输出一个大小为1×1×32的向量，其宽高为1，维数为32；解码器对该向量进行反卷积操作，每进行一次反卷积操作，就进行一次上采样，随后与编码器中对应层的具有相同尺寸的特征进行拼接，经4个4×4反卷积层后输出重建图；重建图通过重构编码器再进行一次编码，获得大小同为1×1×32的向量；网络损失包括三个部分，分别为：1)生成器重建损失，比较的是原图与重建图，采用L1损失；2)编码网络损失即生成器+重构编码器的损失，比较的是原图的编码特征与重建图的编码特征，采用L2损失；3)判别网络损失，采用二分类的交叉熵损失；使用绝缘子图像生成网络训练集对绝缘子图像生成网络进行训练，训练方法采取Adam训练方法，使其获得对绝缘子图像重建能力；

步骤五、图像输入

在实时处理情况下，提取通过摄像头采集并保存在存储区的原始视频图像，作为要进行异常检测的输入图像；在离线处理情况下，将已采 集的视频文件分解为多个帧组成的图像序列，按照时间顺序，逐个提取帧图像作为输入图像，如果输入图像为空，则整个流程中止；

步骤六、绝缘子定位

将输入图像尺寸归一化为绝缘子定位网络输入端所需尺寸224×224像素，然后经过网络的正向处理后得到绝缘子包围框的位置及概率P₀；若该概率P₀大于预先设置的阈值0.9，则认为定位成功，提取出所有定位成功的绝缘子图像；

步骤七、绝缘子异常检测

将步骤六中提取的绝缘子图像输入绝缘子图像生成网络进行异常检测，将网络损失中的编码网络损失作为输入图像的异常分数，同时设置一个阈值为0.2的异常判断阈值，如果输入图像的异常分数小于该异常判断阈值时则判定为正常，否则判定为异常；将判定为异常的图像与其通过绝缘子图像生成网络所生成的图像同时进行LBP特征提取，得到各自的LBP特征图，任选一图进行逐像素搜索，并与另一图的对应位置像素进行比较；若一像素点满足：该像素点在两图中像素差值大于等于30，且以该像素点为中心的3×3像素窗口内8个像素点的像素差值均大于等于30，则将该像素点判断为存在异常；然后对判定为异常的图像进行二值化处理，令判断为存在异常的像素点灰度值为255，其它像素点灰度值为0，即可获得异常区域，跳转到步骤五。