-
开放科学(资源服务)标识码(OSID):

-
输电线路的稳定运行对保障人们的日常生活与生产活动至关重要[1]。架空输电线路是电力传输的主要形式,但由于输电线处于架空状态,极易受到天气和环境的影响,如大风、雷暴、冰雪等。其中,输电线覆冰是一种常见的故障类型,影响电力系统的运行与维护工作[2]。覆冰严重的情况会造成倒杆倒塔,对人们的日常生活造成不便[3]。除冰机器人可以通过实时检测覆冰输电线的厚度来计算除冰的振动强度,并根据振动强度将覆冰进行振动去除,消除输电线覆冰带来的危险,确保电力系统正常运行。
覆冰输电线的厚度检测主要有直接测量、力学模型和图像检测等方法。直接测量方法是指工作人员爬上输电塔架,利用测量工具直接对输电线覆冰厚度进行测量,这种方法最为准确,但具有极高的危险性,不具有实用性。力学模型通过构建物理模型来计算覆冰的厚度。韩兴波等[4]利用基本环境参数(风速、温度等)进行数据采集,然后根据经验公式建立导线覆冰预测模型,其最大预测偏差为2 mm;杨秋等[5]将风偏角等参数代入输电线路力学方程,并进行逐次逼近迭代计算,经过实验验证其最大误差为12.67%。力学模型仅通过考虑几个因素来建立方程,当新的计算因素增加时,则原先设定好的方程便失去作用,模拟结果也会出现偏差,因此其适用性不佳。近年来,图像检测是一种较为流行的检测方法,该方法通过图像采集装置拍摄覆冰输电线,然后根据图像算法来计算覆冰厚度[6]。与其他方法相比,图像检测方法的安全系数高,可靠性强。Varshney等[7]采用全卷积神经网络对覆冰图像进行语义分割,并使用分割后的图像计算覆冰厚度;Wang等[8]构建了一套智能结冰检测设备,使用神经网络MobileNetV3进行覆冰厚度检测;Nusantika等[9]引入增强的多阈值算法分离背景和覆冰像素,图像分割后使用形态学增强标识出感兴趣区域。以上图像检测方法均使用语义分割算法,并通过统计覆冰区域的像素值来计算覆冰厚度,但未考虑到冰层边缘参差不齐等问题。除冰机器人将覆冰厚度划分为不同等级,等级数量越多意味着控制强度越精细,这样能够有效避免除冰作业对线缆造成的振动。同时,输电线覆冰厚度检测误差需控制在10%以下,然而通过语义分割计算得到的覆冰厚度达不到该要求。
边缘检测作为计算机视觉的一项底层任务,在近40年的发展过程中,涌现出许多经典的识别算法。传统的边缘检测方法通过形状、纹理等特征来人工设计规则[10]。最早,研究人员通过计算图像的梯度来提取边缘信息,常用的方法有Sobel算子[11]、Robert算子[12]、Laplacian算子[13]和Canny算子[14],随后基于学习的方法集成了这些底层特征来进行边缘检测。近年来,随着深度学习的迅速发展,目前流行的边缘检测算法均使用卷积神经网络进行设计。Xie等[15]首次提出端到端的边缘检测HED算法,其融合各个分支的特征图作为最后的输出,并提出了加权交叉熵损失函数;Liu等[16]采用RCF算法进一步将每个卷积层的特征进行融合,得到尺度更加丰富的图像信息;Deng等[17]以VGG为骨干设计了端到端的LPCB网络结构,并将Dice损失函数[18]与交叉熵损失函数进行融合;He等[19]提出了一种双向级联BDCN网络结构,其中单个层由其特定尺度上的标记边缘进行监督,此外引入了一种尺度增强模块来进行多尺度特征的生成;Soria等[20]设计了一种鲁棒的边缘检测DexiNed系统,将HED算法和轻量化神经网络Xception[21]进行组合;Su等[22]引入了一种全新的像素差卷积(Pixel Difference Convolution,PDC),将传统的边缘检测算子集成到卷积运算中,构建了PiDiNet网络;Zhou等[23]设计了UAED算法模型,利用不确定性来研究边缘检测数据集不同注释的主观性和模糊性,将确定性标签空间转换为可学习的高斯分布,通过方差测量不同注释之间的模糊度。
在输电线路检测方面,边缘检测算法可以成功检测出覆冰输电线的边缘。Liu等[24]使用Canny边缘检测算子对覆冰输电线的边缘进行检测;Chang等[25]对覆冰红外图像使用Ratio算子进行边缘检测,然后计算覆冰厚度;Nusantika等[26]使用高斯和双边滤波器融合Canny算子的混合方法进行覆冰输电线边缘检测;Liang等[27]提出了一种基于LSD算法的线性检测算法来检测输电线路覆冰厚度。受限于传统方法中手工设计特征的局限性,这类方法的边缘检测精度均不高,因此Lin等[28]提出了一种强广义卷积神经网络用于覆冰输电线的厚度检测,引入IBP算法来确定卷积层的层数和卷积核的数量。
目前针对覆冰输电线的厚度检测,大多数仍采用传统边缘检测算法,很少有研究人员使用深度学习算法对覆冰输电线进行厚度检测,为此,本文针对输电线缆的特点,设计了一种基于多维交互感知的覆冰厚度检测模型,以期能够准确、高效地识别覆冰输电线的边缘。
全文HTML
-
本文提出的厚度检测模型如图 1所示。模型使用编码器和解码器的框架进行设计,编解码架构通过编码器来提取不同层级的图像特征,然后使用解码器逐层生成边缘图像。编码器由卷积神经网络组成,低层级提取浅层特征,高层级提取高级语义信息。解码器通过上采样模块将图像恢复成原始尺寸,其特别之处在于编码器和解码器之间存在跨层连接,通过将同层级的编码器特征和解码器特征进行级联,引导解码器将图像恢复,因此这种架构相比其他边缘检测算法能够更加充分地利用图像特征。原始的编解码特征融合时,仅仅依靠拼接操作,并没有进行编码器与解码器特征之间的内部信息交互。基于此,本文设计了一个多维交互感知模块,来加强不同特征之间的信息交互。编码器和解码器的特征通过多维交互感知模块计算出各自的注意力权重,然后将权重与输入特征交叉相乘,进行深层次的特征融合,通过多个上采样模块得到边缘检测图像,最后通过厚度计算方法得到覆冰厚度。
-
传统的UNet模型在进行跨层连接时,仅仅将同一级的编码器特征与解码器特征简单拼接在一起[29],同时使用卷积操作进行特征融合,并没有深入挖掘编解码特征之间的信息交互,从而导致生成的分割图像精度不高,出现漏检、错检的情况。注意力机制可以有效提高模型对于重要特征的关注能力,因此本文对编码器与解码器特征计算注意力权重,得到模型接下来需要重点关注的区域。然后通过设计交互感知模块,将编码器与解码器的注意力权重交叉赋予解码器特征与编码器特征。此外,本文设计了多维注意力模块,通过不同尺度的通道注意力与空间注意力来扩展注意力的计算范围,提取更加丰富的细节信息。
图 2展示了多维交互感知模块(Multi-dimensional Interactive Perception Module,MIPM)的示意图,编码器的特征经过跨层连接,首先提取多维通道注意力,然后计算不同尺度的空间注意力。多维通道注意力通过不同尺度的卷积核计算不同通道之间的关系,赋予其不同的权重;而多维空间注意力通过不同大小的条形卷积核来提取图像特征,让模型更加关注覆冰边缘。计算完成的空间注意力不再赋予编码器特征,而是与解码器特征进行相乘,利用编码器得到的权重信息引导模型关注重要特征,从而对解码器的图像恢复起到指导作用。而解码器的特征也进行同样的操作,最后将交互感知后的特征级联在一起,进行边缘图像的生成。通过这种交叉赋予注意力的方式进行交互感知,MIPM模块增强了编码器与解码器之间的信息流通,促使解码器在进行边缘图像生成时对覆冰边缘投入更多的关注。
-
多维通道注意力旨在计算各个特征图之间的关系,通过多个不同尺寸的卷积核能够提取更加丰富的注意力信息。本文提出的多维通道注意力如图 3所示。首先,将特征图按照空间维度分别进行最大池化和平均池化,得到每个通道的空间聚合信息。接着,使用不同尺度的一维卷积核进行通道注意力的计算,其中卷积核大小分别设置为3、7、11。1×3的卷积核负责相近通道之间的交互计算,1×7的卷积核计算中间范围的通道关系,而1×11的卷积核负责提取远距离的注意力权重。在得到不同维度的通道注意力信息后,相加进行不同通道注意力的聚合,得到最终的多维通道注意力。最后,将通道注意力与原始特征图相乘并进行残差计算。
多维通道注意力的计算如式(1)、式(2)所示:
其中:CA为多维通道注意力;Input为输入特征;Max与Avg分别为最大池化与平均池化操作;Conv为卷积操作;Branchi为不同尺度大小的卷积核;σ为Sigmoid激活函数。
-
ECA-Net网络[30]仅使用了通道注意力,并没有进行空间注意力的计算。而空间注意力关注图像重要特征的位置,对于引导模型关注覆冰边缘至关重要,因此本文在提取特征图的多维通道注意力后,继续计算多维空间注意力。图 4为多维空间注意力的示意图,其借鉴了CPCA注意力[31]的计算方法,使用动态分配方式将卷积核替换为条形卷积,使其更加适应输电线这种条形图像。空间注意力并未将特征图按照通道方向进行信息聚合,避免赋予所有通道相同的空间注意力信息。
由于输电线覆冰边缘为不同大小的凹凸,因此使用不同大小卷积核的卷积来提取边缘特征。分别使用大小为7、11、21的卷积核,其中大小为7的卷积核提取小尺寸的覆冰边缘,大小为11的卷积核提取中等尺寸的覆冰边缘,而大尺寸边缘则由大小为21的卷积核负责计算。通过不同尺度卷积核的条形卷积进行注意力的计算,最后进行相加得到多维空间注意力权重。
多维空间注意力的计算如式(3)所示:
式中:SA为多维空间注意力;DwConv为深度卷积操作;Conv1×1为卷积核大小是1的卷积;Output为通道注意力输出。
-
在以往的边缘检测算法中,编码器与解码器之间的融合仅使用简单的拼接来完成,这种方式不能有效提取级联特征之间的关系。因此,本文提出了多维交互感知模块,首先计算编码器和解码器的多维通道注意力和空间注意力,然后将编码器生成的注意力权重与解码器特征进行相乘,同时将解码器的注意力权重与编码器相乘,利用交互感知机制加深级联特征的联系,对边缘图像的生成起到了有效的引导作用,有利于输电线覆冰边缘的检测,具体的计算公式如下:
其中:Inputen和Inputde分别为编码器和解码器的输入特征;Attention为注意力机制;Cancat为拼接操作;Aen和Ade为各自的注意力权重;Output为最后的输出特征。
-
在检测出覆冰输电线的边缘后,通过图像中上下边缘的像素差即可预测出覆冰厚度,覆冰厚度的计算公式为:
式中:D1为输电线的实际直径;d1为无覆冰线路图像上下边界轮廓像素宽度;d2为覆冰线路图像上下边界轮廓像素宽度。
1.1. 多维交互感知模块
1.1.1. 多维通道注意力
1.1.2. 多维空间注意力
1.1.3. 交互感知模块
1.2. 厚度检测
-
由于目前没有公共的覆冰输电线图像数据集可以使用,因此本文为模拟输电线覆冰的情况,将输电线缆放入冰柜中,间断性地进行喷水使线缆表面覆冰,经过长时间的冰冻得到了覆冰输电线,以此为基础构建覆冰输电线数据集。使用相机进行图像采集,经过数据清洗后,最终得到304张覆冰输电线图像,并将其按照9∶1的比例划分为训练集和测试集。实验所用的深度学习框架为PyTorch,GPU为RTX4090,操作系统为Ubuntu 20.04.6。
-
为了验证本文提出的边缘检测模型的有效性,设计了消融实验进行对比,共设置了3组对照实验。Attention表示在跨层连接处添加注意力机制,Cross表示使用多维交互感知MIPM模块,ODS为全局最佳阈值,OIS为单图最佳阈值。在覆冰数据集上进行边缘检测,消融实验结果如表 1所示。
由表 1可知,UNet作为基础模型,取得了最低的实验结果。在UNet网络模型的基础上添加注意力机制,ODS和OIS分别提高了0.6个百分点和0.2个百分点。本文通过继续增加交互感知注意力权重的方式,ODS和OIS又分别提高了1.7个百分点和1.4个百分点,验证了多维交互感知可以有效引导边缘图像的生成。
-
在计算多维通道注意力时,不同尺度的卷积核大小将影响感受野的范围,因此选择合适的卷积核大小对注意力计算至关重要。通过在覆冰数据集上进行实验,结果如表 2所示。当通道注意力卷积核选择(3,7,11)时,边缘检测的效果最佳,因此MIPM模块使用此卷积核大小来计算多维通道注意力,多维空间注意力的卷积核尺寸与CPCA注意力保持一致。
由于本文在ECA-Net网络的基础上对注意力进行了改进,因此可通过对比其他注意力模块来验证本文提出的注意力的有效性。分别将SENet[32]、CBAM[33]、ECA-Net以及CPCA注意力集成到模型中,进行注意力对比实验,实验结果如图 5所示。
由图 5可知,SENet通过全连接层计算通道注意力,CBAM在SENet的基础上添加了空间注意力,F值提升了0.2个百分点;ECA-Net将通道注意力的计算替换为高效的卷积操作,增强了模型的边缘检测能力;CPCA通过对通道注意力加权后的特征分别进行空间注意力的提取,提高了模型对空间内容的关注;而本文提出的MIPM模块,在ECA-Net的基础上,综合上述注意力模块的优势,F值达到了0.930。
-
将其他边缘检测算法在覆冰数据集上的检测效果与本文提出的模型进行对比,实验结果如表 3所示。
由表 3可知,所有算法基本达到了85%以上的识别准确率。本文模型凭借多维交互感知模块,在与其他边缘检测算法的对比中具有明显的优势。
图 6分别展示了部分算法模拟覆冰图像的边缘检测效果,其中真实覆冰图像为2024年初降雪时采集的输电线覆冰图像。
由图 6可知,RCF生成的图像边缘较粗,对于凹凸处的像素点无法进行有效处理,尤其是当真实覆冰图像中存在大量凹凸时,RCF将无法进行区分;PiDiNet通过重新设计卷积算子,对于真实边缘附近的像素可以实现初步区分,但其检测的边缘厚度仍然较粗;而本文模型通过MIPM模块更加关注难以区分的像素,能够有效检测出高低不平的部分,检测结果更加贴近真实标签。
-
分别选取4个不同厚度的覆冰输电线进行覆冰边缘预测,得到覆冰输电线的边缘图后,依据式(7)进行覆冰厚度计算。分别选取UAED模型、语义分割方法与本文模型进行对比,其中语义分割方法通过统计覆冰与非覆冰区域像素比来得到覆冰厚度,使用模型为UNet,实验结果如表 4所示。
由表 4可知,根据本文模型检测出的边缘效果计算覆冰厚度,误差最大为8.8%,最小为2.9%,而UAED模型的识别误差更高一些。使用语义分割方法的效果不佳,整体误差已经超过10%。本文模型的整体误差处于可控范围以内,证明该模型可以用于输电线覆冰厚度的检测。
2.1. 图像数据集
2.2. 消融实验
2.3. 注意力对比实验
2.4. 与其他算法对比
2.5. 覆冰厚度计算
-
针对输电线覆冰厚度难以检测以及识别精度不高等问题,本文提出了一种基于多维交互感知的输电线覆冰厚度检测模型。该模型在编码器与解码器的跨层连接处设计了多维交互感知模块,不同维度的通道和空间注意力提取了更加丰富的注意力信息,交互感知模块对编解码特征之间的信息交互进行了增强,使覆冰边缘的识别更加准确。在覆冰输电线数据集上进行实验,本文模型相较于RCF、PiDiNet模型能够更加准确地识别覆冰边缘。与UNet基准模型相比,ODS提升了2.3个百分点,OIS提升了1.6个百分点,模型预测厚度与实际测量厚度误差控制在8.8%以内。
目前,在输电线覆冰厚度检测领域,还存在数据集匮乏与模型边缘部署困难等问题,本文所用数据集为实验室环境中自制覆冰输电线采集得到的,当在现实场景中遇到大风、雷暴等天气时,图像会变得模糊,导致覆冰厚度判断不准。因此,在下一步工作中,首先需扩充覆冰输电线数据集,增加现实场景中输电线的覆冰图像,提高厚度检测算法的泛化能力。然后需进行图像去噪等方面的研究,减轻天气等因素带来的影响。此外,还需对模型进行轻量化处理,减小模型大小以提高推理速度,在保证检测精度的同时提高检测速度,以便进行厚度检测模型的边缘部署,并将其运用于输电线除冰工作中。
下载: