基于夜间紫外成像技术的输电线电晕放电图像分割方法

1.本发明属于图像目标检测技术领域，具体涉及一种基于夜间紫外成像技术的输电线电晕放电图像分割方法。


背景技术：

2.电晕放电会产生可听噪音和电磁干扰，造成电能损耗，甚至对输电线路的安全运行构成严重威胁。因此，对电晕放电进行有效的检测成为必要。目前，针对电晕放电的检测方法主要有红外热像、超高频、超声波和紫外放电检测等。红外热像根据放电引起的温升变化来进行检测，灵敏度不高，易受环境温度、风速等因素的干扰，且检测及时性不足；超高频法受限于现在的工艺水平，还不能很好的投入生产实际；脉冲电流法属于接触式检测，且易受无线电干扰，会很大程度影响检测精度；超声波检测通过接收放电时发出的声波定位放电点，再根据幅值来判断放电情况，检测精度低，易被其他放电干扰。紫外成像检测技术基于其直观方便、快速准确、抗干扰能力强以及全天候使用等优势，已经成为高压电晕放电的主要检测手段。
3.目前对于紫外图像中电晕放电检测的研究还在探索中，仍有许多问题亟待解决，譬如图像分割，特征量分析，缺陷诊断等关键性问题。其中放电区域图像准确分割是关键环节，分割准确性直接影响放电强度量化及诊断准确性。
4.目前对紫外成像放电目标区域的分割提取，都是基于电晕放电区域光斑非常清晰，与背景对比度明显的情况。此外，以上这些方法都是基于日盲型紫外成像仪拍摄的成像效果较好的放电图像，并不适用于夜间型紫外成像仪拍摄的图像。夜间型紫外成像仪拍摄的紫外图像效果受环境影响和设备限制，其光斑区域与背景对比度不明显，因而识别分割效果并不理想。
5.deeplab系列语义分割算法结合了深度卷积神经网络与条件随机场，使得语义分割结果更加准确。例如cn110346699a公开了基于紫外图像处理技术的绝缘子放电信息提取方法及，采用了deeplabv2网络。
6.otsu算法是一种自适应阈值分割算法，也称为最大类间方差阈值分割法，其通过计算图像的最大类间方差来分离背景与目标，当背景部分与目标部分的方差达到最大时，其分割效果最佳。


技术实现要素：

7.为了实现夜间输电线电晕放电的精确分割，本发明提供了基于夜间紫外成像技术的输电线电晕放电图像分割方法，引入deeplabv3 深度学习语义分割模型对紫外图像放电区域整体进行类别分割，结合改进otsu算法对语义分割结果进行后处理，从而实现对电晕放电区域的精确分割。
8.本发明采用的技术方案是：基于夜间紫外成像技术的输电线电晕放电图像分割方法，通过紫外成像仪进行输电线电晕放电检测，采集紫外巡检图像，通过deeplabv3 网络对
紫外巡检图像进行电晕放电分割，然后通过改进otsu算法调整紫外巡检图像的类间方差，对放电区域方差自适应加权使得分割阈值逼近理想阈值。
9.进一步优选，所述deeplabv3 网络包括编码器、解码器两部分，选取resnet50网络作为deeplabv3 网络的特征提取主干网络，在编码过程中，首先通过resnet50网络对输入的紫外巡检图像进行特征提取，并由resnet50网络末端的空洞卷积空间金字塔模块接收提取的特征图作为输入，再经过具有多个不同采样率的空洞卷积捕获电晕放电的特征信息，最后得到放电紫外图像的高层次特征经通道拼接后卷积得到高层次特征图像，并将高层次特征图像输入到解码器中进行处理；在解码过程中，首先将编码器提取到的高层次特征图像进行上采样操作，然后经通道拼接和卷积层处理，将高层特征图与编码过程中的浅层特征相结合，最后再次将结合后的特征进行上采样处理，还原成与输入时同等尺寸图像，从而完成电晕放电分割，输出分割后的紫外巡检图像。
10.进一步优选，构建紫外巡检图像数据集，并分为训练部分和测试部分，对deeplabv3 网络进行训练。
11.进一步优选，所述改进otsu算法分割原理为：假设图像像素点总数为n，将其灰度分为m个等级，xi表示图像的灰度级为i时的像素点数量，则灰度级i出现的概率为：pi=xi/n；引入初始阈值t，根据灰度级是否大于t可将图像的像素点分成目标m0和背景m1两类，灰度级为1～t的像素点属于目标m0，灰度级为t 1～m的像素点属于背景m1；p0(t)、p1(t)分别表示目标m0和背景m1出现的概率；q0(t)、q1(t)分别表示目标m0和背景m1的平均灰度级，则有：的平均灰度级，则有：的平均灰度级，则有：的平均灰度级，则有：类间方差定义为：令t从1-m变化，当类间方差达到最大时，t为所求的最佳阈值，记作t
best
，otsu算法的最佳阈值等于最佳阈值时目标m0的平均灰度级q0(t
best
)和最佳阈值时背景m1的平均灰度级的平均值q1(t
best
)，即：
改进otsu算法类间方差定义为：其中ω为权重，其值范围为[0,1]；令ω=p0(t)，当图像中光斑比较多，p0(t)值较大，赋予放电目标区域方差的权重ω较大，反之，ω较小，从而实现对放电目标区域方差自适应加权。
[0012]
进一步优选，所述resnet50网络由4个卷积残差块和12个恒等残差块组成，结构依次为：第1个卷积残差块后接2个恒等残差块，第2个卷积残差块后接3个恒等残差块，第3个卷积残差块后接5个恒等残差块，第4个卷积残差块后接2个恒等残差块。
[0013]
本发明的有益效果：基于deeplabv3 语义分割方法的引入，有效解决了图像中放电区域与背景区域对比度不明显导致难以分割的问题，在输电线电晕放电检测中，夜间型紫外成像仪拍摄的图像，其电火花形态的光斑区域与电力设备区别明显，由于其放电区域形态与背景区别明显，通过deeplabv3 可以将放电区域大致分割出来；改进otsu算法的加入会调整放电图像的类间方差，对放电区域方差自适应加权使得分割阈值逼近理想阈值，此时利用改进otsu算法对deeplabv3 语义分割结果进行后处理，从而提高放电目标区域的分割精度。
附图说明
[0014]
图1为deeplabv3 网络结构图。
[0015]
图2 为deeplabv3 训练损失函数曲线。
[0016]
图3为 deeplabv3 测试集分割精度。
具体实施方式
[0017]
下面结合附图进一步详细阐明本发明。
[0018]
基于夜间紫外成像技术的输电线电晕放电图像分割方法，通过紫外成像仪进行输电线电晕放电检测，采集紫外巡检图像，通过deeplabv3 网络对紫外巡检图像进行电晕放电分割，然后通过改进otsu算法调整紫外巡检图像的类间方差，对放电区域方差自适应加权使得分割阈值逼近理想阈值，从而提高放电目标区域的分割精度。紫外巡检图像在经过语义分割处理后，其电晕放电区域的灰度值与背景的灰度值对比明显，从而便于阈值分割算法从语义分割结果中精确分割出放电区域；根据语义分割后紫外巡检图像特点，本发明采用改进otsu算法对分割后的紫外巡检图像分别进行阈值分割。
[0019]
本实施例中，deeplabv3 网络包括编码器、解码器两部分，如图1所示，选取resnet50网络作为deeplabv3 网络的特征提取主干网络，resnet50网络用于克服deeplabv3 网络加深导致的学习效率低、无法有效提高准确率的问题。resnet50网络主要由4个卷积残差块（conv-block）和12个恒等残差块（identity-block）组成，结构依次为：第1个卷积残差块后接2个恒等残差块，第2个卷积残差块后接3个恒等残差块，第3个卷积残差块后接5个恒等残差块，第4个卷积残差块后接2个恒等残差块。其中卷积残差块用来调整输
入图像的尺寸和通道数，恒等残差块用以串联网络及增加网络层数。在编码过程中，首先通过resnet50网络对输入的紫外巡检图像进行特征提取，并由resnet50网络末端的空洞卷积空间金字塔模块（atrous spatial pyramid pooling, aspp）接收提取的特征图作为输入，再经过具有多个不同采样率的空洞卷积捕获电晕放电的特征信息，多个不同采样率的空洞卷积包括1
×
1卷积、卷积核r=6的3
×
3卷积、卷积核r=12的3
×
3卷积、卷积核r=18的3
×
3卷积和全局池化，最后得到放电紫外图像的高层次特征经通道拼接后1
×
1卷积得到高层次特征图像，并将高层次特征图像输入到解码器中进行处理。在解码过程中，首先将编码器提取到的高层次特征图像进行4倍上采样操作，然后经通道拼接和3
×
3卷积层处理，将高层特征图与编码过程中的浅层特征相结合，最后再次将结合后的特征进行4倍上采样处理，还原成与输入时同等尺寸图像，从而完成电晕放电分割，输出分割后的紫外巡检图像。
[0020]
本实施例中，紫外巡检图像是某网省公司利用filin-6夜间型紫外成像仪进行输电线电晕放电检测时保留的巡检图像资料。对获取的紫外巡检图像进行逐个处理，处理后的图像大小统一缩放为 640*368，并剔除缺陷图像。将紫外巡检图像分为电晕光斑和背景两类，背景主要有输电线、其他电力部件、天空等；紫外巡检图像中能明显判断出电晕光斑的部分逐个标注，标注区域内尽可能包含较完整的光斑；多个电晕光斑堆叠时，尽量单独标注每个光斑区域。所有图像标签均采用labelme自行标注，生成 json格式文件，并用于训练deeplabv3 网络。本实施例构建了共含有1286张图像的紫外巡检图像数据集，随机选取已标注图像中的1028张图像构成紫外巡检图像数据集的训练部分，剩余的258张图像构成了测试部分。对deeplabv3 网络进行训练时，经过多次实验优化，最终参数设置为：训练最小批次为20，初始学习率为0.001，最大迭代次数为300次以控制deeplabv3 网络训练时间成本。
[0021]
deeplabv3 网络采用交叉熵作为损失函数，定义如式（1）所示：其中：e为交叉熵，wc为真实类别c的损失权重；zj为第j个像素，pc(zj)为像素zj属于真实类别c的概率，c为总的类别数。
[0022]
训练过程如图2和图3所示，deeplabv3 网络在epoch为250左右趋于收敛，验证准确率为 84.94%，验证损失为 0.164。
[0023]
为了验证deeplabv3 网络的性能，选取平均交并比（miou）作为评价语义分割精度的指标，miou表示的是真实标签与分割结果的交集与并集之比的平均值，可以用来反映真实标签与模型分割目标区域的重合度。为分析deeplabv3 网络的有效性，将deeplabv3 与unet、fcn以及segnet等三种语义分割模型分别进行实验对比，各语义分割模型的在测试集上的测试效果如表1所示。
[0024]
测试分割结果显示，deeplabv3 网络能够从复杂背景中识别分割出放电位置，得
到大致的放电区域，但仍难以避免会误分割一些非放电背景区域。
[0025]
otsu算法分割原理为：假设图像像素点总数为n，将其灰度分为m个等级，xi表示图像的灰度级为i时的像素点数量，则灰度级i出现的概率为：pi=xi/n；引入初始阈值t，根据灰度级是否大于t可将图像的像素点分成目标m0和背景m1两类，灰度级为1～t的像素点属于目标m0，灰度级为t 1～m的像素点属于背景m1；p0(t)、p1(t)分别表示目标m0和背景m1出现的概率；q0(t)、q1(t)分别表示目标m0和背景m1的平均灰度级。则有：的平均灰度级。则有：的平均灰度级。则有：的平均灰度级。则有：类间方差定义为：令t从1-m变化，当类间方差达到最大时，t为所求的最佳阈值，记作t
best
，otsu算法的最佳阈值等于最佳阈值时目标m0的平均灰度级q0(t
best
)和最佳阈值时背景m1的平均灰度级的平均值q1(t
best
)，即：otsu算法中，阈值会靠近方差较大的一类，将其所属类别的区域分割成方差较小的另一类，使得两类区域大小接近。由于检测紫外巡检图像放电目标区域较小，背景区域较大，需要使放电区域方差变小才能使otsu算法分割阈值逼近理想阈值。于是，考虑对放电目标区域方差加权使之小于原始方差，改进otsu算法类间方差定义为：其中ω为权重，其值范围为[0,1]。本发明令ω=p0(t)，当图像中光斑比较多，p0(t)值较大，赋予放电目标区域方差的权重ω较大，反之，ω较小，从而实现对放电目标区域方差自适应加权。
[0026]
为了评判分割效果，引入平均像素精度（mpa）、平均交并比（miou）这两个指标作为衡量分割方法精度的标准。mpa表示所有类别像素正确分类概率的均值，其侧重表现像素分
类的准确率，而miou侧重表现模型分割目标区域的完整性以及分割位置的准确性。
[0027]
为了说明本发明的有效性，先使用传统的otsu算法对电晕放电目标进行分割，进行实验对比，发现otsu算法能够分割部分放电区域，但是紫外巡检图像中还存在大量噪声，分割效果不佳。而后使用本发明提出的改进otsu算法，实验表明，改进otsu算法具有良好的分割效果。实验过程中先使用基础模型分割，即传统otsu算法对deeplabv3 网络处理得到的放电区域进行分割，然后对otsu算法进行改进，引入本发明分割方法（改进otsu算法 deeplabv3 网络）再次进行实验，实验对比结果如表2所示。
[0028]
以上三种分割方法的实验结果对比，otsu算法分割结果存在大量噪声，对电晕放电的检测能力差，由于夜间型紫外成像仪拍摄的放电图像中光斑与背景的对比度不明显，从而无法实现有效识别及分割；otsu算法 deeplabv3 网络可以较好地分割出电晕放电信息，但对于光斑细节处分割不佳，这是因为紫外图像中光斑区域较小，其分割阈值大于理想阈值，于是在对deeplabv3 语义分割结果进行后处理分割时，导致会误分割部分背景区域；改进otsu算法 deeplabv3 网络考虑了放电区域较小情况下，对放电目标区域方差加权使之小于原始方差，从而实现对放电目标区域方差自适应加权，改善了对背景区域误分割的问题，能够完整地分割电晕放电区域，效果最好。
[0029]
针对夜间输电线电晕放电的紫外巡检图像的分割问题，本发明提出了放电目标区域精确分割方法。首先通过deeplabv3 网络对紫外巡检图像放电区域整体进行类别分割得到大致区域，再利用otsu算法对语义分割结果进行后处理，从而得到对电晕放电区域精确分割的结果。实验表明：（1）otsu算法无法对夜间电晕放电紫外巡检图像进行有效的识别分割；（2）本发明提出的deeplabv3 网络结合改进otsu算法，平均像素精度为93.97%，平均交并比为 90.85%，分割效果良好；（3）本发明的方法可用于对输电线的紫外巡检图像实现电晕放电精准快速分割。
[0030]
以上所述仅表达了本发明的优选实施方式，并非是对本发明作其它形式的限制，任何熟悉本专业的技术人员可能利用上述揭示的内容加以更改或改型为等同变化的等效实施例。但是，凡是未脱离本发明技术方案内容，依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与改型，仍属于本发明技术方案的保护范围。