一种风电机舱电气设备热故障识别方法

技术特征：
1.一种风电机舱电气设备热故障识别方法，其特征在于，包括以下步骤：s1、获取风电机舱电气设备的可见光图像、与可见光图像对应的红外温度矩阵；s2、把红外温度矩阵可视化为红外图像，并使用双线性插值对其进行超分处理，得到高分辨率红外图像；s3、使用生成对抗网络对可见光图像进行超分处理，得到高分辨率可见光图像；s4、使用自适应阈值的曲率尺度空间角点检测与随机抽样一致性算法对可见光与红外图像进行角点匹配与配准；s5、利用图像融合卷积神经网络将对应两种图像融合，同时根据光敏传感器将光照条件分为正常光照与低光照两种情况；正常光照时，以可见光100％ 红外0％的比例融合；低光照时，以夜视可见光(黑白)100％ 红外0％的比例融合，得到融合图像；s6、使用labelimg软件对融合图像中的线缆接口进行标注，生成xml文件，制作标注数据集；s7、设置深度学习网络yolov4训练参数，采用标注数据集对网络进行训练，得到目标电气设备网络模型，并以此检测出目标区域的瞄点框；s8、采用mask rcnn深度网络对含有目标区域的瞄点框进行目标分割，得到目标轮廓区域。2.根据权利要求1所述的风电机舱电气设备热故障识别方法，其特征在于，s1中，所述获取电气设备的可见光图像、与可见光图像对应的红外温度矩阵，具体包括：将配有可夜视可见光相机和红外阵列传感器安装在巡检机器人上，将红外阵列传感器对准目标电气设备，同时拍摄对应可见光图像。3.根据权利要求1所述的风电机舱电气设备热故障识别方法，其特征在于，s2中，红外温度矩阵为256*192规格，采用opencv中的applycolormap函数将温度区间映射在colormap_jet色域中，最终输出红外伪彩图，完成温度可视化；双线性插值实现过程：首个像素之前插入2个点，最后一个像素之后插入1个点，但在下次插值时，应首个之前插值1个点，末个像素之后插值2个点，以达到图像平衡。4.根据权利要求1所述的风电机舱电气设备热故障识别方法，其特征在于，s3中，选取esrgan生成对抗网络的预训练模型对可见光进行超分处理。5.根据权利要求1所述的风电机舱电气设备热故障识别方法，其特征在于，s4中，css角点检测与ransac匹配算法对可见光与红外图像进行角点匹配与配准过程如下：s4.1、提取边缘图中所有的连续轮廓并存为元胞数组；s4.2、向另一个方向提取边缘；s4.3、将轮廓元胞数组中的起始点存起来并判定是否为闭合轮廓；s4.4、还原边缘图像；s4.5、计算曲率；s4.6、寻找曲率局部最大值作为角的候选者；s4.7、在极值中，奇数点是最小值，偶数点是最大值；s4.8、对不同长度的轮廓使用不同比例的曲率，设置自适应局部阈值，并对长轮廓线的
绝对曲率函数进行平滑处理，与自适应局部阈值比较，去除假角；s4.9、ransac算法删除误匹配点；s4.10、得到结果。6.根据权利要求1所述的风电机舱电气设备热故障识别方法，其特征在于，s6中，使用labelimg软件人工对图像中目标电气设备进行标注时，应将图像中所有清晰目标区域标注，如果图像失焦模糊，则将图片删除。7.根据权利要求1所述的风电机舱电气设备热故障识别方法，其特征在于，s7中，利用yolo v4检测目标时，置信度设为0.9。

技术总结
本发明提供一种全天候、低成本的风电机舱电气设备热故障识别方法，基于光敏传感器的自适应调节摄像模组，可克服目标识别中由于夜晚造成的光照条件不足的弊端；基于红外阵列传感器的红外模组，通过温度可视化转化为红外图像，解决红外设备低成本化的问题；基于多模态的可见光红外图像配准算法，并利用图像融合技术增强图像质量，解决原始边缘细节保留不充分问题；基于深度学习的目标检测，从融合图像中分割出电气设备，并对其进行轮廓提取。本发明方法不仅能够替代人工巡检，并且相比于传统的对红外图像识别方法，更加稳定可靠，对风机机舱内部电气设备热故障规律的可靠性研究具有重要意义，对风机组运维管理优化有积极帮助。对风机组运维管理优化有积极帮助。对风机组运维管理优化有积极帮助。


技术研发人员：王超 杨洁 孟琳 余雨 李飞 朱佳佳
受保护的技术使用者：南京工程学院
技术研发日：2022.08.31
技术公布日：2022/11/29