一种空气开关状态的智能识别方法、识别装置及存储介质与流程

1.本发明属于图像处理和机器视觉的领域，具体涉及一种用于变电站的空气开关状态的智能识别方法、识别装置及存储介质。


背景技术：

2.在变电站等电力系统中，设备的安全运行是最重要的安全保障之一，而各种空气开关是确保系统安全运行的重要保障。变电站中空气开关状态的判断和监控，在整体系统的状态控制中显得尤为重要。空气开关状态的智能识别系统，协助监视各种空气开关的状态，对保障设备系统安全运行，起到了重要的作用。现有某些智能监控系统中，加入了空气开关状态的检测，利用摄像机获取空气开关的实时图像或视频，用算法自动识别空气开关的状态。
3.目前，空气开关状态智能识别的关键核心技术主要包括图像信息的获取、图像特征的提取和图像类别的判断。图像特征的提取一般包括简单特征比如颜色、形状和纹理特征的提取，较复杂特征比如人工设计的局部描述子特征等。图像类别的判断，一般是将提取出的不同类别图像的特征，在特征向量空间中通过分类策略，进行划分。
4.现有空气开关状态的智能识别方法中，主要方法为通过图像预处理和图像特征的提取，之后通过特征区分来进行分类。该方法需要图像有较高的成像质量，且需要人工进行复杂的特征设计和提取过程，整体流程较为复杂，而且需要前期获取大量对应场景下的样本数据，算法的适用范围和鲁棒性都有一定的限制。
5.有鉴于此，特提出本发明。


技术实现要素：

6.本发明的目的是提供一种空气开关状态的智能识别方法、识别装置及存储介质，其可以识别多种形态、颜色和拍摄条件下的空气开关的状态。
7.为了实现上述目的，本发明提供的一种空气开关状态的智能识别方法，包括以下步骤：
8.s1：获取空气开关图像，截取关键区域的图像信息，作为待识别的空气开关图像；
9.s2：对待识别的空气开关图像进行校正；
10.s3：获取空气开关图像的颜色空间分量；
11.s4：进行图像预处理；
12.s5：进行图像二值化和形态学操作；
13.s6：将空气开关图像分成上下两个区域，并计算上下两个区域面积比例；
14.s7：判断上下两个区域面积比例是否大于1，如果大于1，则判定状态为连接；如果不大于1，则判定状态为断开。
15.进一步地，步骤s1之前包括：获取空气开关的模板图像，在空气开关的模板图像中标记空气开关的关键区域；
16.步骤s1还包括：将获取的空气开关图像与空气开关的模板图像进行对比，在空气开关图像中截取相同的关键区域的图像信息，作为待识别的空气开关图像。
17.进一步地，步骤s3包括：将步骤s2中获取的空气开关图像的rgb空间图像转换为hsv空间图像；提取图像的hsv颜色空间分量。
18.进一步地，步骤s4中，图像预处理包括滤波平滑或直方图均衡化。
19.进一步地，步骤s5中，图像二值化的方法包括固定阈值二值化、自适应阈值二值化和otsu大津二值化；形态学操作包括开运算和闭运算操作。
20.进一步地，步骤s6包括以下步骤：
21.s601：将步骤s5中获取的图像等比例划分成上下两个区域；
22.s602：计算步骤s601中获取的上下两个区域的面积比例，即上下两个区域中像素和的比值。
23.进一步地，上下两个区域的面积比例的计算方法如下：
[0024][0025]
其中，p为上下两个区域的面积比例，m为图像水平方向像素数，n为图像垂直方向像素数，s为上区域像素点的横坐标，t为上区域像素点的纵坐标，g(s，t)为上区域像素点(s，t)的二值化图像像素值；x为下区域像素点的横坐标，y为下区域像素点的纵坐标，f(x，y)为下区域像素点(x，y)的二值化图像像素值。
[0026]
进一步地，空气开关图像的左上角顶点为起始点坐标(1，1)。
[0027]
本发明还提供了一种空气开关状态的智能识别装置，包括摄像机、图像处理模块和微处理器、以及供电模块；
[0028]
所述摄像机用于获取空气开关图像，并发送给所述图像处理模块；
[0029]
图像处理模块和微处理器用于根据上述的空气开关状态的智能识别方法来判断空气开关状态；
[0030]
所述供电模块用于为所述摄像机和所述图像处理模块和微处理器供电。
[0031]
本发明还提供了一种存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现根据上述的空气开关状态的智能识别方法的步骤。
[0032]
本发明提供的一种空气开关状态的智能识别方法、识别装置及存储介质，具有如下有益效果：本发明可以识别多种形态和拍摄条件下的空气开关状态，且不需要提前获取大量样本数据，大大提高了算法的易用性和通用性。
附图说明
[0033]
图1为本发明的空气开关状态的智能识别方法的流程图。
[0034]
图2为根据本发明的空气开关状态的智能识别方法的步骤s4进行图像预处理后的空气开关图像的示例；
[0035]
图3为根据本发明的空气开关状态的智能识别方法的步骤s5进行图像二值化处理
后的空气开关图像的示例；
[0036]
图4为根据本发明的空气开关状态的智能识别方法的步骤s5中进行形态学操作后的空气开关图像的示例。
[0037]
图5是本发明的空气开关状态的智能识别装置的示意图。
具体实施方式
[0038]
为了使本技术领域的人员更好地理解本发明方案，下面结合具体实施方式对本发明作进一步的详细说明。
[0039]
除非另有其它明确表示，否则在整个说明书和权利要求书中，术语“包括”或其变换如“包含”或“包括有”等等将被理解为包括所陈述的元件或组成部分，而并未排除其它元件或其它组成部分。
[0040]
如图1所示，一种空气开关状态的智能识别方法，其能够解决现有空气开关状态的智能识别方法的通用性和鲁棒性较差的问题，具体包括以下步骤：
[0041]
s1：获取空气开关图像，截取关键区域的图像信息，作为待识别的空气开关图像。
[0042]
本步骤之前还包括：获取空气开关的模板图像，人为地标注图像中空气开关的关键区域，其中，该关键区域要将整个开关实体包含在内，包括活动部件在不同状态下可能出现的位置
[0043]
具体的，本步骤将获取的空气开关图像与空气开关的模板图像进行对比，在空气开关图像中截取相同关键区域的图像信息，作为待识别的空气开关图像。
[0044]
s2：对待识别的空气开关图像进行校正。
[0045]
由于图像拍摄角度等原因，在步骤s1中获取的空气开关图像，其在图像中存在倾斜和变形，需要将其进行校正为与图像边缘平行的矩形状态，以增强其后续识别的准确性。具体步骤为：
[0046]
s201：标定待识别的空气开关图像中开关的四个顶点坐标，包括左上顶点(x0，y0)、右上顶点(x1，y1)、左下顶点(x2，y2)和右下顶点(x3，y3)，计算校正后的矩形宽度w
rt
和高度h
rt
，计算公式如下：
[0047][0048][0049]
其中，t为矩形大小调整比例，t一般取值0.5
‑
1.5，优选取t＝1.0，也可取其他值；当t＝1.0时，表示变换后的图像像素与原来基本一致，当图像像素值过大时，取t小于1.0时可以减小图像像素值，从而在实现后面步骤时减少计算量；当图像像素值过小时，取t大于1.0可以增大图像像素值，使后续处理结果更精确。
[0050]
s202：计算投影变换矩阵m
rt
，该投影变换矩阵是将步骤s201中的四个顶点坐标依次投影变换到左上顶点(x0，y0)、右上顶点(x0 w
rt
‑
1，y0)、左下顶点(x0，y0 h
rt
‑
1)和右下顶点(x0 w
rt
‑
1，y0 h
rt
‑
1)。
[0051]
该投影变换矩阵的计算方法按照通用的4个二维点对之间的透射变换矩阵计算方法进行计算即可，比如开源计算机视觉库opencv中即有的对应的计算函数getperspectivetransform。若变换前的图像表示为(x
o
，y
o
)，变换后的图像表示为(x
n
，y
n
)，
具体计算公式为：
[0052][0053][0054]
其中，(x
n
，y
n
)是未进行缩放的投影变换后的图像坐标；
[0055]
k
n
表示缩放因子，缩放因子可以根据实际的情况进行计算。
[0056]
s3：获取颜色空间分量。
[0057]
具体地，将步骤s2中获取的空气开关图像的rgb空间图像转换为hsv空间图像，该转换为根据图像处理领域通用的rgb空间到hsv空间的转换公式，逐像素点用原图的r、g、b三通道分量值，计算出h、s、v分量值；之后提取图像的hsv颜色空间分量，该分量包括但不限于色度h、饱和度s和亮度v。不同种类的空气开关选取不同的颜色空间分量。
[0058]
s4：进行图像预处理，用于图像去噪和图像增强。
[0059]
该预处理的目的是进行图像去噪和图像增强，以利于后续获取更准确的二值化图像。预处理的具体操作包括但不限于滤波平滑、直方图均衡化等。
[0060]
图2中示出了通过步骤s4进行图像预处理后的空气开关图像的示例。
[0061]
s5：进行图像二值化和形态学操作。
[0062]
图像二值化的方法包括但不限于固定阈值二值化、自适应阈值二值化、otsu大津二值化等。图像二值化即将像素值由0
‑
255范围变为0
‑
1，目的是使能判断开关状态的活动部件区域像素值为1，而背景像素值为0。
[0063]
图3中示出了通过步骤s5进行图像二值化处理后的空气开关图像的示例，与图2相比，突出显示了背景区域和活动部件区域之间的轮廓。
[0064]
形态学操作包括开运算和闭运算等操作。形态学操作的目的是使像素值为1的活动部件区域变得更加精准，比如开运算可以消除小的噪声块(属于背景区域但像素值为1的区域)，闭运算可以消除活动部件区域内的小黑洞(属于活动部件区域但像素值为0的区域)，进行该操作后，后续的计算结果将更为精准。
[0065]
图4中示出了通过步骤s5进行形态学操作后的空气开关图像的示例，与图3相比，消除了背景区域中的小的噪声块以及活动部件区域内的小黑洞。
[0066]
s6：将图像分成上下两个区域，并计算上下两个区域面积比例p。
[0067]
该步骤的具体操作如下：
[0068]
s601：将步骤s5中获取的图像等比例划分成上下两个区域，上区域为r1，下区域为r2。
[0069]
s602：计算步骤s601中获取的上下两个区域的面积比例p，即上下两个区域中像素和的比值p，其计算公式如下：
[0070][0071]
其中，m为图像水平方向像素数，n为图像垂直方向像素数，s为上区域像素点的横坐标，t为上区域像素点的纵坐标，g(s，t)为上区域像素点(s，t)的二值化图像像素值；x为下区域像素点的横坐标，y为下区域像素点的纵坐标，f(x，y)为下区域像素点(x，y)的二值化图像像素值。
[0072]
并且，所涉及坐标以图像左上角顶点为起始点坐标(1，1)。
[0073]
s7：判断上下两个区域面积比例是否大于1，如果大于1，则判定状态为连接；如果不大于1，则判定状态为断开。
[0074]
具体地，判断步骤s6获取的上半区域相对于下半区域的非零像素的面积比例p是否满足以下条件：
[0075]
p＞1
[0076]
如果上述不等式成立，则判定状态为连接(on)；如果不成立，则判定状态为断开(off)。
[0077]
s8：获取步骤s7的结果，确定为最终的识别结果。
[0078]
本发明的步骤s2到步骤s7，通过利用图像校正等处理，结合空气开关区域非零像素值比例关系，判定空气开关的状态，具有良好的检测效果。
[0079]
基于同样的发明构思，如图5所示，一实施方式中还提供了空气开关状态的智能识别装置，其包括：摄像机、图像处理模块和微处理器2、以及供电模块3。
[0080]
摄像机1用于获取空气开关图像，并发送给所述图像处理模块2用于识别空气开关状态。
[0081]
图像处理模块和微处理器2包括图像处理模块201和微处理器202。
[0082]
图像处理模块201用于对空气开关图像进行处理，具体地，图像处理模块201采用上述空气开关状态的智能识别方法中的步骤s2
‑
s6来进行处理。
[0083]
微处理器202用于根据处理后的图片来识别空气开关状态；其中，微处理器202采用上述空气开关状态的智能识别方法中的步骤s7来判断开关分合指示牌状态。
[0084]
供电模块3用于为摄像机1和图像处理模块和微处理器2供电。
[0085]
基于同样的发明构思，一实施方式中还提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述一实施方式所述的空气开关状态的智能识别方法的步骤。
[0086]
本领域内的技术人员应明白，本技术的实施例可提供为方法、系统、或计算机程序产品。因此，本技术可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本技术可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd
‑
rom、光学存储器等)上实施的计算机程序产品的形式。
[0087]
本技术是参照根据本技术实施例的方法、设备(系统)、和计算机程序产品的流程
图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0088]
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0089]
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0090]
本文中应用了具体个例对发明构思进行了详细阐述，以上实施例的说明只是用于帮助理解本发明的核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离该发明构思的前提下，所做的任何显而易见的修改、等同替换或其他改进，均应包含在本发明的保护范围之内。