基于激光雷达与视觉融合的电力作业近电预警方法及系统与流程

摘要: 本技术涉及电力作业安全监测,特别是涉及一种基于激光雷达与视觉融合的电力作业近电预警方法、系统、计算机设备及存储介质。背景技术:1、随着电力系统规模不断扩大,输变...
基于激光雷达与视觉融合的电力作业近电预警方法及系统与流程

本技术涉及电力作业安全监测,特别是涉及一种基于激光雷达与视觉融合的电力作业近电预警方法、系统、计算机设备及存储介质。

背景技术:

1、随着电力系统规模不断扩大,输变电线路日益复杂,高空作业和近电作业频率显著提高。在高压带电设备安装、检修和维护过程中,人员或施工机具与带电设备的安全距离监控成为保障作业安全的关键环节。激光雷达和视觉传感器被逐步引入电力安全监测领域,以实现对作业现场目标的三维空间感知和图像识别。

2、然而,电力作业现场存在高压输变电线路产生的强工频电磁场,该电磁场会对激光雷达的回波信号产生干扰,导致点云数据中出现与电磁场强度相关的动态噪声,影响目标空间位置的准确感知。同时,输电导线在风力作用下会发生微风振动或舞动,导线振幅的实时变化导致安全距离边界处于动态波动状态,而现有系统多采用固定的安全距离阈值进行判定,无法适应导线振动导致的实时距离变化。此外,现有激光雷达与视觉的融合方式多为特征拼接或加权融合,缺乏对图像特征与点云时序特征之间跨模态关联关系的深度建模,难以在高噪声环境下实现目标的高精度识别与定位。

技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够在强电磁干扰和导线振动环境下实现目标精准感知与分级预警的基于激光雷达与视觉融合的电力作业近电预警方法、系统、计算机设备及存储介质。

2、第一方面,本技术提供了一种基于激光雷达与视觉融合的电力作业近电预警方法。所述方法包括:

3、获取同步采集的三维点云数据、二维图像数据以及工频电磁场强度数据;根据所述工频电磁场强度数据,对所述三维点云数据中点云点的坐标进行修正,获得修正后的点云数据;其中,修正方向为远离高压带电设备的方向,且修正幅度与所述工频电磁场强度数据正相关;

4、将所述修正后的点云数据与所述二维图像数据进行时空对齐,通过构建由图像特征维度和点云时序维度组成的二维特征矩阵,对所述二维特征矩阵进行时序演化分析,识别作业现场的检测目标并输出所述检测目标的三维坐标;

5、从所述修正后的点云数据中提取导线位置的连续多帧数据,识别导线的振动类型,根据所述振动类型获取对应的补偿系数,并利用所述补偿系数和导线振幅对静态安全距离进行修正,获得动态安全距离;

6、根据高压带电设备的三维坐标和所述动态安全距离构建三级虚拟电子围栏,所述三级虚拟电子围栏包括警示区、预警区和危险区,根据所述检测目标的三维坐标与所述三级虚拟电子围栏的边界距离判定预警等级并触发对应的预警响应。

7、在其中一个实施例中,所述对所述三维点云数据中点云点的坐标进行修正,包括:

8、根据所述工频电磁场强度数据计算所述三维点云数据中各点云点的噪声权重;

9、对噪声权重超过预设权重阈值的点云点,以所述噪声权重与所述权重阈值的权重差值作为修正依据,其中,所述权重差值越大,修正幅度越大。

10、在其中一个实施例中,所述噪声权重通过如下方式计算:

11、对各所述点云点,以所述点云点的反射率与实时电磁场强度标量值的乘积作为分子,以电磁场强度标准差与点云反射率标准差的平方和作为分母,计算得到所述点云点对应的噪声权重。

12、在其中一个实施例中,所述将所述修正后的点云数据与所述二维图像数据进行时空对齐,包括:

13、通过标定矩阵将所述修正后的点云数据的三维坐标映射到所述二维图像数据的图像平面;

14、根据所述工频电磁场强度数据动态调整时间戳对齐容错窗口,其中所述容错窗口与所述工频电磁场强度数据正相关。

15、在其中一个实施例中,所述通过构建由图像特征维度和点云时序维度组成的二维特征矩阵,包括:

16、提取所述二维图像数据的图像特征向量;

17、提取所述修正后的点云数据中点云各时序帧的时序特征向量;

18、计算每一所述图像特征向量与每一所述时序特征向量的相似度度量值,以所述相似度度量值作为矩阵元素构建所述二维特征矩阵。

19、在其中一个实施例中,所述根据所述振动类型获取对应的补偿系数,并利用所述补偿系数和导线振幅对静态安全距离进行修正,获得动态安全距离,包括:

20、按照以下公式计算所述动态安全距离:

21、

22、其中,为根据电压等级查表获得的所述静态安全距离,为所述补偿系数,为所述导线振幅,为与第j个所述检测目标在空间上对应的导线。

23、在其中一个实施例中,还包括:

24、按照以下公式计算各所述检测目标的风险等级:

25、

26、其中,为第j个所述检测目标所处高压带电设备的电压等级,为第j个所述检测目标的三维坐标变化计算得到的检测目标接近速度,为速度阈值,为所述检测目标对应的振动类型的补偿系数,为与第j个所述检测目标在空间上对应的导线的振幅,为与第j个所述检测目标在空间上对应的导线的振动类型的最大振幅;

27、根据各所述检测目标的所述风险等级分配边缘计算资源,按照以下公式计算各所述检测目标的算力分配权重:

28、

29、其中,为平滑项,为安全权重,为第j个所述检测目标的延迟要求,为实时权重,且;

30、根据所述算力分配权重对目标检测任务进行优先级排序,并利用图形处理器执行风险等级最高的所述检测目标对应的检测任务,利用现场可编程门阵列并行处理其余检测任务。

31、第二方面,本技术还提供了一种基于激光雷达与视觉融合的电力作业近电预警系统。所述系统包括:

32、点云修正模块,用于获取同步采集的三维点云数据、二维图像数据以及工频电磁场强度数据;根据所述工频电磁场强度数据,对所述三维点云数据中点云点的坐标进行修正,获得修正后的点云数据;其中,修正方向为远离高压带电设备的方向,且修正幅度与所述工频电磁场强度数据正相关;

33、目标识别模块,用于将所述修正后的点云数据与所述二维图像数据进行时空对齐,通过构建由图像特征维度和点云时序维度组成的二维特征矩阵,对所述二维特征矩阵进行时序演化分析,识别作业现场的检测目标并输出所述检测目标的三维坐标;

34、距离计算模块,用于从所述修正后的点云数据中提取导线位置的连续多帧数据,识别导线的振动类型,根据所述振动类型获取对应的补偿系数,并利用所述补偿系数和导线振幅对静态安全距离进行修正,获得动态安全距离;

35、预警判定模块,用于根据高压带电设备的三维坐标和所述动态安全距离构建三级虚拟电子围栏,所述三级虚拟电子围栏包括警示区、预警区和危险区,根据所述检测目标的三维坐标与所述三级虚拟电子围栏的边界距离判定预警等级并触发对应的预警响应。

36、第三方面,本技术还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述基于激光雷达与视觉融合的电力作业近电预警方法。

37、第四方面,本技术还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述基于激光雷达与视觉融合的电力作业近电预警方法。

38、上述基于激光雷达与视觉融合的电力作业近电预警方法、系统、计算机设备及存储介质,通过同步采集三维点云数据、二维图像数据以及工频电磁场强度数据,能够实时感知作业现场的电磁环境信息;根据工频电磁场强度数据对点云点坐标进行修正,且修正方向为远离高压带电设备的方向、修正幅度与电磁场强度正相关,使点云坐标中的电磁干扰噪声得到自适应抑制,提升了强电磁干扰环境下目标空间定位的准确性;将修正后的点云数据与二维图像数据进行时空对齐后,构建由图像特征维度和点云时序维度组成的二维特征矩阵并对该矩阵进行时序演化分析,通过建立图像特征与点云时序特征之间的跨模态关联关系,实现了高噪声环境下目标的准确识别和三维空间定位;从修正后的点云数据中提取导线位置的连续多帧数据以识别振动类型,并根据振动类型获取对应的补偿系数对静态安全距离进行修正,使安全距离阈值能够自适应微风振动、舞动等不同导线振动工况,避免因导线振动导致的安全距离误判;通过三级虚拟电子围栏和目标与围栏边界距离的分级判定,实现了从提醒、警告到强制干预的递进式安全预警,最终提升了电力作业近电安全防护的可靠性。