激光雷达背景建模与虚拟围栏的施工安全监测系统和方法与流程
本发明涉及施工安全监测,尤其涉及一种激光雷达背景建模与虚拟围栏的施工安全监测系统和方法。
背景技术:
1、目前施工现场、供电场站和近电作业区域常见的安全监测方式主要包括人工值守、视频监控、红外对射、普通电子围栏、单点测距、普通摄像头识别以及人工划定危险范围后的人工巡检等。上述方案能够在一定程度上提示人员进入危险区域,但在复杂施工环境、户外供电设备场景和三维空间边界判断中仍存在明显不足。
2、其中,人工值守方式依赖人员经验,难以实现全天候连续监测,存在疲劳、视线遮挡、响应滞后以及记录不可追溯等问题。普通视频监控主要基于二维图像,缺少真实三维距离和高度信息,难以准确判断人员、机械或物体是否进入特定的空间区域;在逆光、夜间、雨雾、遮挡、背景复杂或摄像头抖动情况下识别稳定性下降。
3、红外对射、普通电子围栏和单点测距类设备通常只能形成线状或简单平面边界,难以表达施工现场中不规则多边形区域、高限区域和安全边界区域,无法同时判断“水平范围”和“高度范围”。
4、此外,已有部分三维点云监测方案虽然能够获取空间点云,但多采用固定矩形范围或简单距离阈值,区域配置灵活性不足,不能由客户端实时下发由多个点构成的多边形电子围栏,也缺少三维客户端联动的可视化编辑机制。部分点云差分方案未建立稳定的背景体素模型,容易将静态设备、地面、墙体、围栏、支架等背景点误判为目标;对于点云噪声、瞬时飞点、少量反射点缺乏连续帧确认与聚类过滤机制,容易误报警。
5、综上所述,现有技术亟需一种能够利用激光雷达建立三维背景、支持客户端下发多边形电子围栏、能够基于空间高度范围进行安全区域判断、能够过滤背景变化和点云噪声、同时能够将点云重建和报警结果实时传输的安全监测系统及方法。
技术实现思路
1、本发明提供了一种激光雷达背景建模与虚拟围栏的施工安全监测系统和方法。本发明通过体素化背景建模滤除静态环境干扰,利用三维虚拟围栏精确限定监测时空范围,并结合相机图像实现彩色可视化,从而实现精准、灵活、直观的施工安全监测。
2、第一方面,本发明实施例提供了一种激光雷达背景建模与虚拟围栏的施工安全监测系统,所述系统包括:激光雷达点云采集模块、相机采集模块、边缘计算处理终端、三维规划客户端、声光报警模块、网络通信模块以及供电模块;
3、所述激光雷达点云采集模块,用于获取施工区域的三维空间点云数据,对所述点云数据进行解析得到包含点坐标及反射强度信息的原始点云数据流,并将该原始点云数据流传输至所述边缘计算处理终端,为所述边缘计算处理终端的背景建图、区域检测、点云显示以及报警判断提供基础数据;
4、所述相机采集模块,用于持续获取监测现场的彩色图像帧,输出实时图像数据流传输至所述边缘计算处理终端,为所述边缘计算处理终端的点云着色和人员识别提供图像源;
5、所述三维规划客户端,用于接收所述边缘计算处理终端回传的彩色点云数据和识别图像数据,实现显示三维点云和查看识别画面;响应用户绘制操作生成包含区域顶点坐标及高度范围的检测区域配置数据,并通过所述网络通信模块下发至所述边缘计算处理终端,实现设置检测区域;以及接收并显示报警状态;
6、所述边缘计算处理终端,用于接收所述原始点云数据流、实时图像数据流和检测区域配置数据,执行背景建模、坐标转换、区域判断、变化检测及聚类过滤处理,输出报警控制信号至所述声光报警模块,并输出彩色点云数据和识别图像数据回传至所述三维规划客户端;
7、所述声光报警模块,用于响应于所述报警控制信号,执行声光报警动作,触发或解除声光报警;
8、所述网络通信模块,用于在所述边缘计算处理终端与所述三维规划客户端之间建立数据传输通道;
9、所述供电模块,用于连接外部交流市电,通过内部电源转换单元将交流电转换为系统各硬件模块所需的直流工作电压。
10、在一种可选的实现方式中,所述边缘计算处理终端包括背景体素建图模块、区域通信与管理模块、变化检测与聚类模块、报警控制模块、彩色点云发送模块以及图像人员检测模块;
11、所述背景体素建图模块,用于在设备静止状态下提取所述原始点云数据流中的静态场景点云,经离散化处理后生成背景体素地图,并将该背景体素地图提供至所述变化检测与聚类模块作为背景参考基准;
12、所述区域通信与管理模块,用于接收所述三维规划客户端下发的检测区域配置数据,将所述检测区域配置数据中的顶点坐标转换为雷达坐标系,生成雷达坐标系检测区域快照,并将该雷达坐标系检测区域快照提供至所述变化检测与聚类模块作为过滤条件;
13、所述变化检测与聚类模块,用于接收实时输入的原始点云数据流,利用所述雷达坐标系检测区域快照筛选出区域内点云,结合所述背景体素地图滤除静态背景点以提取变化点,并对变化点进行聚类和有效性判断,输出目标检测结果至所述报警控制模块;
14、所述报警控制模块,用于对所述目标检测结果进行连续帧去抖确认,生成所述报警控制信号;
15、所述彩色点云发送模块,用于根据雷达与相机标定参数对点云采样着色,并将彩色点云分包发送至三维规划客户端;
16、所述图像人员检测模块,用于独立读取相机图像,识别人员目标,并输出带框识别画面至三维规划客户端。
17、在一种可选的实现方式中,所述背景体素建图模块进一步用于统计体素在多个背景帧中的出现次数,仅保留出现比例不低于预设阈值且对应位置不存在待报警目标的体素,形成所述背景体素地图中的背景集合。
18、在一种可选的实现方式中,所述检测区域配置数据包括区域编号、区域启用状态、最小高度、最大高度以及多边形底面点集;
19、所述区域通信与管理模块进一步用于将所述多边形底面顶点与所述最小高度、最大高度组合,构建垂直柱体形状的检测区域,并将其映射为雷达坐标系下的多边形平面范围与高度范围,形成所述雷达坐标系检测区域快照。
20、第二方面,本发明实施例提供了一种激光雷达背景建模与虚拟围栏的施工安全监测方法,基于所述施工安全监测系统,所述方法包括:
21、启动激光雷达点云采集模块和相机采集模块,所述激光雷达点云采集模块输出三维点云,所述相机采集模块采集最新图像帧,产生原始点云数据流和实时图像数据流;
22、边缘计算处理终端加载相机内参、镜头畸变参数以及雷达至相机的旋转矩阵和平移向量,产生标定参数;
23、在设备静止状态下,所述边缘计算处理终端的背景体素建图模块采集原始点云数据流中的现场静态点云,将现场静态点云按体素尺寸离散存储,得到背景体素地图,作为判定背景点的背景参考基准;
24、三维规划客户端根据用户绘制结果发送检测区域数据,解析检测区域数据中每个区域的区域编号、启用状态、最小高度、最大高度以及若干平面顶点,产生检测区域配置数据;
25、所述边缘计算处理终端的区域通信与管理模块接收检测区域配置数据,将显示坐标系下的区域顶点转换为雷达坐标系,得到雷达坐标系检测区域快照,并写入区域管理器,作为点云过滤的区域判定依据;
26、所述边缘计算处理终端的变化检测与聚类模块周期性从原始点云数据流中取出当前窗口点云,利用雷达坐标系检测区域快照,判断区域快照中每个点的z高度是否处于区域高度范围内且x-y平面投影是否处于区域多边形内部,并筛选产生位于检测区域内的点云集合;
27、所述变化检测与聚类模块对位于检测区域内的点云集合调用背景体素邻域查询函数,结合背景体素地图进行比对,若当前点位于背景体素邻域内则判定为静态背景,否则判定为新增变化点,得到变化点集合;
28、当变化点集合中的点数达到最小阈值后,所述变化检测与聚类模块对变化点进行空间聚类得到若干变化目标,根据聚类点数、聚类尺寸、高度范围以及空间连续性过滤无效目标,得到有效变化目标检测结果;
29、所述边缘计算处理终端的报警控制模块根据有效变化目标检测结果,当检测到有效变化目标时连续命中帧数增加,当未检测到有效目标时连续未命中帧数增加,仅当连续命中帧数达到报警确认阈值时触发报警,产生报警控制信号,用于驱动声光报警模块;
30、所述边缘计算处理终端的彩色点云发送模块利用标定参数,将原始点云数据流中的点投影至实时图像数据流的图像平面进行着色,生成彩色点云数据和带框识别图像,并通过独立链路分包发送至三维规划客户端,实现监测结果的可视化。
31、在一种可选的实现方式中,将显示坐标系下的区域顶点转换为雷达坐标系,具体过程为:
32、定义激光雷达坐标系为
l,
l的x轴向前、y轴向左以及z轴向上并定义显示坐标系为
u,
u的x轴向右、y轴向上以及z轴向前;
33、定义一般坐标转换关系,公式为:
34、
35、式中,为显示坐标系中的点;为激光雷达坐标系中的对应点;为显示坐标系到雷达坐标系的旋转矩阵;为显示坐标系到激光雷达坐标系的原点之间的平移向量;
36、定义显示坐标系到激光雷达坐标系的旋转矩阵,公式为:
37、
38、式中,为显示坐标系到激光雷达坐标系的旋转矩阵;
39、定义将显示坐标系下的区域顶点转换为激光雷达坐标系的坐标转换公式,公式为:
40、
41、式中,为显示坐标系到激光雷达坐标系的原点之间的平移向量;为激光雷达坐标系中的点的在x轴的坐标值;为激光雷达坐标系中的点的在y轴的坐标值;为激光雷达坐标系中的点的在z轴的坐标值;为显示坐标系中的点的在x轴的坐标值;为显示坐标系中的点的在y轴的坐标值;为显示坐标系中的点的在z轴的坐标值;
42、所述边缘计算处理终端将显示坐标系下的检测区域顶点转换为雷达坐标系下的多边形及高度范围,形成所述雷达坐标系检测区域快照。
43、在一种可选的实现方式中,采用射线奇偶规则判断区域快照中每个点的x-y平面投影是否处于区域多边形内部,具体过程为:
44、设多边形相邻顶点为和,从待测点沿正x轴方向发出射线;
45、当判定公式同时成立时,判定射线与该边产生一次有效交点,所述判定公式为:
46、
47、式中,为待测点在x轴的坐标值;为待测点在y轴的坐标值;为多边形的第
j个顶点;
j为顶点索引;为第
j个顶点在x轴的坐标值;为第
j个顶点在y轴的坐标值;为第
j+1个顶点在x轴的坐标值;为第
j+1个顶点在y轴的坐标值;
48、统计有效交点总数,当有效交点总数为奇数时判定点在多边形内部,当点位于多边形边界上时按进入区域处理。
49、在一种可选的实现方式中,所述背景体素邻域查询的具体过程为:
50、设体素边长为
s,对任意待测点
p计算体素索引,公式为:
51、
52、式中,为待测点在x轴的坐标值;为待测点在y轴的坐标值;为待测点在y轴的坐标值;
s为体素边长;
p为待测点索引;为体素索引;为表示向下取整函数;
53、若存在背景体素属于所述背景体素地图中的背景集合
b,使得,其中,
b为背景体素,
b为背景集合,
r为邻域半径,为无穷范数,则判定待测点
p为背景点,否则判定为变化点;
54、所述背景体素地图的构建方法为:
55、统计体素在个背景帧中的出现次数,其中,为预设背景帧数量,为出现次数,仅保留出现比例不低于预设阈值的体素,形成背景集合。
56、在一种可选的实现方式中,所述变化点聚类与目标有效性过滤的具体过程为:
57、对变化点集合进行空间聚类,若第一变化点和第二变化点的欧式距离满足,则建立邻接关系,形成的连通分量构成变化目标簇,其中,为第一变化点;为第二变化点,为第一变化点和第二变化点的欧式距离,为欧式距离阈值;
58、计算每个簇的点数以及在x、y、z坐标轴方向的尺寸;
59、有效性判断条件的公式为:
60、
61、式中,为第
k个簇的点数;
k为簇索引;为最小聚类点数阈值;为簇在x坐标轴方向的尺寸;为簇在y坐标轴方向的尺寸;为簇在z坐标轴方向的尺寸;为宽度尺寸的下限值;为宽度尺寸的上限值;为深度尺寸的下限值;为深度尺寸的上限值;为高度尺寸的下限值;为高度尺寸的上限值;
62、仅当目标簇满足上述条件时,判定为有效变化目标。
63、在一种可选的实现方式中,分路通信及可视化的具体方式为:
64、所述边缘计算处理终端将彩色点云数据、带框识别图像和报警状态通过不同的端口或协议标识进行独立传输;
65、数据传输采用分包机制,每个数据包包含帧编号和分包序号,客户端仅组装当前会话中的最新帧数据,若旧帧数据尚未接收完整而新帧已到达,则丢弃旧帧数据;
66、所述点云着色过程利用相机内参和外参将雷达点投影至图像平面,计算投影像素坐标,若投影坐标有效则读取图像颜色赋予点云,否则采用雷达反射强度灰度值显示。
67、本技术实施例提供的技术方案至少带来以下有益效果:
68、1)抗干扰能力强,误报率低:本发明采用基于体素的多帧统计背景建模方法,能够有效滤除施工现场中静态设备、地面、墙体等固定背景;结合背景体素邻域查询和连续帧确认机制,能够消除点云噪声、瞬时飞点、雨雾反射等随机干扰,显著提高了监测系统的鲁棒性,解决了传统单帧检测易误报的问题。
69、2)三维空间监测精度高:相比于红外对射、普通电子围栏等只能形成平面或线状防护的方案,本发明构建了包含高度范围的垂直柱体检测区域,能够同时判断目标的水平位置和高度信息,实现了真正的三维立体空间防护,满足复杂施工场景(如高空作业、深基坑)的安全监测需求。
70、3)区域配置灵活直观:支持客户端实时下发多边形电子围栏配置,用户可根据施工进度灵活调整监测范围,解决了传统方案监测区域固定、调整困难的问题。通过显示坐标系与雷达坐标系的自动转换,实现了所见即所得的可视化编辑,降低了操作门槛。
71、4)监测结果可视化程度高:融合激光雷达与可见光图像数据,生成带颜色的三维点云并进行实时传输,弥补了纯雷达数据缺乏纹理、难以辨识目标的缺陷,为监控人员提供了直观、真实的现场三维场景,便于快速确认警情和远程指挥。
72、5)系统可靠性与实时性好:采用多通道独立网络传输机制,将报警检测链路与可视化链路分离,即使图像数据传输受阻,核心报警功能仍可独立运行,保障了安全监测的可靠性。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com