一种无人装载机的作业区域人员识别方法及作业装置与流程

摘要: 本发明涉及工程机械控制,具体涉及一种无人装载机的作业区域人员识别方法及作业装置。背景技术:1、大吨位铰接式装载机车身长、机罩高,铲斗和动臂遮挡前下方视线,车尾及...
一种无人装载机的作业区域人员识别方法及作业装置与流程

本发明涉及工程机械控制,具体涉及一种无人装载机的作业区域人员识别方法及作业装置。

背景技术:

1、大吨位铰接式装载机车身长、机罩高,铲斗和动臂遮挡前下方视线,车尾及两侧存在大范围视野盲区。无人装载机通常具备两种运行模式。

2、全无人驾驶模式下,车载毫米波雷达检测到作业区域内有人员进入时自动控制整机停止作业,该环节不依赖人工判断,安全性有保障。

3、远程遥控模式下,一类现有做法是将各方向摄像头画面全部呈现在远程操作台屏幕上,操作手在主作业画面之外还要持续监视多路盲区画面。另一类做法是检测到人员即弹窗提醒,其判定依据是图像内的固定告警区域,但是铰接式装载机转向时前后车架相对偏转,固定告警区域存在漏报误报;此外,铲装作业扬尘、逆光条件下纯视觉检测的漏检率升高,而这恰是装载机作业的常态工况。

技术实现思路

1、本发明为了解决上述技术问题,提供一种无人装载机的作业区域人员识别方法及作业装置,实现了实时更新的危险区,并确定风险等级,在风险等级达到预设等级时触发整机限速或驻车。

2、本发明通过下述技术方案实现:

3、一种无人装载机的作业区域人员识别方法,包括:

4、获取所述装载机的后视摄像头采集的图像,对所述图像进行人员检测;

5、在检测出人员目标的情况下,将所述人员目标的图像位置映射至所述装载机的地面坐标系,得到所述人员目标的人员地面位置;

6、根据所述装载机的铰接角以及行驶状态参数,动态生成所述地面坐标系下的危险区;

7、根据所述人员地面位置与所述危险区的边界之间的位置关系,采用带滞回的进入与退出判定,确定所述人员目标的风险等级;

8、在所述风险等级达到预设干预等级时,向所述装载机的车载控制器发送限速请求或驻车请求。

9、可选地,所述危险区为所述装载机在预警时域内将要扫掠的地面走廊;

10、动态生成所述地面坐标系下的危险区的方法,包括:

11、根据所述铰接角,按铰接转向运动学确定所述地面走廊的横向边界;

12、根据所述装载机的车速,确定所述地面走廊沿行驶方向的预警纵深;

13、所述行驶状态参数包括车速和挡位,所述装载机处于倒挡时,所述地面走廊朝所述装载机的后方展开。

14、可选地,所述地面走廊的主体为以所述装载机的转向中心为圆心的环形扇区;

15、设所述装载机的铰接中心到前桥的距离为,铰接中心到后桥的距离,滤波后的铰接角为,后桥转弯半径满足:;

16、所述环形扇区的内半径与外半径满足:,其中,为所述装载机的整机宽度,为后桥中心到车尾的后悬长度,为安全余量;

17、小于预设角度阈值时,所述地面走廊退化为沿行驶方向的矩形走廊。

18、可选地,根据远程操作端与所述装载机之间时间戳回环得到的往返时延,计算遥控链路的单向时延:,其中,为预设的平滑系数;

19、计算响应时间:,其中,为预设的操作手反应时间;

20、计算所述预警纵深:,其中,为所述车速,为预设的静止最小防护纵深,为所述装载机的最大制动减速度。

21、进一步,动态生成所述地面坐标系下的危险区的方法,还包括:根据铰接角速度预测经过预测时长后的铰接角,其中,为滤波后的铰接角;

22、所述危险区取根据生成的地面走廊与根据生成的地面走廊的并集。

23、可选地,所述风险等级包括第一等级、第二等级和第三等级;确定所述人员目标的风险等级的方法,包括:

24、确定所述人员地面位置到所述危险区的边界的带符号距离,在所述危险区内为正;

25、连续帧满足时,判定所述人员目标进入所述危险区;为预设的进入阈值;

26、连续帧满足时,判定所述人员目标退出所述危险区;退出阈值,其中,为预设的基础滞回宽度,为预设的展宽系数,为预设的展宽上限;

27、对所述人员目标进行跟踪,得到所述人员目标的地面速度,将所述地面速度向所述危险区的边界法向投影,得到的时间变化率;

28、当且时,预计侵入时间,否则记为无穷大;

29、所述人员目标位于由所述危险区外扩得到的监视区内、且大于第一时间阈值时,判定为第一等级;

30、小于或等于所述第一时间阈值,或者所述进入判定成立且小于预设侵入距离时,判定为第二等级;

31、大于或等于所述预设侵入距离,或者小于或等于第二时间阈值时,判定为第三等级。

32、更进一步,人员检测还输出所述人员目标的视觉置信度,方法包括:

33、获取所述装载机的毫米波雷达探测到的雷达目标,将所述雷达目标与所述人员目标按地面位置进行关联;

34、关联成功时,将所述视觉置信度与所述雷达目标的雷达置信度加权融合,得到融合置信度,所述融合置信度大于或等于预设置信度阈值的人员目标参与所述风险等级的确定;

35、所述人员检测连续无检出、所述雷达目标持续位于所述危险区内时,按预设的风险等级输出提示;

36、其中,所述融合置信度按下式计算:,其中,为视觉置信度,为雷达置信度,为图像能见度指标,为预设的平衡常数,为预设的权重下限;为限幅函数。

37、优选地,所述方法还包括:

38、所述人员目标与所述雷达目标关联成功、且视觉测距与雷达径向距离的偏差超过预设距离门限时,以所述雷达径向距离替代距离分量、保留视觉方位角,重构所述人员地面位置;

39、所述人员目标未关联到雷达目标时,放大所述危险区的安全余量:,其中,为基础安全余量,为所述人员目标的距离,为作业面的预设最大高差,为所述后视摄像头的安装高度,为预设的放大系数。

40、一种无人装载机远程作业装置,包括装载机本体、后视摄像头、毫米波雷达、铰接角传感器、车载控制器、无线通信模块和远程操作端;

41、所述后视摄像头安装于所述装载机本体的后车架,用于采集所述装载机本体后方的图像;

42、所述毫米波雷达的探测视场覆盖所述装载机本体后方的监视区;

43、所述铰接角传感器用于检测所述装载机本体的铰接角;

44、所述车载控制器分别与所述后视摄像头、所述毫米波雷达和所述铰接角传感器连接,并执行如上所述的无人装载机的作业区域人员识别方法;

45、所述远程操作端经所述无线通信模块与所述车载控制器通信,用于按风险等级呈现人员目标。

46、本发明通过铰接运动学动态生成危险区,并结合自适应滞回判定确定风险等级,实现了远程遥控工况下对作业区域人员的准确、稳定识别;与现有技术相比,具有如下有益效果:

47、以铰接运动学扫掠走廊替代固定告警区域,倒车转向工况下危险区自动覆盖甩尾外扩区域、收缩远离侧区域,降低漏报和误报;通过铰接角速度自适应的滞回带与双向不对称的多帧确认相结合,使人员在动态边界附近徘徊时,降低告警状态的切换频次;通过划分风险等级,仅在人员确实接近或侵入危险区时被打断,低风险仅作轻量提示,作业连续性得以保持。