突发飞行障碍物多传感器检测与紧急制动方法及系统与流程

摘要: 本发明涉及智能辅助驾驶和车辆主动安全,尤其是涉及一种突发飞行障碍物多传感器检测与紧急制动方法及系统。背景技术:1、车辆在道路行驶过程中,除常见的车辆、行人和固定...
突发飞行障碍物多传感器检测与紧急制动方法及系统与流程

本发明涉及智能辅助驾驶和车辆主动安全,尤其是涉及一种突发飞行障碍物多传感器检测与紧急制动方法及系统。

背景技术:

1、车辆在道路行驶过程中,除常见的车辆、行人和固定设施外,还可能遇到前车轮胎脱落、货物散落、高处物体坠落等突发飞行障碍物。此类障碍物通常出现突然、可见时间短,且在形状、材质和运动状态方面具有较强的不确定性。障碍物相对于本车的空间位置、接近速度及飞行轨迹会直接影响碰撞风险。例如,沿抛物线坠落、横向飞入或翻滚弹跳的物体,可能在较短时间内进入本车行驶路径。因此,及时发现突发飞行障碍物并准确判断其运动趋势,是车辆主动安全控制的重要基础。

2、cn113963327a记载了一种障碍物检测方法、装置、自动驾驶车辆、设备和存储介质,其中采用多种障碍物检测方式分别获得初始检测结果,并根据各检测结果的准确度信息以及不同检测方式之间的相关度信息进行融合,以确定是否存在障碍物,但是,该文献主要解决多种障碍物检测结果的融合问题,未针对突然进入车辆感知范围、停留帧数较少且具有垂直运动或不规则翻滚特征的飞行障碍物设置专门的检测机制,也未涉及在障碍物确认前同步建立制动预压力。

3、cn121214391a记载了一种车辆的障碍物检测方法、装置、电子设备及存储介质,其中先对点云数据进行语义标注,再沿车辆的全局参考路径划分云子域,对云子域进行聚类并构建三维包络框,根据三维包络框与车辆边界框的重叠关系识别障碍物,但是,该方案以点云语义标注和全局参考路径为基础,对于未包含在预设语义类别中的脱落轮胎、坠落货物等非标障碍物,可能难以及时形成有效的目标数据点集,并且其聚类和包络框构建过程不利于对短时出现的高速飞行障碍物进行快速响应。

4、cn117184119a记载了一种车辆预警的方法、装置、车辆及计算机可读存储介质,其中根据图像确定障碍物属于静止类型或运动类型,对静止障碍物结合车辆行驶轨迹预测碰撞风险,而对运动障碍物直接输出图像提示信息和语音提示信息,但是,该方案未针对运动障碍物预测其碰撞风险,也未区分水平飞行、抛物线坠落和不规则翻滚等不同运动模式,其处理结果主要用于预警,不能满足突发飞行障碍物场景下快速形成紧急制动控制的要求。

5、因此,需要一种不以目标类别识别为前提、可在单帧内触发制动预备并根据飞行运动模式预测碰撞风险的技术方案。

技术实现思路

1、本发明的主要目的在于提供一种突发飞行障碍物多传感器检测与紧急制动方法及系统,解决白名单外突发飞行障碍物容易漏检、检测和制动响应滞后、轨迹预测模型不匹配以及轻质无害物体易引发误制动的问题。

2、为解决上述技术问题,本发明所采用的技术方案是:一种突发飞行障碍物多传感器检测与紧急制动方法,包括:

3、s1,获取车载雷达点云与摄像头图像以及惯性测量数据,对车载雷达点云与摄像头图像以及惯性测量数据进行时空对齐和预处理;

4、s2,依据车载雷达点云的帧间变化和摄像头图像的前景变化确定突发候选区域,依据突发候选区域内的观测光流相对于车辆自运动背景光流的偏离确定运动异常区域,在突发候选区域与运动异常区域满足空间重叠条件时生成疑似飞行障碍物,并建立制动预压力;

5、s3,提取用于表征疑似飞行障碍物的类别无关特征,基于类别无关特征确定障碍物置信度;

6、s4,基于类别无关特征确定运动模式,按照运动模式预测障碍物轨迹,并结合本车预测轨迹与障碍物轨迹确定碰撞风险;

7、s5,基于障碍物置信度与碰撞风险以及轻质物体判定结果生成危险等级;

8、s6,将危险等级与传统分类检测结果融合形成最终控制指令,并将最终控制指令发送至车辆制动执行单元。

9、优选方案中,s1中的时空对齐和预处理包括:以车辆后轴中心为坐标基准,利用传感器外参与惯性测量结果将多源数据转换至车辆坐标系,并通过同步触发或时间补偿统一多源数据的时间基准;

10、对车载雷达点云进行地面滤除,对摄像头图像进行运动去模糊,并从处理后的摄像头图像提取光流向量。

11、优选方案中,s2中生成疑似飞行障碍物包括:根据车载雷达点云相对于历史点云的新增量与对应图像区域的前景变化确定突发候选区域;

12、利用突发候选区域外的光流拟合车辆自运动背景光流,根据突发候选区域内的观测光流相对于车辆自运动背景光流的方向偏离或垂直分量确定运动异常区域;

13、在两区域的空间交并比达到触发阈值时,于当前帧生成疑似飞行障碍物。

14、优选方案中,s2还包括:在当前帧生成疑似飞行障碍物时,将疑似飞行障碍物发送至类别无关特征提取过程,并同步向制动系统发送预压力建立指令,使制动预压力的建立与障碍物置信度计算和障碍物轨迹预测并行执行。

15、优选方案中,s3中的类别无关特征包括用于表征目标形态的几何信息与用于表征目标离地状态的高度信息以及用于表征目标材质和运动状态的雷达散射信息与运动信息;

16、对类别无关特征进行归一化和加权映射得到障碍物置信度。

17、优选方案中,s4中按照运动模式预测障碍物轨迹包括:在目标具有低垂直速度和低轨迹曲率时采用匀速直线模型;

18、在目标的垂直加速度处于重力加速度对应区间时采用包含空气阻力的抛物线模型;

19、在目标具有高轨迹曲率和不稳定雷达散射特征时采用粒子滤波模型。

20、优选方案中,s4还包括:利用与运动模式对应的模型生成障碍物轨迹,利用车辆运动模型生成本车预测轨迹,基于两条轨迹的最小空间距离和碰撞时间确定碰撞概率,并以碰撞概率表征碰撞风险。

21、优选方案中,s5包括:根据目标的点云密度与雷达散射强度以及估计质量确定轻质物体判定结果;

22、根据碰撞概率与障碍物置信度确定基础危险等级,并在轻质物体判定结果表明目标为轻质物体时降低基础危险等级,以生成对应的制动控制或预警控制。

23、优选方案中,s6包括:将类别无关的突发飞行障碍物检测通道与传统分类检测通道并行运行;

24、在两通道检出同一目标时融合两通道的目标状态并保留传统分类检测通道输出的类别,在仅由突发飞行障碍物检测通道检出目标时将该目标加入融合目标列表,并按照融合目标列表中的最高危险等级形成最终控制指令。

25、一种突发飞行障碍物多传感器检测与紧急制动方法及系统,其特征在于,包括:

26、数据处理模块,用于对车载雷达与摄像头以及惯性测量单元输出的数据进行时空对齐和预处理;

27、单帧触发模块,用于根据背景变化与光流异常的空间重叠结果生成疑似飞行障碍物并触发制动预压力;

28、障碍物判定模块,用于基于类别无关特征确定障碍物置信度和运动模式;

29、轨迹预测模块,用于按照运动模式预测障碍物轨迹并确定碰撞风险;

30、危险决策模块,用于结合障碍物置信度与碰撞风险以及轻质物体判定结果生成危险等级;

31、融合制动模块,用于将危险等级与传统分类检测结果融合形成最终控制指令并发送至车辆制动执行单元。

32、本发明提供了一种基于多传感器融合的突发飞行障碍物检测与紧急制动方法及系统,依次完成多传感器时空对齐与预处理、背景减除和光流异常双通道单帧触发、类别无关特征融合、运动模式自适应轨迹预测、轻质物体过滤与危险分级、传统分类通道与突发检测通道融合,并在单帧触发时提前建立制动预压力。系统采用与方法处理链一一对应的模块传递中间结果,使检测、预测、分级和执行形成闭环。