用于水下无人设备避障的声呐先验与视觉补偿融合方法、系统、电子设备及存储介质与流程

摘要: 本申请属于水下装备的,具体涉及一种用于水下无人设备避障的声呐先验与视觉补偿融合方法、系统、电子设备及存储介质。背景技术:1、自主式水下航行器(autonomou...
用于水下无人设备避障的声呐先验与视觉补偿融合方法、系统、电子设备及存储介质与流程

本申请属于水下装备的,具体涉及一种用于水下无人设备避障的声呐先验与视觉补偿融合方法、系统、电子设备及存储介质。

背景技术:

1、自主式水下航行器(autonomous underwater vehicle,auv)等水下无人设备,常用于海底地形测绘、港池码头巡检、海底管线电缆巡检、海洋牧场监测、沉船水下结构物探查等任务中,需要在缺少卫星定位、通信带宽低、光照受限且水体条件的快速变化环境中自主航行。auv在执行近岸、结构区和复杂地形任务时,常遇到礁石、桩柱、平台构件、海底起伏、漂浮物、鱼群、缆绳、渔网等静态或动态障碍,因此需要依靠传感器完成障碍探测、局部环境表达、风险判断和运动控制。

2、在现有技术中,auv采用的前视成像声呐或者多波束声呐具有作用距离较远、对水体浑浊和弱光条件不敏感的优点,因而通常作为auv避障的主传感器。声呐能够输出障碍的距离、方位、回波强度或声呐图像,但受波束宽度、旁瓣、散斑、声影、多径和垂向分辨能力限制,其障碍边界往往较粗,目标类型与细长结构难以准确区分,尤其是对于缆绳、渔网边缘、狭窄孔洞、桁架交叉部位等目标,单独依赖声呐可能出现轮廓膨胀、目标合并、漏检或者安全距离估计偏差。

3、水下光学相机可提供较高的角分辨率、边缘与纹理信息,适合识别细长障碍、结构接缝和目标轮廓。然而,水下光学图像易受光吸收、散射、后向散射、色偏、浑浊度、照明不均、悬浮颗粒和运动模糊影响,同一任务航段内的可视距离和成像质量可能在短时间内显著波动。如果在视觉退化时仍按照固定权重参与融合,错误的视觉深度、伪边缘或高亮颗粒可能反向削弱声呐已经给出的障碍风险,导致不安全的控制决策。

技术实现思路

1、为解决上述的一个或多个问题,本申请的目的在于提供一种用于水下无人设备避障的声呐先验与视觉补偿融合方法、系统、电子设备及存储介质,用以实现高适应性的auv水下避障任务。

2、本申请的技术方案内容如下。

3、第一方面的,本申请提供一种用于水下无人设备避障的声呐先验与视觉补偿融合方法,包括:

4、从声呐图像中获取候选的障碍物;

5、将候选的障碍物投影到视觉图像中形成感兴趣区域;

6、对投影有感兴趣区域的视觉图像计算视觉特性;

7、根据视觉特性选择进行视觉补偿的感兴趣区域及相应的视觉补偿模式;

8、根据进行视觉补偿的感兴趣区域及相应的视觉补偿模式,对障碍物进行图像视觉处理形成视觉补偿信息。

9、优选的,形成视觉补偿信息之后,还包括:

10、对视觉补偿信息与声呐图像中障碍物信息进行一致性校验;

11、根据一致性校验的结果重新确定候选的障碍物、视觉补偿模式或图形处理方式。

12、优选的,形成视觉补偿信息之后,还包括:

13、根据视觉补偿信息、声呐信息和视觉信息获取障碍物的融合边界、融合不确定性形成局部占据风险图;

14、在物理约束条件下,根据融合不确定性在局部占据风险图中对障碍物的融合边界进行动态安全膨胀。

15、进一步的,进行动态安全膨胀之后,还包括:

16、根据局部占据风险图和auv的任务航迹,更新auv的相应控制量进行避障。

17、第二方面的,本申请提供一种用于水下无人设备避障的声呐先验与视觉补偿融合系统,包括:

18、声呐先验模块,用于从声呐图像中获取候选的障碍物;

19、投影融合模块,用于将候选的障碍物投影到视觉图像中形成感兴趣区域;

20、融合质量感知模块,用于对投影有感兴趣区域的视觉图像计算视觉特性;

21、融合质量门控模块,用于根据视觉特性选择进行视觉补偿的感兴趣区域及相应的视觉补偿模式;

22、视觉补偿模块,用于根据进行视觉补偿的感兴趣区域及相应的视觉补偿模式,对障碍物进行图像视觉处理形成视觉补偿信息。

23、优选的,还包括:

24、跨模态校验模块,用于对视觉补偿信息与声呐图像中障碍物信息进行一致性校验;

25、漂移处理模块,用于根据一致性校验的结果重新确定候选的障碍物、视觉补偿模式或图形处理方式。

26、优选的,还包括:

27、风险感知模块,用于根据视觉补偿信息、声呐信息和视觉信息获取障碍物的融合边界、融合不确定性形成局部占据风险图;

28、风险更新模块,用于在物理约束条件下,根据融合不确定性在局部占据风险图中对障碍物的融合边界进行动态安全膨胀。

29、进一步的,还包括:

30、避障更新模块,用于根据局部占据风险图和auv的任务航迹,更新auv的相应控制量进行避障。

31、第三方面的,一种电子设备,包括存储器、处理器及存储在存储器上并在处理器上运行的计算机程序,处理器执行计算机程序时实现前述任一项的用于水下无人设备避障的声呐先验与视觉补偿融合方法。

32、第四方面的,为计算机可读存储介质,存储有计算机指令,计算机指令用于使计算机实现前述任一项的用于水下无人设备避障的声呐先验与视觉补偿融合方法。

33、本申请的有益效果在于:

34、能够适应局部浑浊、局部过曝、补光热点和悬浮颗粒聚集等空间非均匀退化的水下条件;在算力、存储带宽和功耗上都实现了较低的消耗;实现低质量视觉不得影响已有声呐风险的安全约束;跨模态失配可以被显式检测和处理,不会造成候选区域错位和融合虚影;动态安全膨胀量形成可供控制器使用的局部占据风险图;提高了安全性。

1.一种用于水下无人设备避障的声呐先验与视觉补偿融合方法,其特征在于,包括:

2.根据权利要求1所述的用于水下无人设备避障的声呐先验与视觉补偿融合方法,其特征在于,形成视觉补偿信息之后,还包括:

3.根据权利要求1所述的用于水下无人设备避障的声呐先验与视觉补偿融合方法,其特征在于,形成视觉补偿信息之后,还包括:

4.根据权利要求3所述的用于水下无人设备避障的声呐先验与视觉补偿融合方法,其特征在于,进行动态安全膨胀之后,还包括:

5.一种用于水下无人设备避障的声呐先验与视觉补偿融合系统,其特征在于,包括:

6.根据权利要求5所述的用于水下无人设备避障的声呐先验与视觉补偿融合系统,其特征在于,还包括:

7.根据权利要求5所述的用于水下无人设备避障的声呐先验与视觉补偿融合系统,其特征在于,还包括:

8.根据权利要求7所述的用于水下无人设备避障的声呐先验与视觉补偿融合系统,其特征在于,还包括:

9.一种电子设备,其特征在于,包括存储器、处理器及存储在所述存储器上并在所述处理器上运行的计算机程序,处理器执行所述计算机程序时实现权利要求1-4中任一项的所述用于水下无人设备避障的声呐先验与视觉补偿融合方法。

10.一种存储介质,为计算机可读存储介质,其特征在于,存储有计算机指令,所述计算机指令用于使计算机实现权利要求1-4中任一项的所述用于水下无人设备避障的声呐先验与视觉补偿融合方法。