一种图像处理方法及装置与流程

摘要: 本申请涉及图像处理领域中的场景地图构建技术,尤其涉及一种图像处理方法及装置。背景技术:1、随着自主移动机器人技术的飞速发展,地图构建技术已成为实现机器人自主导航...
一种图像处理方法及装置与流程

本申请涉及图像处理领域中的场景地图构建技术,尤其涉及一种图像处理方法及装置。

背景技术:

1、随着自主移动机器人技术的飞速发展,地图构建技术已成为实现机器人自主导航与交互的核心技术。一般来说,地图构建技术大多依赖于静态场景假设,即认为场景中的物体在观测期间保持位置不变。然而,在包括行人、车辆等移动物体的真实动态场景中,依赖于静态场景假设的地图构建技术影响了场景地图的构建准确度。

技术实现思路

1、本申请实施例提供一种图像处理方法及装置,能够提升场景地图的构建准确度。

2、本申请实施例的技术方案是这样实现的:

3、本申请实施例提供一种图像处理方法,所述方法包括:

4、基于当前帧的场景图像的语义分割掩码,确定所述场景图像中每个图像区域的实体动静类别,所述图像区域的实体动静类别为静态、动态和动静边界中的一种;

5、基于所述图像区域的实体动静类别调整特征点提取阈值,基于调整后的所述特征点提取阈值对所述图像区域进行特征点提取,组合每个所述图像区域的特征点提取结果,得到所述场景图像的特征点集合;

6、基于所述特征点集合计算当前帧位姿,确定与所述当前帧位姿对应的当前帧地图点集合;

7、基于所述语义分割掩码和所述当前帧地图点集合,确定待初始化区域,基于所述待初始化区域的实体动静类别所对应的高斯球体形态,对所述待初始化区域进行高斯球体初始化,得到第一高斯球体集合,所述待初始化区域的实体动静类别为所述静态和所述动静边界中的一种;

8、基于所述第一高斯球体集合,构建场景地图。

9、本申请实施例提供一种图像处理装置,所述图像处理装置包括:

10、类别确定模块,用于基于当前帧的场景图像的语义分割掩码,确定所述场景图像中每个图像区域的实体动静类别,所述图像区域的实体动静类别为静态、动态和动静边界中的一种;

11、特征提取模块,用于基于所述图像区域的实体动静类别调整特征点提取阈值,基于调整后的所述特征点提取阈值对所述图像区域进行特征点提取,组合每个所述图像区域的特征点提取结果,得到所述场景图像的特征点集合;

12、位姿估计模块,用于基于所述特征点集合计算当前帧位姿,确定与所述当前帧位姿对应的当前帧地图点集合;

13、高斯初始模块,用于基于所述语义分割掩码和所述当前帧地图点集合,确定待初始化区域,基于所述待初始化区域的实体动静类别所对应的高斯球体形态,对所述待初始化区域进行高斯球体初始化,得到第一高斯球体集合,所述待初始化区域的实体动静类别为所述静态和所述动静边界中的一种;

14、地图构建模块,用于基于所述第一高斯球体集合,构建场景地图。

15、本申请实施例提供一种用于图像处理的电子设备,所述电子设备包括:

16、存储器,用于存储计算机可执行指令或者计算机程序;

17、处理器,用于执行所述存储器中存储的计算机可执行指令或者计算机程序时,实现本申请实施例提供的图像处理方法。

18、本申请实施例提供一种计算机可读存储介质,存储有计算机可执行指令或者计算机程序,所述计算机可执行指令或者计算机程序用于被处理器执行时,实现本申请实施例提供的图像处理方法。

19、本申请实施例提供一种计算机程序产品,包括计算机可执行指令或者计算机程序,所述计算机可执行指令或者计算机程序被处理器执行时,实现本申请实施例提供的图像处理方法。

20、本申请实施例至少具有以下有益效果:针对采集到的当前帧的场景图像,基于该场景图像的语义分割掩码对场景图像的图像区域进行实体动静类别划分,并基于图像区域的实体动静类别调整特征点提取阈值,以针对不同实体动静类别的图像区域采用不同的特征点提取阈值进行特征点提取,能够提升特征点提取的针对性,进而提升特征点集合的准确度;接着,基于特征点集合进行当前帧位姿的计算,能够提升当前帧位姿的准确度;最后,基于语义分割掩码以及与当前帧位姿对应的地图点集合,对不同实体动静类别的待初始化区域进行不同高斯球体形态的初始化,能够提升获得的第一高斯球体集合的准确度;进而,基于第一高斯球体集合构建场景地图,能够提升场景地图的构建准确度。

1.一种图像处理方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于所述图像区域的实体动静类别调整特征点提取阈值,包括:

3.根据权利要求1或2所述的方法,其特征在于,所述组合每个所述图像区域的特征点提取结果,得到所述场景图像的特征点集合,包括:

4.根据权利要求1或2所述的方法,其特征在于,所述基于所述特征点集合计算当前帧位姿,包括:

5.根据权利要求4所述的方法,其特征在于,所述基于所述一致性分数最高的所述候选位姿,确定所述当前帧位姿,包括:

6.根据权利要求1所述的方法,其特征在于,所述基于所述待初始化区域的实体动静类别所对应的高斯球体形态,对所述待初始化区域进行高斯球体初始化,得到第一高斯球体集合之前,所述方法还包括:

7.根据权利要求1或6所述的方法,其特征在于,所述基于所述第一高斯球体集合,构建场景地图,包括:

8.根据权利要求7所述的方法,其特征在于,所述基于所述第二高斯球体集合,构建所述场景地图,包括:

9.根据权利要求8所述的方法,其特征在于,所述基于所述第三高斯球体集合,构建所述场景地图,包括:

10.一种图像处理装置,其特征在于,所述图像处理装置包括: