大型洞窟复杂景深立体高光谱的信息采集融合方法及系统与流程

摘要: 本技术涉及三维重构,尤其涉及一种大型洞窟复杂景深立体高光谱的信息采集融合方法及系统。背景技术:1、在大型洞窟的复杂景深场景下,传统的高光谱相机获得的光谱信息是二...
大型洞窟复杂景深立体高光谱的信息采集融合方法及系统与流程

本技术涉及三维重构,尤其涉及一种大型洞窟复杂景深立体高光谱的信息采集融合方法及系统。

背景技术:

1、在大型洞窟的复杂景深场景下,传统的高光谱相机获得的光谱信息是二维平面的,适合平面文物的光谱信息采集,但对于洞窟内立体感极强的造像、大幅度的空间起伏以及前后重叠遮挡的复杂结构,高光谱相机存在着无法同时获得空间位置关系和深度层次光谱信息的问题。

2、现有的基于rgb图像的三维重建技术虽然能够重建三维空间信息,但其重建出来的三维空间信息并没有考虑到高光谱信息,使其无法清晰的展示三维空间中的光谱信息。传统的三维激光扫描技术虽然能够获取文物的高精度三维形态信息,但在洞窟内昏暗、半封闭的环境下,其在文物表面纹理和色彩信息的获取上存在不足,这种不足需要配置高光谱相机来补充光谱信息。然而,将三维激光扫描的三维信息和高光谱相机获取的数据融合为一个统一的三维光谱模型,是一个巨大的技术挑战,需要精确的校准和复杂的算法。

技术实现思路

1、本技术实施例的主要目的在于提出一种大型洞窟复杂景深立体高光谱的信息采集融合方法及系统,能够提高大型洞窟复杂景深场景下三维重建的精度和效率。

2、为实现上述目的,本技术实施例的一方面提出了一种大型洞窟复杂景深立体高光谱的信息采集融合方法,包括以下步骤:

3、通过双目高光谱相机获取待测立体文物在不同波段下的第一光谱图像;

4、对所述第一光谱图像进行光谱校正及几何校正,得到不同波段下的第二光谱图像;

5、计算所述第二光谱图像各波段的标准差和相关系数,进而根据所述标准差和所述相关系数确定最佳波段组合;

6、将所述最佳波段组合对应的所述第二光谱图像进行融合,得到左右视角的第三光谱图像对,根据左右视角的所述第三光谱图像对,通过视差计算和空间映射构建所述待测立体文物的三维点云模型;

7、将所述第二光谱图像映射到所述三维点云模型中,得到所述待测立体文物的四维数据集。

8、在一些实施例中,所述通过双目高光谱相机获取待测立体文物在不同波段下的第一光谱图像,具体包括:

9、在大型洞窟中设置至少两个柔光灯,各所述柔光灯均设置有多个卤钨灯;

10、打开所述卤钨灯,通过所述双目高光谱相机,同步采集所述待测立体文物在不同波段下的所述第一光谱图像;

11、关闭所述卤钨灯,通过所述双目高光谱相机,同步采集在不同波段下的暗电流图像;

12、将标准反射率白板放置于所述待测立体文物的目标测量区域,打开所述卤钨灯,通过所述双目高光谱相机,同步采集所述标准反射率白板在不同波段下的参考光谱图像。

13、在一些实施例中,所述对所述第一光谱图像进行光谱校正及几何校正,得到不同波段下的第二光谱图像,具体包括:

14、根据所述暗电流图像和所述参考光谱图像,对所述第一光谱图像进行光谱校正,得到校正光谱图像;

15、基于张正友棋盘格标定法,对所述双目高光谱相机的几何成像参数进行标定,得到所述双目高光谱相机的内参和外参;

16、根据所述内参和所述外参,对所述校正光谱图像进行双目几何校正,得到不同波段下的所述第二光谱图像。

17、在一些实施例中,所述计算所述第二光谱图像各波段的标准差和相关系数,进而根据所述标准差和所述相关系数确定最佳波段组合,具体包括:

18、计算所述第二光谱图像各波段的像素均值;

19、根据所述像素均值,计算所述第二光谱图像各波段的所述标准差;

20、根据所述像素均值,计算所述第二光谱图像两个波段之间的协方差;

21、根据所述标准差和所述协方差,计算所述第二光谱图像两个波段之间的所述相关系数;

22、根据所述标准差和所述相关系数,计算所述第二光谱图像各波段的最佳指数得分;

23、确定最高的所述最佳指数得分为所述最佳波段组合。

24、在一些实施例中,所述第三光谱图像对包括最佳三波段融合的左视角第三光谱图像和右视角第三光谱图像,所述根据左右视角的所述第三光谱图像对,通过视差计算和空间映射构建所述待测立体文物的三维点云模型,具体包括:

25、基于半全局块匹配算法,对所述左视角第三光谱图像和所述右视角第三光谱图像进行立体匹配,生成视差图;

26、构建重投影矩阵,进而根据所述视差图和所述重投影矩阵,计算三维坐标;

27、根据所述三维坐标生成所述三维点云模型。

28、在一些实施例中,所述将所述第二光谱图像映射到所述三维点云模型中,得到所述待测立体文物的四维数据集,具体包括:

29、根据所述视差图和所述第二光谱图像,构建二维-三维映射表;

30、根据所述二维-三维映射表,提取所述第二光谱图像各波段的光谱向量;

31、将所述光谱向量作为属性值附加至对应的所述三维坐标上,得到所述待测立体文物的所述四维数据集。

32、在一些实施例中,所述最佳指数得分通过下式计算得到:

33、;

34、其中,表示最佳指数得分,表示第个波段的标准差,表示波段与波段之间的相关系数。

35、为实现上述目的,本技术实施例的另一方面提出了一种大型洞窟复杂景深立体高光谱的信息采集融合系统,包括:

36、图像获取模块,用于通过双目高光谱相机获取待测立体文物在不同波段下的第一光谱图像;

37、图像预处理模块,用于对所述第一光谱图像进行光谱校正及几何校正,得到不同波段下的第二光谱图像;

38、最佳波段组合确定模块,用于计算所述第二光谱图像各波段的标准差和相关系数,进而根据所述标准差和所述相关系数确定最佳波段组合;

39、点云构建模块,用于将所述最佳波段组合对应的所述第二光谱图像进行融合,得到左右视角的第三光谱图像对,根据左右视角的所述第三光谱图像对,通过视差计算和空间映射构建所述待测立体文物的三维点云模型;

40、光谱点云融合模块,用于将所述第二光谱图像映射到所述三维点云模型中,得到所述待测立体文物的四维数据集。

41、为实现上述目的,本技术实施例的另一方面提出了一种电子设备,所述电子设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现如前面所述的方法。

42、为实现上述目的,本技术实施例的另一方面提出了一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现前面的方法。

43、本技术实施例至少包括以下有益效果:本技术的大型洞窟复杂景深立体高光谱的信息采集融合方法及系统,首先通过双目高光谱相机获取待测立体文物在不同波段下的第一光谱图像;然后对第一光谱图像进行光谱校正及几何校正,得到不同波段下的第二光谱图像;接着计算第二光谱图像各波段的标准差和相关系数,进而根据标准差和相关系数确定最佳波段组合;再将最佳波段组合对应的第二光谱图像进行融合,得到左右视角的第三光谱图像对,根据左右视角的第三光谱图像对,通过视差计算与空间映射构建待测立体文物的三维点云模型;最后将第二光谱图像映射到三维点云模型中,得到待测立体文物的四维数据集。本技术结合三维点云和高光谱成像技术,不仅可以获取文物的三维形态信息,还可以获取文物的表面纹理和色彩信息,实现了大型洞窟复杂景深场景下立体文物的全方位数字化保护;同时,基于最佳波段组合融合图像并构建三维点云模型,能够进一步提高大型洞窟复杂景深场景下三维重建的精度和效率。