一种寒区隧道衬砌多尺度病害语义分割与量化方法及系统

摘要: 本发明涉及隧道病害智能检测,尤其涉及一种寒区隧道衬砌多尺度病害语义分割与量化方法及系统。背景技术:1、寒区隧道长期处于低温、冻融循环、湿度变化以及弱光、反光、背...
一种寒区隧道衬砌多尺度病害语义分割与量化方法及系统

本发明涉及隧道病害智能检测,尤其涉及一种寒区隧道衬砌多尺度病害语义分割与量化方法及系统。

背景技术:

1、寒区隧道长期处于低温、冻融循环、湿度变化以及弱光、反光、背景干扰等复杂成像环境中,衬砌表面容易出现裂缝、剥落、渗漏水和冰柱等病害。上述病害若不能被及时发现和定位,可能影响衬砌结构耐久性,并对隧道运营安全和后续养护决策造成不利影响。

2、目前,隧道衬砌病害检测仍以人工巡检、接触式检测设备检测以及基于图像的自动识别方法为主。人工巡检受巡检经验、光照条件和工作强度影响较大,检测效率和一致性不足;接触式检测方式作业成本较高,难以覆盖较长线路的连续检测需求;常规图像识别方法虽然能够提高检测效率,但在寒区弱光、反光和低对比度环境下,仍容易受到衬砌纹理、阴影、污渍和冰水附着物的干扰。

3、寒区隧道衬砌病害在图像中具有明显的多尺度和多形态特征。其中,裂缝通常呈细长线状,像素占比较小,容易发生断裂或漏检;剥落区域轮廓不规则,边界完整性要求较高;渗漏水区域常表现为大范围、低纹理和边界模糊;冰柱或结冰区域可能呈条带状、片状或低对比度连续目标。若检测方法不能同时兼顾浅层边缘细节、结构轮廓信息和深层语义关联信息,容易出现薄目标漏检、区域边界不完整和复杂背景误分割等问题。

4、因此,有必要提供一种面向寒区隧道衬砌多尺度病害的语义分割与量化技术,通过图像采集、像素级标注、局部细节提取、全局语义关联建模、多层特征融合以及病害范围量化,提高裂缝、剥落、渗漏水和冰柱等病害在复杂背景下的分割稳定性,并输出便于巡检统计和养护判断的病害类别、位置和面积信息。

技术实现思路

1、本发明的目的在于,为解决现有寒区隧道衬砌病害检测依赖人工巡检或接触式检测效率低、连续性差,以及常规图像识别方法在复杂环境下易漏检、误分割且难以实现病害位置与面积等量化信息提取的问题,提供一种寒区隧道衬砌多尺度病害语义分割与量化方法及系统。

2、为了实现上述目的,本发明提供的一种寒区隧道衬砌多尺度病害语义分割与量化方法,包括:

3、获取寒区隧道衬砌待识别图像并进行预处理,得到预处理图像;

4、对所述预处理图像逐层进行局部特征提取,得到多层局部特征;基于所述多层局部特征中的最高层局部特征,计算得到用于表征图像中不同区域之间远距离语义关联的全局上下文特征;

5、对所述多层局部特征进行通道调整和分级池化,将由不同层局部特征形成且具有相同空间尺度的特征分支逐元素融合,得到多级融合金字塔特征;对相邻两级的所述融合金字塔特征进行邻域注意力融合,得到各尺度邻域注意力融合特征;以所述全局上下文特征作为最深层解码输入,将各级解码特征逐级上采样后与对应尺度的所述邻域注意力融合特征进行拼接和融合,得到融合特征;

6、对所述融合特征进行解码,计算各像素对应的类别概率,利用所述类别概率确定各像素对应的像素类别,并生成像素级病害分割掩膜;

7、根据所述像素级病害分割掩膜按病害类别生成类别二值掩膜,对所述类别二值掩膜进行八邻域连通区域划分,将互不连通的区域分别确定为独立病害区域,并分别对各独立病害区域统计像素数量、确定外接范围和计算病害面积,生成与各独立病害区域一一对应的病害检测记录。

8、通过图像采集、病害图像建库、细节特征提取、语义关联建模、多层特征融合、现场识别和病害范围量化的协同流程,实现对寒区隧道衬砌裂缝、剥落、渗漏水和冰柱等多类型病害的非接触式自动识别和像素级分割。

9、作为上述技术方案的进一步改进,所述寒区隧道衬砌待识别图像的获取过程包括:选取固定于隧道侧壁或拱腰的固定相机、巡检车搭载摄像设备或巡检机器人搭载摄像设备中的至少一种作为图像采集设备,使所述图像采集设备的拍摄方向朝向待检测衬砌表面,并采集所述待检测衬砌表面的图像,得到采集图像;通过有线网络、无线网络或移动存储方式传输所述采集图像,并将采集时间、隧道里程、拍摄位置或设备编号中的至少一种作为检索信息与所述采集图像关联保存,得到所述寒区隧道衬砌待识别图像。

10、作为上述技术方案的进一步改进,所述预处理包括:

11、对所述寒区隧道衬砌待识别图像进行筛选,剔除模糊、遮挡严重或相似度高于预设相似度阈值的图像;对筛选后的图像进行裁剪、尺度调整、方向校正、噪声扰动或光照增强中的至少一种处理;进行归一化处理,得到所述预处理图像:

12、

13、其中,为原始图像或原始图像中的灰度值或通道值,为归一化后的图像或归一化数值,为原始图像灰度值或通道值的均值,为原始图像灰度值或通道值的标准差,为防止分母为零的正数。

14、作为上述技术方案的进一步改进,还包括:对寒区隧道衬砌样本图像进行像素级标注,标注对象包括背景、裂缝、剥落、渗漏水和冰柱,使每幅样本图像对应一幅像素级标注掩膜,所述像素级标注掩膜中的各像素具有相应类别标签;将所述样本图像与对应的像素级标注掩膜组成缺陷数据集;以所述缺陷数据集中的样本图像为输入,以对应的像素级标注掩膜为监督标签,通过反向传播优化模型参数,得到特征协同融合病害分割模型;将所述模型部署于现场识别终端,并利用所述模型对所述预处理图像依次执行多层局部特征提取、全局上下文特征计算、多级融合金字塔特征构建、相邻两级融合金字塔特征的邻域注意力融合、解码端逐级特征融合以及像素类别解码。

15、作为上述技术方案的进一步改进,所述局部特征提取包括:采用深度可分离卷积与空洞卷积相结合的方式,对所述预处理图像逐层执行局部特征提取运算,通过不同特征层分别提取浅层边缘纹理特征、中层结构特征和深层语义特征,得到所述多层局部特征。

16、作为上述技术方案的进一步改进,所述全局上下文特征的计算过程包括:采用自注意力机制对所述最高层局部特征进行全局关系建模,建立图像中不同空间区域之间的远距离语义关系,得到所述全局上下文特征。

17、作为上述技术方案的进一步改进,所述融合特征的获取包括:分别采用1×1卷积对五层局部特征进行通道调整;对通道调整后的每层局部特征分别保留原尺度、进行一次最大池化和进行两次最大池化,得到原尺度、二分之一尺度和四分之一尺度的三个特征分支;将由不同层局部特征生成且具有相同空间尺度的所述特征分支逐元素相加,按照由浅层高分辨率至深层低分辨率的顺序形成七级融合金字塔特征。

18、作为上述技术方案的进一步改进,所述融合特征的获取还包括:对于空间尺寸相差二倍的相邻两级的所述融合金字塔特征,将低层高分辨率特征经2×2最大池化后与高层低分辨率特征进行通道拼接,经1×1卷积和sigmoid函数生成位置权重;将所述高层低分辨率特征重排后计算通道相关矩阵并经softmax函数生成跨通道权重;将所述位置权重与所述跨通道权重组合形成联合门控权重,利用所述联合门控权重对所述低层高分辨率特征和二倍上采样后的所述高层低分辨率特征进行逐元素加权融合,得到对应尺度的邻域注意力融合特征;以所述全局上下文特征作为最深层解码输入,将各级解码特征逐级二倍上采样后与对应尺度的所述邻域注意力融合特征进行通道拼接和特征融合,直至恢复至输入图像分辨率。

19、作为上述技术方案的进一步改进,所述解码和量化包括:对所述融合特征进行解码,计算各像素属于背景、裂缝、剥落、渗漏水或冰柱的类别概率,将类别概率最大的类别确定为像素类别,生成像素级病害分割掩膜;针对各非背景病害类别生成类别二值掩膜并进行八邻域连通区域标记,将互不连通的区域确定为独立病害区域;分别统计各独立病害区域的像素数量,并根据各独立病害区域自身像素的横坐标和纵坐标最小值及最大值确定相应外接范围;已知像素与衬砌表面实际尺寸比例关系时,根据各独立病害区域的像素数量和单个像素对应的实际面积计算相应病害面积,未标定时输出以像素数量表征的像素面积;针对每个独立病害区域分别生成包括图像标识、病害类别、区域编号、像素数量、外接范围、病害面积、对应连通区域掩膜以及所述对应连通区域与所述寒区隧道衬砌待识别图像的叠加显示结果的病害检测记录。

20、本发明还提供一种寒区隧道衬砌多尺度病害语义分割与量化系统,包括:

21、图像处理模块,用于获取寒区隧道衬砌待识别图像并进行预处理,得到预处理图像;

22、特征提取模块,用于对所述预处理图像逐层进行局部特征提取,得到多层局部特征,并基于所述多层局部特征中的最高层局部特征,计算得到用于表征图像中不同区域之间远距离语义关联的全局上下文特征;

23、特征融合模块,用于对所述多层局部特征进行通道调整和分级池化,将由不同层局部特征形成且具有相同空间尺度的特征分支逐元素融合,得到多级融合金字塔特征;对相邻两级的所述融合金字塔特征进行邻域注意力融合,得到各尺度邻域注意力融合特征;以所述全局上下文特征作为最深层解码输入,将各级解码特征逐级上采样后与对应尺度的所述邻域注意力融合特征进行拼接和融合,得到融合特征;

24、解码分割模块,用于对所述融合特征进行解码,计算各像素对应的类别概率,利用所述类别概率确定各像素对应的像素类别,并生成像素级病害分割掩膜;

25、病害量化记录模块,用于根据所述像素级病害分割掩膜按病害类别生成类别二值掩膜,对所述类别二值掩膜进行八邻域连通区域划分,将互不连通的区域分别确定为独立病害区域,并分别对各独立病害区域统计像素数量、确定外接范围和计算病害面积,生成与各独立病害区域一一对应的病害检测记录。

26、本发明提供的寒区隧道衬砌多尺度病害语义分割与量化方法及系统的有益效果:

27、1.非接触式检测,无需破坏隧道衬砌结构,本发明通过图像采集设备获取衬砌表面图像,再由训练完成的病害分割模型进行识别、分割和量化,无需钻孔、开槽、取样或安装接触式检测装置,能够在不影响隧道结构和正常巡检作业的情况下完成病害检测;

28、2.能够提高寒区复杂背景下多尺度病害分割稳定性,通过细节特征、语义关联特征和多层融合特征的协同处理,模型能够分别关注细长裂缝的边缘连续性、不规则剥落区域的轮廓完整性、大面积渗漏水的全局分布以及低对比度冰柱的空间连续性,从而降低薄目标漏检、边界断裂和复杂背景误分割的风险;

29、3.能够增强病害边界和薄目标的表达能力,本发明先在相同空间尺度上融合由不同编码层局部特征形成的特征分支,再利用位置权重和跨通道权重对相邻两级融合金字塔特征进行动态加权,以全局上下文特征作为最深层解码输入,并将解码特征由深至浅逐级上采样后与对应尺度的邻域注意力融合特征进行融合,使模型在处理细长裂缝、模糊渗漏水边界、不规则剥落边界和低对比度冰柱时具有更稳定的特征表达;

30、4.能够形成便于工程应用的逐区域结构化量化结果,本发明对同一类别中彼此分离的病害区域进行连通区域划分,并为每个独立病害区域分别形成区域编号、像素数量、外接范围和面积,避免一个统一外接范围覆盖多个独立病害区域;

31、5.本发明通过多层局部特征与全局上下文特征的协同融合,能够提高寒区隧道衬砌病害语义分割的准确性,并有利于保持细长裂缝等薄目标的边缘细节,经实施例验证,在采用5891张寒区隧道衬砌图像-掩膜样本进行训练、验证和测试时,所述特征协同融合病害分割模型的验证集miou达到85.97%,高于unet基线模型的81.17%;所述特征协同融合病害分割模型在测试集裂缝样本上的裂缝iou达到75.85%,高于unet基线模型的64.79%,表明本发明在薄目标边缘保持和复杂背景分割稳定性方面具有较好的技术效果;

32、6.能够输出更便于养护人员理解的检测记录,每个独立病害区域均对应一条包括病害类别、区域编号、图像位置、区域边界和面积的检测记录;需要类别统计时,仅对各区域的像素数量或面积进行汇总,从而兼顾精确定位与类别统计,为后续巡检和维修养护判断提供依据。