基于多尺度图像分割的锦纶丝粗细不均检测方法及系统与流程

摘要: 本发明涉及锦纶丝粗细不均,尤其涉及一种基于多尺度图像分割的锦纶丝粗细不均检测方法及系统。背景技术:1、随着锦纶丝高速连续生产及在线质量检测需求的提高,利用机器视...
基于多尺度图像分割的锦纶丝粗细不均检测方法及系统与流程

本发明涉及锦纶丝粗细不均,尤其涉及一种基于多尺度图像分割的锦纶丝粗细不均检测方法及系统。

背景技术:

1、随着锦纶丝高速连续生产及在线质量检测需求的提高,利用机器视觉对锦纶丝粗细均匀性进行非接触检测已成为重要技术手段。现有技术通常通过工业相机采集锦纶丝图像,并采用灰度阈值分割、边缘检测、形态学处理或深度学习语义分割方法提取锦纶丝主体区域,依据图像中的边缘间距估算丝径,根据丝径变化判断粗节、细节质量异常。锦纶丝属于细长连续目标,在连续输送过程中容易受到姿态偏转、弯曲振动、运动模糊、表面反光、毛丝及成像亮度波动等因素影响,导致主体区域与背景之间的灰度差异和边缘响应不稳定,传统固定阈值或局部边缘检测方法容易产生边缘断裂、单侧扩张及位置漂移。

2、现有语义分割方法能够提高主体区域识别能力,但通常侧重像素分类结果,对锦纶丝两侧边界之间的空间对应关系、沿丝体延伸方向的连续性及局部几何变化缺少约束,局部干扰容易直接转化为丝径测量误差。

3、现有丝径检测通常沿固定图像方向计算两侧边缘距离或采用局部单点、区段平均值进行判定,在锦纶丝发生倾斜、弯曲或横向振动时,固定方向测量结果容易混入姿态变化引起的表观宽度变化,难以准确区分真实粗细变化与空间姿态变化,仅依据单点丝径偏差或固定阈值进行异常判断,难以综合表征丝径偏差程度、沿锦纶丝延伸方向的变化趋势及异常区段的连续持续范围,易造成短时噪声误报、相邻异常区段错误合并以及渐变型粗细不均区域识别不准确的问题。

技术实现思路

1、本发明的一个目的在于提出一种基于多尺度图像分割的锦纶丝粗细不均检测方法及系统,本发明增强网络对细长主体连续结构、弱边缘及局部粗细变化的表征能力,使后续初始分割结果和初始边缘特征具有更稳定的空间连续性。

2、根据本发明实施例的一种基于多尺度图像分割的锦纶丝粗细不均检测方法,包括:

3、采集连续成像图像并进行预处理,得到锦纶丝标准化图像序列,同时进行尺度映射关系,生成锦纶丝图像尺度标定;

4、将锦纶丝标准化图像序列输入改进segnext,经5×5深度卷积及轴向—法向方向映射,将固定条带卷积转换为方向自适应多尺度卷积,融合轴向、法向条带特征并解码,生成初始分割结果和初始边缘特征;

5、根据锦纶丝初始分割结果确定锦纶丝主体区域的连续延伸路径,对连续延伸路径进行中心位置提取,生成锦纶丝中心线几何基准;

6、基于锦纶丝中心线几何基准,在各中心线位置沿对应的局部法向方向分别确定锦纶丝两侧初始边界,计算各中心线位置至两侧初始边界的双侧空间距离,并生成锦纶丝中心线距离场;

7、根据锦纶丝中心线距离场确定各中心线位置对应的双侧边界几何一致性,并基于双侧边界几何一致性生成中心线距离场引导信息,将中心线距离场引导信息与锦纶丝初始边缘特征进行融合,生成锦纶丝修正双侧边界;

8、基于锦纶丝中心线几何基准和锦纶丝修正双侧边界,沿局部法向计算实际丝径并按中心线顺序排列,生成锦纶丝连续丝径序列;

9、基于锦纶丝连续丝径序列确定正常丝径基准,以丝径偏差、变化趋势及持续长度识别粗节、细节和渐变型粗细不均,生成检测结果。

10、可选的,所述采集连续成像图像并进行预处理,得到锦纶丝标准化图像序列,包括:

11、通过面向连续输送状态下待检测锦纶丝布置的工业相机,按照人为设置的图像采集频率连续获取包含待检测锦纶丝的原始成像图像;

12、根据检测区域位置从原始成像图像中提取锦纶丝检测区域,并对锦纶丝检测区域进行亮度校正、背景抑制和图像尺度统一,生成锦纶丝标准化图像序列;

13、基于设置于工业相机成像视场内且实际尺寸已知的标定参照,确定标定参照对应的像素尺寸,根据实际尺寸与像素尺寸之间的对应关系建立图像像素尺寸与实际空间尺寸之间的尺度映射关系,生成锦纶丝图像尺度标定。

14、可选的,所述将锦纶丝标准化图像序列输入改进segnext,包括:

15、将锦纶丝标准化图像序列输入改进segnext,经5×5深度卷积,生成锦纶丝局部空间特征;

16、基于锦纶丝局部空间特征,对通道特征进行方向映射,生成锦纶丝局部轴向方向和锦纶丝局部法向方向;

17、基于锦纶丝局部轴向方向和锦纶丝局部法向方向,将固定条带卷积转换为方向自适应卷积,生成轴向条带空间特征和法向条带空间特征;

18、融合各尺度轴向条带空间特征和法向条带空间特征,叠加锦纶丝局部空间特征,经一乘一逐点卷积,生成锦纶丝多尺度视觉特征;

19、将锦纶丝多尺度视觉特征经改进segnext解码融合并映射至像素空间,生成锦纶丝初始分割结果;

20、根据锦纶丝初始分割结果确定像素级空间过渡位置,提取对应多尺度融合特征并抑制非过渡位置响应,生成锦纶丝初始边缘特征。

21、可选的,所述根据锦纶丝初始分割结果确定锦纶丝主体区域的连续延伸路径,对连续延伸路径进行中心位置提取,包括:

22、根据锦纶丝初始分割结果对锦纶丝主体区域进行连通分析,确定锦纶丝主体区域的连续延伸路径;

23、基于连续延伸路径计算锦纶丝主体区域内各像素至非锦纶丝主体区域的最短空间距离,根据最短空间距离确定中心候选位置,并对中心候选位置进行位置平滑和顺序关联,生成锦纶丝连续中心位置序列;

24、基于锦纶丝连续中心位置序列,根据相邻连续中心位置的二维像素坐标变化,确定各连续中心位置对应的锦纶丝局部延伸方向;

25、根据锦纶丝局部延伸方向确定对应的局部法向方向,将锦纶丝连续中心位置序列、锦纶丝局部延伸方向和局部法向方向进行空间关联,生成锦纶丝中心线几何基准。

26、可选的,所述基于锦纶丝中心线几何基准,在各中心线位置沿对应的局部法向方向分别确定锦纶丝两侧初始边界,包括:

27、基于锦纶丝中心线几何基准,在各连续中心位置沿对应的局部法向方向进行双向空间搜索,确定各连续中心位置对应的锦纶丝两侧初始边界;

28、根据各连续中心位置和对应的锦纶丝两侧初始边界,分别计算正向空间距离和反向空间距离,生成各连续中心位置对应的双侧空间距离;

29、基于各连续中心位置对应的双侧空间距离,分别确定相邻连续中心位置之间的双侧空间距离连续性、同一连续中心位置对应的双侧对应关系及双侧空间距离沿连续延伸路径的轴向变化趋势;

30、按照连续延伸路径的空间连接顺序,将锦纶丝连续中心位置序列中的各连续中心位置与双侧空间距离、双侧空间距离连续性、双侧对应关系及轴向变化趋势进行空间位置逐一关联,生成锦纶丝中心线距离场。

31、可选的,所述根据锦纶丝中心线距离场确定各中心线位置对应的双侧边界几何一致性,包括:

32、基于锦纶丝中心线距离场,结合正向空间距离连续偏差、反向空间距离连续偏差、双侧空间距离对应偏差及正向空间距离轴向变化趋势及反向空间距离轴向变化趋势,确定连续中心位置对应的双侧边界几何一致性;

33、根据各连续中心位置对应的双侧边界几何一致性,对相邻连续中心位置对应的正向空间距离和反向空间距离进行一致性加权,生成正向局部参考空间距离和反向局部参考空间距离;

34、根据双侧边界几何一致性,融合双侧空间距离与正向局部参考空间距离和反向局部参考空间距离,生成正向引导空间距离和反向引导空间距离及中心线距离场引导信息;

35、将中心线距离场引导信息与锦纶丝初始边缘特征进行融合,生成锦纶丝双侧引导边缘响应;

36、根据锦纶丝双侧引导边缘响应确定各连续中心位置对应的正向修正边界和反向修正边界,生成锦纶丝修正双侧边界。

37、可选的,所述基于锦纶丝中心线几何基准和锦纶丝修正双侧边界,沿局部法向计算实际丝径并按中心线顺序排列,包括:

38、基于锦纶丝中心线几何基准和锦纶丝修正双侧边界,将各连续中心位置与对应的正向修正边界和反向修正边界进行空间位置关联,确定各连续中心位置对应的两侧边界位置;

39、根据对应的两侧边界位置,计算正向修正边界与反向修正边界之间的二维像素欧氏距离,生成各连续中心位置对应的两侧边界像素距离;

40、根据锦纶丝图像尺度标定结果,将各连续中心位置对应的两侧边界像素距离转换为实际空间距离,确定为对应连续中心位置的局部丝径;

41、按照连续延伸路径的空间连接顺序排列各连续中心位置的局部丝径,生成锦纶丝连续丝径序列。

42、可选的,所述基于锦纶丝连续丝径序列确定正常丝径基准,计算各中心线位置对应的丝径偏差、相邻中心线位置之间的丝径变化趋势及连续异常区段的持续长度,包括:

43、基于锦纶丝连续丝径序列确定正常丝径基准,计算各连续中心位置对应的丝径偏差;

44、基于锦纶丝连续丝径序列,计算相邻连续中心位置之间的局部丝径变化量和实际空间间距,生成相邻连续中心位置之间的丝径变化趋势;

45、根据丝径偏差及丝径变化趋势确定异常连续中心位置,对空间相邻的异常连续中心位置进行连续关联,生成连续异常区段及对应的持续长度;

46、根据连续异常区段对应的丝径偏差、丝径变化趋势和持续长度,对锦纶丝粗节、细节及渐变型粗细不均区域进行分类判定,生成连续异常区段分类结果;

47、根据连续异常区段分类结果,确定各连续异常区段对应的异常类型、起始连续中心位置、终止连续中心位置及持续长度,生成锦纶丝粗细不均检测结果。

48、可选的,所述连续异常区段分类结果,包括:

49、粗节:待分类连续异常区段内正向丝径偏差的连续中心位置数量占比大于二分之一,且正向丝径偏差绝对值的最大值达到丝径偏差判别阈值,不满足渐变型粗细不均区域判定条件,确定为锦纶丝粗节;

50、细节:待分类连续异常区段内负向丝径偏差的连续中心位置数量占比大于二分之一,且负向丝径偏差绝对值的最大值达到丝径偏差判别阈值,不满足渐变型粗细不均区域判定条件,确定为锦纶丝细节;

51、渐变型粗细不均区域:待分类连续异常区段内相邻连续中心位置之间的丝径变化趋势连续保持相同变化方向,且丝径变化趋势绝对值达到丝径变化趋势判别阈值,同时连续异常区段起始连续中心位置与终止连续中心位置对应局部丝径之间的绝对差值达到丝径偏差判别阈值,确定为锦纶丝渐变型粗细不均区域。

52、本发明的有益效果是:

53、本发明将原有固定横向、纵向的条带卷积处理方式调整为沿锦纶丝局部轴向方向和局部法向方向进行多尺度特征提取,结合7像素、11像素和21像素尺度获得轴向条带空间特征和法向条带空间特征,通过轴向—法向耦合及注意力加权形成锦纶丝多尺度视觉特征,能够使特征提取方向随锦纶丝实际延伸姿态变化,降低锦纶丝倾斜、弯曲、横向振动以及局部反光对主体区域和两侧边缘特征提取的干扰,增强网络对细长主体连续结构、弱边缘及局部粗细变化的表征能力,使后续初始分割结果和初始边缘特征具有更稳定的空间连续性。

54、本发明根据初始分割结果建立连续延伸路径和中心线几何基准,在各连续中心位置沿局部法向方向确定正向空间距离和反向空间距离,并综合双侧空间距离连续性、双侧对应关系及轴向变化趋势构建锦纶丝中心线距离场,计算双侧边界几何一致性,对相邻连续中心位置的双侧空间距离进行一致性加权,形成正向引导空间距离、反向引导空间距离及距离场引导权重,利用距离场引导权重对改进segnext初始边缘响应进行增强或抑制,使边界修正同时受到深度视觉特征和锦纶丝连续几何结构约束,能够抑制毛丝、局部高亮、噪声边缘及孤立错误响应,避免单侧边界漂移或局部断裂直接转化为丝径测量误差,提高两侧边界在连续延伸方向上的一致性和稳定性。