基于多源图像融合与非线性校正的冷拉型钢尺寸测量方法与流程
本发明涉及精密尺寸测量,尤其涉及基于多源图像融合与非线性校正的冷拉型钢尺寸测量方法。
背景技术:
1、冷拉型钢作为机械装备、轨道交通、汽车制造和精密结构件中的重要基础材料,其截面尺寸精度直接影响后续装配性能和结构稳定性。目前冷拉型钢生产过程中的尺寸检测主要采用接触式测量工具、单相机视觉检测方法以及基于传统图像处理的轮廓提取方法。接触式测量方式通过测量探头获取型钢边缘位置并计算尺寸参数,检测精度受测量接触状态、设备磨损以及人为操作影响;单相机视觉检测方式利用工业相机采集型钢图像,通过边缘检测、轮廓拟合等方式提取截面尺寸,能够实现非接触检测,但单一视角图像存在遮挡、视角变化和成像畸变问题;传统图像处理方法依赖固定阈值和人工设计特征,难以适应冷拉型钢表面反光、圆角过渡以及复杂截面结构变化。
2、现有冷拉型钢尺寸测量方法在多视角信息融合、复杂轮廓识别和几何误差校正方面仍存在不足。不同视角图像之间缺少有效的几何约束关系,轮廓点对应精度受到相机姿态变化影响,容易产生跨视角融合误差;针对包含直线边缘和圆角过渡的型钢截面,传统轮廓提取方法难以建立连续的区段关联关系,导致尺寸基准确定不准确;测量过程中受到镜头畸变、安装偏差和成像误差影响,直接利用图像坐标计算尺寸会产生非线性测量偏差,降低尺寸检测精度。因此,需要一种结合多源图像融合、智能轮廓识别和非线性坐标校正的冷拉型钢尺寸测量方法,实现复杂截面轮廓的准确提取和高精度尺寸计算。
3、因此,如何提供基于多源图像融合与非线性校正的冷拉型钢尺寸测量方法是本领域技术人员亟需解决的问题。
技术实现思路
1、本发明的一个目的在于提出基于多源图像融合与非线性校正的冷拉型钢尺寸测量方法,本发明利用工业机器视觉、改进型mask dino网络、多视角图像融合和非线性坐标校正技术,对冷拉型钢截面图像进行轮廓提取、跨视角融合和尺寸计算,实现复杂截面结构的高精度测量。本发明具备轮廓识别精度高、测量稳定性强和尺寸检测准确性高的优点。
2、根据本发明实施例的基于多源图像融合与非线性校正的冷拉型钢尺寸测量方法,包括如下步骤:
3、采集冷拉型钢同一截面的多源型钢图像,预处理生成标准化多源型钢图像;
4、将标准化多源型钢图像输入改进型mask dino网络,提取多尺度特征,将相机标定参数和观测方向编码并与多尺度特征融合,生成多源几何增强特征;
5、基于多源几何增强特征执行级联测量查询,型钢主体查询生成主体掩膜并限定测量区域,轮廓区段查询识别边缘区段和转角过渡区段并输出区段解码特征,尺寸基准查询依据区段解码特征和截面拓扑关系确定连接位置及基准位置,生成局部测量轮廓;
6、将局部测量轮廓映射至统一截面测量坐标系,建立跨视角对应关系并融合生成初始测量轮廓;
7、将初始测量轮廓点、截面中心和转角输入非线性坐标校正场,获得坐标补偿量并生成校正测量轮廓;
8、将校正测量轮廓反向投影至源图像坐标系,计算与局部测量轮廓的偏差,生成查询参考点偏移量和误差空间掩膜并写入transformer解码器,更新轮廓区段查询和尺寸基准查询的参考位置及注意范围,重新执行轮廓生成、融合和校正,直至偏差满足收敛条件,生成最终测量轮廓;
9、依据最终测量轮廓确定测量基准,计算截面尺寸,生成尺寸测量结果。
10、可选的,所述预处理过程包括:读取多源型钢图像的采集时刻和图像采集单元标识,按照同一截面采集时刻完成图像绑定,对绑定后的多源型钢图像进行背景灰度校正和灰度归一化,对灰度归一化后的多源型钢图像进行噪声抑制,依据截面测量区域裁剪各视角图像,按照图像采集单元标识排列裁剪后的各视角图像,生成标准化多源型钢图像。
11、可选的,所述改进型mask dino网络包括共享参数特征编码器、几何编码层、像素解码器、transformer解码器和查询反馈接口;
12、不同视角的标准化多源型钢图像按照图像采集单元标识分别接入共享参数特征编码器,共享参数特征编码器输出各视角对应的多尺度特征至几何编码层;
13、相机标定参数和观测方向接入几何编码层,几何编码层将相机标定参数和观测方向的编码结果与对应视角的多尺度特征融合,输出多源几何增强特征至像素解码器;
14、像素解码器对多源几何增强特征执行尺度对齐和特征融合,将处理结果输入transformer解码器;
15、transformer解码器依次设置型钢主体查询、轮廓区段查询和尺寸基准查询,型钢主体查询的输出端连接轮廓区段查询,轮廓区段查询的输出端连接尺寸基准查询;
16、轮廓区段查询和尺寸基准查询分别设置参考位置及掩膜注意范围,查询反馈接口接收查询参考点偏移量和误差空间掩膜,将查询参考点偏移量写入对应参考位置,将误差空间掩膜写入对应掩膜注意范围,将更新后的轮廓区段查询和尺寸基准查询输入transformer解码器。
17、可选的,所述生成多源几何增强特征的过程包括:
18、将不同视角的标准化多源型钢图像分别输入共享参数特征编码器,从不同特征层读取不同空间分辨率的特征,生成各视角对应的多尺度特征;
19、按照图像采集单元标识读取相机标定参数和观测方向,通过几何编码层生成视角几何编码,映射至对应多尺度特征的通道维度和空间尺寸;
20、将映射后的视角几何编码与对应视角、对应尺度的多尺度特征按空间位置融合,汇集生成多源几何增强特征。
21、可选的,所述执行级联测量查询的过程包括:
22、将型钢主体查询与多源几何增强特征执行交叉注意力计算,生成主体解码特征和主体掩膜,依据主体掩膜确定测量区域,将主体掩膜作为轮廓区段查询的掩膜注意范围,将主体解码特征写入轮廓区段查询;
23、将轮廓区段查询与测量区域内的多源几何增强特征执行掩膜交叉注意力计算,依据轮廓方向连续状态识别边缘区段,依据轮廓方向变化状态识别转角过渡区段,生成各轮廓区段对应的区段解码特征和端部位置;
24、将区段解码特征和端部位置写入尺寸基准查询,依据截面拓扑关系建立边缘区段与转角过渡区段之间的相邻约束,按照相邻约束匹配各轮廓区段的端部位置,确定连接顺序和连接位置;
25、基于连接位置对应的区段解码特征确定基准位置,按照连接顺序连接对应的边缘区段和转角过渡区段,生成各视角对应的局部测量轮廓。
26、可选的,所述生成初始测量轮廓的过程包括:
27、将局部测量轮廓中的轮廓点转换为成像射线,计算成像射线与冷拉型钢截面测量平面的交点,将交点转换至统一截面测量坐标系;
28、按照边缘区段、转角过渡区段及连接顺序,对统一截面测量坐标系中的各视角局部测量轮廓进行区段对应,生成跨视角候选对应区段;
29、将跨视角候选对应区段按照轮廓延伸方向进行弧长归一化,匹配归一化弧长位置相对应且空间距离满足对应阈值的轮廓点,建立跨视角对应关系;
30、依据轮廓点对应的区段置信度和观测方向,对具有跨视角对应关系的轮廓点进行加权融合,生成融合轮廓点;
31、按照截面拓扑关系和连接顺序排列融合轮廓点,连接相邻边缘区段和转角过渡区段,生成初始测量轮廓。
32、可选的,所述生成校正测量轮廓的过程包括:
33、读取初始测量轮廓点、截面中心和转角,计算各初始测量轮廓点相对截面中心的位置向量及到相邻转角的距离,结合对应区段类别生成校正输入特征;
34、将校正输入特征输入非线性坐标校正场,输出横轴和纵轴对应的坐标补偿量;
35、将边缘区段对应的坐标补偿量投影至轮廓法向,将转角过渡区段对应的坐标补偿量按照到相邻转角的距离分配至相邻轮廓法向,生成受约束坐标补偿量;
36、将受约束坐标补偿量与对应初始测量轮廓点坐标相加,按照连接顺序排列更新后的轮廓点,生成校正测量轮廓。
37、可选的,所述生成查询参考点偏移量和误差空间掩膜的过程包括:
38、依据各图像采集单元对应的坐标映射关系,将校正测量轮廓点反向投影至对应源图像坐标系,生成各视角对应的反向投影轮廓;
39、按照轮廓区段类别和连接顺序,将反向投影轮廓点与同一视角的局部测量轮廓点进行弧长位置匹配,计算匹配轮廓点之间的横轴坐标差和纵轴坐标差,生成反向投影偏差;
40、筛选偏差幅值超过预设偏差阈值且沿连接顺序连续的轮廓点,将连续轮廓点合并为异常轮廓区段;
41、依据异常轮廓区段内反向投影偏差的方向和幅值进行区段聚合,将聚合偏差转换至轮廓区段查询和尺寸基准查询的参考位置坐标尺度,生成查询参考点偏移量;
42、将异常轮廓区段映射至多尺度解码特征对应的各尺度空间位置,依据偏差幅值扩展对应空间位置并写入误差权重,生成误差空间掩膜。
43、可选的,所述生成最终测量轮廓的过程包括:
44、将查询参考点偏移量分别与对应轮廓区段查询和尺寸基准查询的参考位置叠加,生成更新参考位置;
45、将误差空间掩膜映射至各尺度注意力得分矩阵,按照误差权重生成掩膜注意力偏置,保持原掩膜注意范围外的位置处于屏蔽状态;
46、将更新参考位置和掩膜注意力偏置写入transformer解码器,依据更新参考位置改变轮廓区段查询和尺寸基准查询的特征采样位置,依据掩膜注意力偏置调整多源几何增强特征的参与范围;
47、重新执行轮廓区段查询和尺寸基准查询,更新边缘区段、转角过渡区段、连接位置及基准位置,生成更新局部测量轮廓;
48、将更新局部测量轮廓依次执行统一坐标映射、跨视角融合和非线性坐标校正,生成更新校正测量轮廓;
49、将更新校正测量轮廓反向投影至对应源图像坐标系,重新计算与更新局部测量轮廓之间的反向投影偏差;
50、当反向投影偏差的最大幅值不大于预设收敛阈值且连续两轮反向投影偏差的平均幅值变化量不大于预设变化阈值时,将更新校正测量轮廓确定为最终测量轮廓;未满足预设收敛条件时,基于反向投影偏差重新生成查询参考点偏移量和误差空间掩膜并执行下一轮解码,直至满足预设收敛条件。
51、可选的,所述生成尺寸测量结果的过程包括:
52、依据最终测量轮廓中的基准位置、区段类别和截面拓扑关系确定相对边缘基准和转角基准;
53、计算相对边缘基准之间的法向距离得到截面宽度、截面高度和边缘间距,拟合转角过渡区段得到转角半径,生成尺寸测量结果。
54、本发明的有益效果是:
55、(1)本发明通过改进型mask dino网络构建多源图像特征提取与级联测量查询机制,将型钢主体查询、轮廓区段查询和尺寸基准查询进行逐级关联,实现冷拉型钢截面边缘区段、转角过渡区段及测量基准位置的准确识别,提高复杂截面轮廓提取能力。
56、(2)本发明通过多视角局部测量轮廓映射、跨视角对应关系建立和轮廓点加权融合,实现不同图像采集单元之间的几何信息融合,降低单视角遮挡、视角变化和成像偏差对尺寸测量结果的影响,提高尺寸测量稳定性。
57、(3)本发明通过非线性坐标校正场、反向投影偏差分析和查询反馈更新机制,对测量过程中的非线性几何误差进行迭代校正,实现测量轮廓的持续优化,提高冷拉型钢截面尺寸计算精度。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com