一种电磁阀环形焊缝缺陷在线检测方法、系统、设备及存储介质

摘要: 本发明涉及机器视觉与焊接质量检测,特别是涉及一种电磁阀环形焊缝缺陷在线检测方法、系统、设备及存储介质。背景技术:1、电磁阀是新能源汽车热管理系统、制动系统及气动...
一种电磁阀环形焊缝缺陷在线检测方法、系统、设备及存储介质

本发明涉及机器视觉与焊接质量检测,特别是涉及一种电磁阀环形焊缝缺陷在线检测方法、系统、设备及存储介质。

背景技术:

1、电磁阀是新能源汽车热管理系统、制动系统及气动控制回路中的关键执行元件,其阀体组件通常采用环形激光焊缝实现密封连接。该焊缝沿圆周 360° 闭合,焊缝质量直接决定阀体的密封性能与使用寿命,凹陷、漏焊、偏焊、气孔、炸点等缺陷均可能导致介质泄漏甚至功能失效,因此必须对整条环形焊缝进行全周质量检测。

2、现有检测手段中,人工目检与抽样测量效率低、一致性差,难以满足产线全检要求;基于机器视觉的在线检测方案逐渐成为主流。公开出版物中已有将 yolo(you onlylook once,单阶段目标检测算法)系列模型应用于焊缝及金属表面缺陷检测的报道,例如姚屏等、张湃等研究者公开的焊缝缺陷检测研究;在模型压缩方面,hinton 等在公开文献中提出了知识蒸馏(knowledge distillation)方法,li 等提出了基于卷积核 l2 范数的结构化通道剪枝方法,均为本领域已公开的技术手段。

3、目前公开的在线检测系统通常由工业相机、照明光源、工控机与执行机构组成,检测流程依次为图像采集、图像预处理、缺陷识别与结果分拣。针对环形焊缝,公开方案多采用将环形区域展开为矩形条带后再输入检测模型的技术路线,以降低环形几何形变对检测的影响。

4、然而,将上述现有技术应用于电磁阀环形焊缝在线检测时,仍存在以下缺点:

5、(1)环形焊缝图像需展平为矩形条带后方可输入检测模型,跨越展平首尾边界(即0/2π 接缝)的缺陷被切断为两段,检测框在边界处被割裂,导致漏检与重复计数;

6、(2)实际产线良品率高、可获取的缺陷样本稀缺,单纯改进网络结构在小样本条件下精度收益不稳定;

7、(3)在线检测受工位节拍与边缘设备算力约束,大模型难以直接部署,而直接换用小模型又会造成检测精度明显下降,检测精度与推理速度难以兼顾。

技术实现思路

1、本发明的目的是提供一种电磁阀环形焊缝缺陷在线检测方法、系统、设备及存储介质,旨在解决或改善上述技术问题中的至少之一。

2、为实现上述目的,本发明提供了如下方案:

3、一种电磁阀环形焊缝缺陷在线检测方法,包括:

4、采集电磁阀环形焊缝的原始环形图像;

5、以全局标定圆心为极点、按角度-半径对所述原始环形图像进行极坐标条带化展开,得到条带图;

6、对所述条带图沿水平方向进行循环平移增强,生成训练样本;

7、对所述训练样本的缺陷进行标注;

8、以冻结的教师模型对学生模型进行知识蒸馏训练,对训练完成的学生模型进行结构化通道剪枝,确定定档剪枝率,得到缺陷检测模型;

9、将待检工件的条带图输入缺陷检测模型进行缺陷检测,并将检测框坐标经极坐标展开逆变换回映射至原始环形图像,输出合格/不合格判定结果。

10、进一步地,极坐标条带化展开过程中,对跨越0/2π接缝的缺陷标注框在接缝处拆分为两个子框。

11、进一步地,所述循环平移增强包括对条带图沿水平方向进行 10 次均匀循环平移与 2 次随机平移,并叠加两档光度扰动,连同原始样本共生成13个版本;利用圆环的旋转等价性,使缺陷以均匀概率分布于条带图的各个水平位置;循环平移增强过程中,缺陷标注框随条带图同步循环平移;平移后跨越条带图边界的标注框在边界处拆分为两个子框,并分别保留于条带图两端,保持图像与标注一致。

12、进一步地,所述知识蒸馏训练的总损失为:

13、l = α·l_kd + (1-α)·l_det

14、其中,l_kd为教师软标签蒸馏损失,l_det为硬标签检测损失,α为蒸馏损失的权重系数。

15、进一步地,结构化通道剪枝具体为:

16、以卷积核 l2 范数作为通道重要性度量指标,逐层计算各卷积核的 l2 范数并完成全网络通道的全局重要性排序;按 10% 至 90% 、步长10%共9档剪枝率逐一执行通道裁剪与精度验证,以剪枝后模型精度降幅不超过预设阈值为约束进行初筛,并结合多种子重复训练复核,确定最终定档剪枝率。

17、进一步地,所述定档剪枝率为60%。

18、进一步地,所述缺陷包括凹陷、漏焊、偏焊、气孔、炸点。

19、一种电磁阀环形焊缝缺陷在线检测系统,包括图像采集模块、图像展开模块、数据增强模块、样本标注模块、模型训练压缩模块以及缺陷检测判定模块:

20、所述图像采集模块,用于采集电磁阀环形焊缝的原始环形图像;

21、所述图像展开模块,用于以全局标定圆心为极点、按角度-半径对原始环形图像进行极坐标条带化展开,得到条带图;

22、所述数据增强模块,用于对条带图沿水平方向进行循环平移增强,生成训练样本;

23、所述样本标注模块,用于对训练样本中的缺陷进行标注;

24、所述模型训练压缩模块,用于以冻结的教师模型对学生模型进行知识蒸馏训练,对训练完成的学生模型进行结构化通道剪枝并确定定档剪枝率,得到缺陷检测模型;

25、所述缺陷检测判定模块,用于将待检工件的条带图输入缺陷检测模型进行缺陷检测,并将检测框坐标经极坐标展开逆变换回映射至原始环形图像,输出合格/不合格判定结果。

26、一种电子设备,包括存储器和处理器,所述处理器执行存储器中存储的程序时实现权利要求1至7任一项所述的电磁阀环形焊缝缺陷在线检测方法。

27、一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现权利要求1至7任一项所述的电磁阀环形焊缝缺陷在线检测方法。

28、本发明公开了以下技术效果:

29、(1)检测精度显著提升:经知识蒸馏后,学生模型的平均精度均值map50由0.9610提升至0.9704,提高0.94个百分点;map50-95提高4.81个百分点;基于8次重复训练的wilcoxon符号秩检验结果为p=0.0156(n=8),表明精度提升具有统计显著性;其中roll增强单项使map50提高5.10个百分点;

30、(2)模型大幅压缩且满足在线节拍:剪枝定档后模型参数量由2.583m降至0.855m,减少66.9%;计算量由6.32g flops降至2.55g flops,减少59.7%;检测帧率达69 fps,满足在线检测节拍要求;压缩后map50保持为0.9496±0.0036;

31、(3)各类缺陷检测精度均衡:蒸馏后学生模型对五类缺陷的逐类ap50分别为:凹陷0.9950、漏焊0.9922、偏焊0.8750、气孔0.9950、炸点0.9950,较基线模型均有提升或持平;

32、(4)跨接缝缺陷完整检出:通过跨接缝标注框拆分与roll增强,跨越展平边界的缺陷不再被割裂漏检,消除了接缝附近的检测盲区。

1.一种电磁阀环形焊缝缺陷在线检测方法,其特征在于,包括:

2. 根据权利要求 1 所述的电磁阀环形焊缝缺陷在线检测方法,其特征在于,极坐标条带化展开过程中,对跨越0/2π接缝的缺陷标注框在接缝处拆分为两个子框。

3. 根据权利要求 1 所述的电磁阀环形焊缝缺陷在线检测方法,其特征在于,所述循环平移增强包括对条带图沿水平方向进行 10 次均匀循环平移与 2 次随机平移,并叠加两档光度扰动,连同原始样本共生成13个版本;利用圆环的旋转等价性,使缺陷以均匀概率分布于条带图的各个水平位置; 循环平移增强过程中,缺陷标注框随条带图同步循环平移;平移后跨越条带图边界的标注框在边界处拆分为两个子框,并分别保留于条带图两端,保持图像与标注一致。

4. 根据权利要求 1 所述的电磁阀环形焊缝缺陷在线检测方法,其特征在于,所述知识蒸馏训练的总损失为:

5. 根据权利要求 1 所述的电磁阀环形焊缝缺陷在线检测方法,其特征在于,结构化通道剪枝具体为:

6. 根据权利要求 5所述的电磁阀环形焊缝缺陷在线检测方法,其特征在于,所述定档剪枝率为60%。

7.根据权利要求1所述的电磁阀环形焊缝缺陷在线检测方法,其特征在于,所述缺陷包括凹陷、漏焊、偏焊、气孔、炸点。

8.一种电磁阀环形焊缝缺陷在线检测系统,其特征在于,包括图像采集模块、图像展开模块、数据增强模块、样本标注模块、模型训练压缩模块以及缺陷检测判定模块:

9.一种电子设备,包括存储器和处理器,其特征在于,所述处理器执行存储器中存储的程序时实现权利要求1至7任一项所述的电磁阀环形焊缝缺陷在线检测方法。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现权利要求1至7任一项所述的电磁阀环形焊缝缺陷在线检测方法。