一种中央电气分配盒装配质量视觉检测装置及其检测方法与流程
本发明涉及中央电气分配盒加工,具体为一种中央电气分配盒装配质量视觉检测装置及其检测方法。
背景技术:
1、传统中央电气分配盒(edb,俗称保险丝盒)主要是指包含pcb印制电路板、继电器、熔断器以及限流电阻、二极管等元件以及外壳等结构件的产品。接插件、保险丝接插件、继电器接插件以及电阻、二极管等通过焊接的形式安装在pcb板上,然后根据整车的电气需求,在相应位置插装相应规格的熔断器以及继电器等,再辅助安装外壳等结构件,完成组装。熔断器通常以壳体颜色标识额定电流规格(如红色10a、棕色7.5a、蓝色15a、黄色20a、绿色30a等),同一单板上器件数量多、规格多、布局紧凑。
2、由于熔断器、继电器等器件目前仍主要依靠人工插装,产线上普遍存在错插(插错规格)、漏插(缺件)、多插(多件)、歪斜等装配缺陷。此类缺陷一旦流入整车装配环节,轻则电气功能失效,重则引起供电回路异常甚至烧蚀风险,因此出厂前必须对装配质量进行100%检测。
3、目前对装配质量的检测手段主要有两类:
4、(1)人工目视检测。依靠检测人员对照装配图逐一核对器件颜色与位置。由于单板器件数量多(数十至上百个)、部分规格颜色相近(如红色与棕色、本色与浅黄色保险丝色差很小)、单板型号繁多,人工检测速度慢、易疲劳、易漏检,准确率和节拍均无法保证。
5、(2)基于色彩阈值与模板比对的机器视觉检测。这也是与本发明最接近的现有技术方案,其典型实现为:单板经皮带传送机构沿导轨进入遮光暗箱,暗箱内布置恒定光源与工业相机,单板遮挡红外线触发相机抓拍;对每一种型号单板预先人工制作模板,即在母版图片上手动画出若干矩形检测区域和一个定位区域;检测时,抓拍图片先经定位区域比对完成偏移修正,再与模板逐区域进行颜色相似度比对(其颜色识别基于rgb/hsv/yuv等色彩空间的阈值分割),相似度超出经验设定的告警阈值即判定异常并告警。此类方案本质上是通过约束环境条件——均匀照明、单板匀速端正行进、固定抓拍位置——来压低视觉识别的难度。该方案一定程度上解决了人工检测的问题,但仍存在以下问题和缺点:
6、①本质是像素级颜色相似度比对,不具备器件语义识别能力。它只能发现“该区域颜色与模板不一致”,而无法直接回答“该工位插的是什么规格的器件”。对于颜色相近的不同规格保险丝(如红色10a与棕色7.5a,或同色系深浅不同的两个规格),在器件批次色差、光照波动下,误判率高;
7、②颜色阈值与相似度对光照条件高度敏感。光源老化、供电电压波动、器件表面反光等都会导致颜色判定漂移,需要频繁重新标定阈值,且误报率与漏报率难以同时压低;告警判定参数(上、下限告警阈值、平均告警系数等)需凭产线经验反复整定,不同型号、不同批次均需分别摸索,缺乏自适应能力;
8、③依赖定位区域做偏移修正。当抓拍偏移量稍大或单板在导轨内发生歪斜时,偏移修正失效,比对整体失败,产生大量无效告警甚至漏检;
9、④模板制作繁琐且依赖人工经验。每个型号需在母版图片上逐个框画检测区域并反复调整矩形范围,新品导入周期长;产品布局稍一变更即需重制模板;
10、⑤检测输出为相似度差异区域,无法结构化地输出缺件、错件、多件、歪斜等缺陷类型和器件工位信息,不利于质量数据的统计分析与工艺改进;
11、⑥各型号模板相互孤立,历史图像与误判经验无法沉淀复用,系统能力不随使用时间提升。
12、近年来以yolo(you only look once)为代表的单阶段深度学习目标检测技术发展成熟:将检测建模为对图像的一次端到端前向推理,直接输出全部目标的类别、置信度与边界框,兼具语义识别能力与实时性,已在工业质检领域展现出对光照变化、位置偏移、目标姿态变化的良好鲁棒性。但将该类技术落地到中央电气分配盒这类多型号、小目标密集、同一工位可插多种规格器件、需按装配要求逐工位核对的场景,仍缺乏完整的装置与方法:需要解决样本怎么获得、类别体系怎么定义、检测结果如何与装配要求核对、误判如何闭环、多型号如何混线切换等一系列具体问题。针对相关技术问题,尚未提出解决方案。
技术实现思路
1、针对相关技术中的问题,本发明提出一种中央电气分配盒装配质量视觉检测装置及其检测方法,以克服现有相关技术所存在的上述技术问题,本发明的目的是克服现有基于颜色阈值与模板比对的中央电气分配盒视觉检测方法语义识别能力缺失、对光照与偏移敏感、模板制作繁琐、误报率高等缺陷,实现对错件、缺件、多件、歪斜等装配缺陷的准确、快速、可追溯、可持续优化的自动检测。
2、为实现上述目的,本发明提供如下技术方案:一种中央电气分配盒装配质量视觉检测装置,包括遮光暗箱,所述遮光暗箱的内部设置有空腔,所述遮光暗箱的左右两侧均开设有开口,所述空腔的内部设置有图像捕捉模块、光源系统、图像数字化模块、数字图像处理模块、智能判断决策模块和机械控制执行模块;
3、所述图像捕捉模块包括工业相机,所述工业相机上安装有镜头,所述工业相机通过刚性支架固定安装在空腔的内部顶端,所述工业相机用于对通过所述遮光暗箱的中央电气分配盒单板进行成像;
4、所述光源系统包括设置于所述空腔内部顶端的led漫反射光源以及用于驱动所述led漫反射光源的恒流驱动电路,所述led漫反射光源的一侧还设置有柔光板,所述光源系统用于为所述工业相机提供稳定的照明条件;
5、所述图像数字化模块包括设置在所述工业相机内部的模数转换单元及数字图像接口,所述图像数字化模块用于将所述工业相机采集的光学图像转换为数字图像;
6、所述数字图像处理模块包括边缘计算单元,所述边缘计算单元包括图像预处理模块和yolo推理引擎,所述边缘计算单元内置有工控机,所述数字图像处理模块用于对所述数字图像进行预处理并通过yolo检测网络输出中央电气分配盒单板上器件目标的类别、置信度和边界框;
7、所述智能判断决策模块包括上位机软件系统,所述上位机软件系统包括装配核对引擎和置信度三级判定模块,所述智能判断决策模块用于将所述yolo推理引擎输出的检测结果与预存的装配布局定义文件进行装配核对,并根据置信度阈值进行判定;
8、所述机械控制执行模块包括传送机构、ng品分流机构与声光告警器,所述声光告警器用于在检测异常时发出声光提示;所述机械控制执行模块的控制端与所述智能判断决策模块的输出端连接,所述机械控制执行模块用于输送中央电气分配盒单板,并对判定为ng的中央电气分配盒单板进行分流并发出告警。
9、优选的,所述传送机构包括皮带式传送线,所述皮带式传送线的两侧均设置有导轨,所述导轨用于约束中央电气分配盒单板的行进姿态。
10、优选的,还包括红外触发器,所述红外触发器包括分别设置在所述空腔内部两侧的发射器和接收器。
11、优选的,还包括扫码枪,所述扫码枪用于读取中央电气分配盒单板一维码以获得单板号,并使检测图像、检测结果与单板号唯一绑定。
12、优选的,所述上位机软件系统还包括登录与权限管理模块、型号配置管理模块、数据记录与查询模块、生产流程控制模块和生产履历导出模块中的至少一种;所述登录与权限管理模块用于将用户操作与配置改动写入日志。
13、优选的,还包括数据库服务器,所述数据库服务器用于存储抓拍图像、检测结果、生产履历、困难样本与模型版本信息,并支持按单板号和批次号进行追溯查询与导出。
14、优选的,还包括显示器,所述显示器用于实时显示抓拍图像、检测框标注与缺陷明细。
15、为实现上述目的,本发明还提供如下技术方案:
16、一种中央电气分配盒装配质量视觉检测方法,包括以下步骤:
17、步骤s1,扫码绑定:扫描中央电气分配盒单板一维码获取单板号,选择或由条码自动识别单板型号,并自动载入该型号对应的yolo检测模型与装配布局定义文件;
18、步骤s2,图像采集:中央电气分配盒单板随皮带式传送线进入遮光暗箱,遮挡红外光路触发工业相机抓拍,获得中央电气分配盒单板俯视图像;
19、步骤s3,图像预处理:对所述中央电气分配盒单板俯视图像进行亮度归一化,必要时按固定网格对图像分幅切片,分别推理后合并结果;
20、步骤s4,yolo推理:将预处理后的图像输入yolo检测网络,一次前向推理输出图像中全部器件目标的类别、置信度与边界框;
21、步骤s5,装配核对:
22、(1)工位匹配:以检测框中心与期望工位坐标的欧氏距离不超过位置容差为条件,将检测结果与期望工位一一配对;
23、(2)类型核对:配对工位上,实际检测类别与期望类别不一致,判定为错件;
24、(3)计数核对:期望工位容差范围内无任何检测结果,判定为缺件;存在无法与任何期望工位配对的检测结果,判定为多件;
25、(4)姿态核对:类别正确但检测框中心相对期望坐标的偏移或框尺寸超出容差时,判定为歪斜、浮高等姿态异常疑似;
26、步骤s6,置信度三级判定:设置高置信度阈值t1和低置信度阈值t2:
27、(1)装配核对无异常且关键判定依据的置信度不低于高置信度阈值t1:自动判定ok,直接放行;
28、(2)装配核对存在异常且相应检测置信度不低于高置信度阈值t1:自动判定ng,在显示器上以彩色边界框标注缺陷工位、缺陷类型与器件类别,声光告警器告警,ng品下线分流;
29、(3)判定依据的置信度低于高置信度阈值t1:转人工复检通道,由人工确认后归档;
30、步骤s7,数据入库:全部抓拍图像、标注结果、缺陷明细与判定结论按单板号写入数据库,支持单台与批次追踪;
31、步骤s8,数据闭环:人工复检纠正的误判样本与低置信度样本自动进入困难样本库,用于模型增量更新。
32、优选的,还包括:
33、步骤s9,模型训练与增量更新:
34、(1)样本采集:汇集产线历史抓拍图像以及人工摆拍的正常与缺陷样本;
35、(2)标注:使用工具对样本进行边界框与类别标注,形成带标签数据集;
36、(3)数据增强:对带标签数据集进行数据增强,所述数据增强包括hsv色彩扰动、亮度/对比度扰动、随机旋转、平移、缩放、高斯模糊、mosaic拼接和随机遮挡中的至少一种;
37、(4)训练:采用迁移学习加载预训练权重进行微调训练,得到yolo检测模型;
38、(5)评估:以map@0.5和各类别查准率、查全率为指标进行评估;
39、(6)部署:将评估达标的模型导出为onnx或tensorrt格式并部署至边缘计算单元;
40、(7)增量更新:困难样本累积到设定数量后,混入原始数据集进行增量微调,评估达标并经灰度验证后替换上线;模型版本与生效时间入库。
41、优选的,还包括:
42、步骤s10,多型号混线检测:切换新型号时,利用已有类别体系标注少量样本微调模型或直接复用现有模型,编写该型号的装配布局定义文件,并在型号配置管理模块中登记;检测装置硬件复用。
43、与现有技术相比,本发明的有益效果是:
44、(1)本发明为一种中央电气分配盒装配质量视觉检测装置及其检测方法,通过yolo检测网络直接输出中央电气分配盒单板上器件目标的类别、置信度和边界框,以器件规格类别作为判定依据,而非依赖颜色阈值比对,能够稳定区分颜色相近但规格不同的保险丝等器件,克服了颜色阈值法固有的混淆缺陷,检测准确率显著提升;
45、(2)本发明为一种中央电气分配盒装配质量视觉检测装置及其检测方法,通过led漫反射光源与恒流驱动电路提供稳定照明,并结合yolo检测网络对目标进行语义级识别,无需定位区域偏移修正步骤;光照波动、抓拍位置偏移稍大或器件轻微歪斜均不会导致识别整体失败,无效告警大幅减少;yolo单帧推理为百毫秒量级,中央电气分配盒单板随皮带式传送线通过遮光暗箱即可完成抓拍与推理,实现传送不停线检测,单板检测周期与现有方案相当或更短;
46、(3)本发明为一种中央电气分配盒装配质量视觉检测装置及其检测方法,通过设置高置信度阈值t1和低置信度阈值t2,装配核对无异常且置信度达标时自动判定ok放行;存在异常且置信度达标时自动判定ng,在显示器上以彩色边界框标注缺陷工位、缺陷类型与器件类别,声光告警并触发ng品下线分流;置信度不足时转人工复检通道,由人工确认后归档,有效降低误判与漏判风险;
47、(4)本发明为一种中央电气分配盒装配质量视觉检测装置及其检测方法,人工复检纠正的误判样本与低置信度样本自动进入困难样本库,累积到设定数量后混入原始数据集进行增量微调,评估达标并经灰度验证后替换上线;模型版本与生效时间入库,实现检测能力的持续优化,克服了模板法经验无法沉淀、能力不随使用提升的缺陷;
48、(5)本发明为一种中央电气分配盒装配质量视觉检测装置及其检测方法,全部抓拍图像、标注结果、缺陷明细与判定结论按单板号写入数据库,支持按单板号和批次号进行追溯查询与导出,实现生产履历的完整留存与质量追溯;切换新型号时,可利用已有类别体系标注少量样本微调模型,或直接复用现有模型,仅需编写该型号的装配布局定义文件并在型号配置管理模块中登记,检测装置硬件复用,适应柔性化混线生产需求;
49、(6)本发明为一种中央电气分配盒装配质量视觉检测装置及其检测方法,通过扫码枪实现单板号绑定与型号自动识别,通过红外触发器实现自动抓拍触发,通过数据库服务器、显示器和上位机软件系统实现数据存储、实时显示与生产流程控制;上位机软件系统还可包括登录与权限管理、型号配置管理、数据记录与查询、生产流程控制和生产履历导出等模块,系统集成度高,便于产线部署与功能扩展。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com