一种工业装配场景下的多点检测方法及系统与流程

摘要: 本技术涉及工业装配,尤其涉及一种工业装配场景下的多点检测方法及系统。背景技术:1、在工业装配领域,大尺寸板材、大型机械板面及大面积零部件的装配质量直接决定产品性...
一种工业装配场景下的多点检测方法及系统与流程

本技术涉及工业装配,尤其涉及一种工业装配场景下的多点检测方法及系统。

背景技术:

1、在工业装配领域,大尺寸板材、大型机械板面及大面积零部件的装配质量直接决定产品性能与可靠性。装配多点检查作为质量保障的核心环节,需对大尺寸工件上的多个关键点位实施全覆盖精准检测,逐一确认螺丝安装、贴合紧密性、标识完整性和板面平整度等指标是否符合预设标准,任何点位疏漏均可能引发产品质量风险。

2、现有方案为sc-20系统以专属主机及cmos传感器为核心,配合指定镜头与外围设备构成固定硬件平台。其内置专用软件,支持匹配、校验、数据输入三种模式:匹配模式通过图形比对形状、颜色等特征定位校验点;校验模式依赖手动或i/o信号触发ok/ng判定;数据输入模式则校验输入字符串与预设内容的一致性。作业前由管理员创建id并登记参数,操作员登录后执行采集、匹配及结果输出,系统同时自动记录作业与图像日志。

3、由于采用固定机位且无运动载体,检测视野固化,无法覆盖大尺寸板材全域,必然产生边缘及偏远点位盲区,导致漏检,并且人工干预量大、流程繁琐,整体自动化程度不足难以满足实际的检测需求。

技术实现思路

1、基于上述现有技术的不足,本技术提供了一种工业装配场景下的多点检测方法及系统,以解决因固定机位与软硬件高度绑定的封闭式架构这一根本缺陷,所引发的整体自动化程度低下难以满足实际的检测需求的问题。

2、为了实现上述目的,本技术提供了以下技术方案:

3、本技术第一方面提供了一种工业装配场景下的多点检测方法,包括:

4、获取标准全域主图像和待检板材的机械臂运动参数;其中,所述标准全域主图像指代符合装配要求的板材全域图像;所述机械臂运动参数至少包括尺寸参数与多个预设检测点位的坐标信息;

5、通过轨迹遍历算法基于所述尺寸参数和各个所述坐标信息,生成机械臂的运动轨迹;其中,所述运动轨迹包含所有预设检测点位;

6、控制所述机械臂按照所述运动轨迹进行运动,并在所述机械臂依次停靠于各个所述预设检测点位时,控制工业相机分别采集各个所述预设检测点位对应的区域图像;

7、将各个所述区域图像分别与所述标准全域主图像中对应的点位区域进行匹配比对,生成各个所述预设检测点位对应的单点判定结果;

8、根据所有所述单点判定结果,确定所述待检板材的整体判定结果。

9、可选地,在上述的工业装配场景下的多点检测方法中,所述获取标准全域主图像和待检板材的机械臂运动参数之后,还包括:

10、对所述标准全域主图像进行预处理,得到处理全域主图像;

11、在预处理后的标准全域主图像中标记各个所述预设检测点位的基准坐标与基准特征,并将所述机械臂的运动坐标与标记后的标准全域主图像中的基准坐标进行全局校准,以使所述机械臂停靠的各个所述预设检测点位与所述处理全域主图像中的各点位区域对应。

12、可选地,在上述的工业装配场景下的多点检测方法中,所述将各个所述区域图像分别与所述标准全域主图像中对应的点位区域进行匹配比对,生成各个所述预设检测点位对应的单点判定结果,包括:

13、获取视觉检测参数;其中,所述视觉检测参数至少包括各个所述预设检测点位对应的匹配阈值;

14、对各个所述区域图像分别进行预处理;

15、从预处理后的各个所述区域图像中提取第一图像特征,以及从所述标准全域主图像中提取各个点位区域的第二图像特征;

16、对处于同一所述预设检测点位的所述第一图像特征与所述第二图像特征进行相似度计算,得到各个所述预设检测点位的匹配得分;

17、分别针对各个所述预设检测点位,根据所述预设检测点位对应的匹配阈值与所述匹配得分的比较结果,生成所述预设检测点位的匹配判定结果;

18、当启用数据输入模式时,获取所述待检板材的标识信息,将所述标识信息与预设的标准标识信息进行比对,得到辅助校验结果;

19、根据所述匹配判定结果和所述辅助校验结果,生成所述预设检测点位的单点判定结果;

20、当未启用数据输入模式时,将各个所述预设检测点位的匹配判定结果作为各个所述预设检测点位对应的单点判定结果。

21、可选地,在上述的工业装配场景下的多点检测方法中,所述根据所有所述单点判定结果,确定所述待检板材的整体判定结果,包括:

22、当所有所述预设检测点位的单点判定结果均为合格时,确定所述待检板材的整体检测结果为合格;

23、当任一所述预设检测点位的单点判定结果为不合格时,确定所述待检板材的整体检测结果为不合格。

24、可选地,在上述的工业装配场景下的多点检测方法中,所述将各个所述区域图像分别与所述标准全域主图像中对应的点位区域进行匹配比对,生成各个所述预设检测点位对应的单点判定结果之后,还包括:

25、当任一所述预设检测点位的单点判定结果处于预设的临界阈值区间时,将处于预设的临界阈值区间的预设检测点位标记为疑似不合格点位;

26、启用校验模式,触发所述机械臂运动至所述疑似不合格点位上,并控制所述工业相机重新采集所述疑似不合格点位对应的区域图像;

27、将所述区域图像与所述标准全域主图像中对应的点位区域进行二次匹配比对,生成复核判定结果;

28、根据所述复核判定结果,更新所述疑似不合格点位的单点判定结果。

29、可选地,在上述的工业装配场景下的多点检测方法中,还包括:

30、当检测完成之后,基于检测过程中产生的数据,生成全维度日志;其中,所述全维度日志至少包括机械臂运动轨迹日志、点位停靠日志、图像采集日志、多点检测结果日志。

31、可选地,在上述的工业装配场景下的多点检测方法中,还包括:

32、实时监测所述机械臂的运动状态和所述工业相机的采集状态;

33、当检测到所述机械臂的运动状态为偏差状态或偏移状态时,对所述机械臂进行坐标校准处理或轨迹修正处理;

34、当检测到所述机械臂的运动状态为断连状态时,触发自动重连机制,以控制所述机械臂复位;

35、当检测到所述工业相机的采集状态为断开状态或采集失败状态时,触发重试机制,以使所述工业相机重新采集预设检测点位。

36、本技术第二方面提供了一种工业装配场景下的多点检测系统,包括:

37、数据获取单元,用于获取标准全域主图像和待检板材的机械臂运动参数;其中,所述标准全域主图像指代符合装配要求的板材全域图像;所述机械臂运动参数至少包括尺寸参数与多个预设检测点位的坐标信息;

38、轨迹生成单元,用于通过轨迹遍历算法基于所述尺寸参数和各个所述坐标信息,生成机械臂的运动轨迹;其中,所述运动轨迹包含所有预设检测点位;

39、控制单元,用于控制所述机械臂按照所述运动轨迹进行运动,并在所述机械臂依次停靠于各个所述预设检测点位时,控制工业相机分别采集各个所述预设检测点位对应的区域图像;

40、图像对比单元,用于将各个所述区域图像分别与所述标准全域主图像中对应的点位区域进行匹配比对,生成各个所述预设检测点位对应的单点判定结果;

41、结果确定单元,用于根据所有所述单点判定结果,确定所述待检板材的整体判定结果。

42、可选地,在上述的工业装配场景下的多点检测系统中,还包括:

43、预处理单元,用于对所述标准全域主图像进行预处理,得到处理全域主图像;

44、校准单元,用于在预处理后的标准全域主图像中标记各个所述预设检测点位的基准坐标与基准特征,并将所述机械臂的运动坐标与标记后的标准全域主图像中的基准坐标进行全局校准,以使所述机械臂停靠的各个所述预设检测点位与所述处理全域主图像中的各点位区域对应。

45、可选地,在上述的工业装配场景下的多点检测系统中,所述图像对比单元,包括:

46、参数获取单元,用于获取视觉检测参数;其中,所述视觉检测参数至少包括各个所述预设检测点位对应的匹配阈值;

47、处理单元,用于对各个所述区域图像分别进行预处理;

48、提取单元,用于从预处理后的各个所述区域图像中提取第一图像特征,以及从所述标准全域主图像中提取各个点位区域的第二图像特征;

49、计算单元,用于对处于同一所述预设检测点位的所述第一图像特征与所述第二图像特征进行相似度计算,得到各个所述预设检测点位的匹配得分;

50、第一生成单元,用于分别针对各个所述预设检测点位,根据所述预设检测点位对应的匹配阈值与所述匹配得分的比较结果,生成所述预设检测点位的匹配判定结果;

51、对比单元,用于当启用数据输入模式时,获取所述待检板材的标识信息,将所述标识信息与预设的标准标识信息进行比对,得到辅助校验结果;

52、第二生成单元,用于根据所述匹配判定结果和所述辅助校验结果,生成所述预设检测点位的单点判定结果;

53、第一确定单元,用于当未启用数据输入模式时,将各个所述预设检测点位的匹配判定结果作为各个所述预设检测点位对应的单点判定结果。

54、可选地,在上述的工业装配场景下的多点检测系统中,所述结果确定单元,包括:

55、第二确定单元,用于当所有所述预设检测点位的单点判定结果均为合格时,确定所述待检板材的整体检测结果为合格;

56、第三确定单元,用于当任一所述预设检测点位的单点判定结果为不合格时,确定所述待检板材的整体检测结果为不合格。

57、可选地,在上述的工业装配场景下的多点检测系统中,还包括:

58、标记单元,用于当任一所述预设检测点位的单点判定结果处于预设的临界阈值区间时,将处于预设的临界阈值区间的预设检测点位标记为疑似不合格点位;

59、启用单元,用于启用校验模式,触发所述机械臂运动至所述疑似不合格点位上,并控制所述工业相机重新采集所述疑似不合格点位对应的区域图像;

60、匹配单元,用于将所述区域图像与所述标准全域主图像中对应的点位区域进行二次匹配比对,生成复核判定结果;

61、更新单元,用于根据所述复核判定结果,更新所述疑似不合格点位的单点判定结果。

62、可选地,在上述的工业装配场景下的多点检测系统中,还包括:

63、日志生成单元,用于当检测完成之后,基于检测过程中产生的数据,生成全维度日志;其中,所述全维度日志至少包括机械臂运动轨迹日志、点位停靠日志、图像采集日志、多点检测结果日志。

64、可选地,在上述的工业装配场景下的多点检测系统中,还包括:

65、监测单元,用于实时监测所述机械臂的运动状态和所述工业相机的采集状态;

66、修正单元,用于当检测到所述机械臂的运动状态为偏差状态或偏移状态时,对所述机械臂进行坐标校准处理或轨迹修正处理;

67、复位单元,用于当检测到所述机械臂的运动状态为断连状态时,触发自动重连机制,以控制所述机械臂复位;

68、采集单元,用于当检测到所述工业相机的采集状态为断开状态或采集失败状态时,触发重试机制,以使所述工业相机重新采集预设检测点位。

69、本技术提供的一种工业装配场景下的多点检测方法,通过获取标准全域主图像和待检板材的机械臂运动参数,其中,标准全域主图像指代符合装配要求的板材全域图像,机械臂运动参数至少包括尺寸参数与多个预设检测点位的坐标信息,其次通过轨迹遍历算法基于尺寸参数和各个坐标信息,生成机械臂的运动轨迹,其中,运动轨迹包含所有预设检测点位,接着控制机械臂按照运动轨迹进行运动,并在机械臂依次停靠于各个预设检测点位时,控制工业相机分别采集各个预设检测点位对应的区域图像,然后将各个区域图像分别与标准全域主图像中对应的点位区域进行匹配比对,生成各个预设检测点位对应的单点判定结果,最后根据所有单点判定结果,确定待检板材的整体判定结果。从而通过获取标准全域主图像及机械臂运动参数,结合轨迹遍历算法生成覆盖全部预设检测点的运动轨迹,并控制机械臂依次停靠采集区域图像,再与标准图像对应点位比对,生成单点及整体判定结果。由此,以运动轨迹扩展检测视野,消除了固定机位盲区,减少人工干预,显著提升了多点检测的自动化程度与全域覆盖能力。