基于刚性变换的焊缝推理方法、装置和电子设备与流程

摘要: 本发明涉及焊接,具体而言,涉及一种基于刚性变换的焊缝推理方法、装置和电子设备。背景技术:1、现有智能焊接系统通常采用3d相机、机械臂和工控机组成的协同架构。系统...
基于刚性变换的焊缝推理方法、装置和电子设备与流程

本发明涉及焊接,具体而言,涉及一种基于刚性变换的焊缝推理方法、装置和电子设备。

背景技术:

1、现有智能焊接系统通常采用3d相机、机械臂和工控机组成的协同架构。系统通过3d相机采集焊缝点云数据,精准定位待焊接点,并规划机械臂的焊接轨迹以执行焊接作业。具体来说,分为两步:第一步,构建工件模型。系统会先对样本工件进行连续拍照,实现工件的无模型建模,获取工件上所有可能的焊缝并构建焊缝数据库。第二步,实际焊接。面对实际焊接的工件,系统利用采集工件模型时的拍摄位姿采集包含待焊接焊缝的点云,根据焊缝数据库从点云中识别出待焊接焊缝的准确位置。

2、但是,目前针对3d相机视野受限导致的不可见焊缝定位难题,传统系统因无法直接采集点云数据而受限。此外,由于相机和机器人存在一定的不稳定性,系统在识别焊缝时可能会出现识别失败的情况。当前系统无法处理识别失败的焊缝,需要加入人工干预。

技术实现思路

1、本发明实施例的目的在于提供一种基于刚性变换的焊缝推理方法、装置和电子设备,用以成功推理出不可见或识别失败的焊缝。

2、第一方面,本发明提供一种基于刚性变换的焊缝推理方法,所述方法包括:

3、获得目标工件的焊缝数据库以及实际的检测焊缝,所述焊缝数据库中包括所述目标工件的标准焊缝;

4、在所述焊缝数据库中查找与所述检测焊缝对应的标准焊缝,将查找到的标准焊缝构成直线集一,并将所述检测焊缝构成直线集二;

5、基于所述直线集一和直线集二,构建直线对;

6、根据所述直线对计算所述直线集一和直线集二之间的刚性变换矩阵;

7、利用所述刚性变换矩阵对所述焊缝数据库中的待推理焊缝进行转换,得到所述待推理焊缝的焊缝推理结果。

8、在可选的实施方式中,所述根据所述直线对计算所述直线集一和直线集二之间的刚性变换矩阵的步骤,包括:

9、排列组合所有直线对,以获取所有包含直线对的数量小于或等于最大设定数量的直线组合;

10、遍历各所述直线组合,基于所述直线组合计算对应的刚性变换矩阵以及匹配差异分数;

11、确定所有直线组合中具有最小匹配差异分数的直线组合,并获得具有最小匹配差异分数的直线组合的刚性变换矩阵,作为所述直线集一和直线集二之间的刚性变换矩阵。

12、在可选的实施方式中,所述遍历各所述直线组合,基于所述直线组合计算对应的刚性变换矩阵以及匹配差异分数的步骤,包括:

13、遍历各所述直线组合,检测遍历到的直线组合中的焊缝是否满足设定分布要求;

14、针对满足所述设定分布要求的直线组合,计算对应的刚性变换矩阵以及匹配差异分数。

15、在可选的实施方式中,所述检测遍历到的直线组合中的直线焊缝是否满足设定分布要求的步骤,包括:

16、针对遍历到的直线组合,排列组合所述直线组合中属于所述直线集一的端点,筛选出所有端点的点数为设定数量的点位组合;

17、遍历所述点位组合,将遍历到的点位组合中的各个端点分别投影至其他端点构成的直线上,并获得投影距离;

18、在所述点位组合中所有投影距离均大于设定距离阈值时,确定所述点位组合中的直线焊缝满足设定分布要求。

19、在可选的实施方式中,所述刚性变换矩阵包括旋转矩阵和平移矩阵;

20、所述基于所述直线组合计算对应的刚性变换矩阵以及匹配差异分数的步骤,包括:

21、基于所述直线组合中的直线对计算得到旋转矩阵;

22、利用所述旋转矩阵对所述直线集一中的焊缝进行旋转变换,并基于旋转变换后的直线集一和直线集二中的对应焊缝求解得到平移矩阵;

23、基于所述旋转矩阵和平移矩阵得到刚性变换矩阵;

24、利用所述刚性变换矩阵对所述直线集一中的焊缝进行变换后,获得所有直线对的角度差、端点投影距离和端点间距,综合所述角度差、端点投影距离和端点间距得到匹配误差分数。

25、在可选的实施方式中,所述利用所述旋转矩阵对所述直线集一中的焊缝进行旋转变换,并基于旋转变换后的直线集一和直线集二中的对应焊缝求解得到平移矩阵的步骤,包括:

26、检测所述直线组合中属于直线集一或直线集二的焊缝是否为平行关系;

27、若不为平行关系,则利用所述旋转矩阵对所述直线集一中的焊缝进行旋转变换,基于旋转变换后的直线集一和直线集二中的直线对求解得到第一最优平移矩阵,所述第一最优平移矩阵下所述直线集一中焊缝端点至其在直线集二中对应焊缝上投影点的距离达到最小化;

28、若为平行关系,则利用所述旋转矩阵对所述直线集一中的焊缝进行旋转变换,基于旋转变换后的直线集一和直线集二中的直线对求解得到第二最优平移矩阵,所述第二最优平移矩阵下所述直线集一中焊缝端点与直线集二中对应焊缝端点之间的距离达到最小化。

29、在可选的实施方式中,所述基于所述旋转矩阵和平移矩阵得到刚性变换矩阵的步骤,包括:

30、基于所述旋转矩阵和平移矩阵得到初步的刚性变换矩阵;

31、检测所述直线组合中属于直线集一或直线集二的焊缝是否为平行关系;

32、基于检测结果确定更新策略,按照所述更新策略对初步的刚性变换矩阵进行更新。

33、在可选的实施方式中,所述基于检测结果确定更新策略,按照所述更新策略对初步的刚性变换矩阵进行更新的步骤,包括:

34、在所述直线组合中属于直线集一或直线集二的焊缝不为平行关系的情况下,利用所述直线组合中所有夹角角度小于预设夹角的直线对对初步的刚性变换矩阵进行更新;

35、在所述直线组合中属于直线集一或直线集二的焊缝为平行关系的情况下,利用所述直线组合中所有点间距小于预设间距的直线对对初步的刚性变换矩阵进行更新。

36、第二方面,本发明提供一种基于刚性变换的焊缝推理装置,所述装置包括:

37、获取模块,用于获得目标工件的焊缝数据库以及实际的检测焊缝,所述焊缝数据库中包括所述目标工件的标准焊缝;

38、查找模块,用于在所述焊缝数据库中查找与所述检测焊缝对应的标准焊缝,将查找到的标准焊缝构成直线集一,并将所述检测焊缝构成直线集二;

39、构建模块,用于基于所述直线集一和直线集二,构建直线对;

40、计算模块,用于根据所述直线对计算所述直线集一和直线集二之间的刚性变换矩阵;

41、推理模块,用于利用所述刚性变换矩阵对所述焊缝数据库中的待推理焊缝进行转换,得到所述待推理焊缝的焊缝推理结果。

42、第三方面,本发明提供一种电子设备,包括处理器和存储器,所述存储器存储有能够被所述处理器执行的计算机可执行指令,所述处理器执行所述计算机可执行指令以实现前述实施方式任意一项所述的方法。

43、本发明提供一种基于刚性变换的焊缝推理方法、装置和电子设备,通过获取目标工件的包含标准焊缝的焊缝数据库以及实际的检测焊缝,在焊缝数据库中查找与检测焊缝对应的标准焊缝,将查找到的标准焊缝构成直线集一,并将检测焊缝构成直线集二。基于直线集一和直线集二构建直线对。根据直线对计算直线集一和直线集二之间的刚性变换矩阵。利用刚性变换矩阵对焊缝数据库中的待推理焊缝进行转换,得到待推理焊缝的焊缝推理结果。本方案中,利用实际检测出的检测焊缝和焊缝数据库信息得到刚性变换矩阵,以将数据库焊缝信息映射至实际工件坐标系中,从而成功推理出不可见或识别失败的焊缝。