一种基于具身机器人的工件打磨方法、装置、设备及介质与流程

摘要: 本发明涉及具身机器人,尤其涉及一种基于具身机器人的工件打磨方法、装置、设备及介质。背景技术:1、在工业领域,大量金属及非金属零部件的表面需经过打磨、抛光处理,以...
一种基于具身机器人的工件打磨方法、装置、设备及介质与流程

本发明涉及具身机器人,尤其涉及一种基于具身机器人的工件打磨方法、装置、设备及介质。

背景技术:

1、在工业领域,大量金属及非金属零部件的表面需经过打磨、抛光处理,以满足装配精度、外观质量及耐腐蚀性要求,对工件进行打磨是提升产品表面质量一致性、支撑智能制造与柔性生产的关键技术手段。

2、目前,传统的工件打磨方式普遍采用人工操作的模式,以现场打磨作业为例,技术工人需依靠凭借视觉观察与触觉反馈完成缺陷识别,并使用气动或电动打磨工具完成缺陷去除。然而,传统的工件打磨方式对操作人员的技能水平依赖性强,工艺流程割裂且繁琐,人工成本较高,结果的可重复性与一致性较差,从而导致工件打磨的客观性、效率与鲁棒性较低,无法满足工业现场对工件快速换产、大批量工件一致性保障以及提升设备综合效率的任务需求。

技术实现思路

1、本发明提供了一种基于具身机器人的工件打磨方法、装置、设备及介质,以实现对工件的快速高质量打磨,极大降低对操作人员的技能水平依赖性,降低人工成本,提高打磨结果的可重复性与一致性,从而提高工件打磨的客观性、效率与鲁棒性。

2、根据本发明的一方面,提供了一种基于具身机器人的工件打磨方法,该方法包括:

3、基于具身机器人待执行的目标检测任务信息,确定所述具身机器人对应的目标任务区域和目标相机类型,并对所述目标任务区域进行三维扫描,确定所述目标任务对象对应的不可打磨掩码图和所述目标相机类型对应的目标相机位姿参数;

4、基于预设规划路径、所述不可打磨掩码图、所述目标相机类型和所述目标相机位姿参数,对目标任务对象进行图像采集,获取所述目标任务对象对应的目标任务图像,并将所述目标任务图像输入至缺陷检测大模型,生成所述目标任务对象对应的缺陷检测结果;

5、基于所述缺陷检测结果,确定所述目标任务对象对应的缺陷位置信息和缺陷类型信息,并将所述缺陷位置信息和所述缺陷类型信息输入至打磨工艺大模型,确定至少一组目标个性化打磨工艺参数;

6、基于所述目标个性化打磨工艺参数,控制所述具身机器人进行双臂协同打磨操作,获取目标打磨结果,并基于所述目标任务对象对应的前道工艺参数、所述缺陷检测结果、所述目标个性化打磨工艺参数和所述目标打磨结果,生成目标工艺事件,以基于所述目标工艺事件对所述前道工艺参数进行调整。

7、根据本发明的另一方面,提供了一种基于具身机器人的工件打磨装置,该装置包括:

8、位姿参数确定模块,用于基于具身机器人待执行的目标检测任务信息,确定所述具身机器人对应的目标任务区域和目标相机类型,并对所述目标任务区域进行三维扫描,确定所述目标任务对象对应的不可打磨掩码图和所述目标相机类型对应的目标相机位姿参数;

9、缺陷检测模块,用于基于预设规划路径、所述不可打磨掩码图、所述目标相机类型和所述目标相机位姿参数,对目标任务对象进行图像采集,获取所述目标任务对象对应的目标任务图像,并将所述目标任务图像输入至缺陷检测大模型,生成所述目标任务对象对应的缺陷检测结果;

10、打磨参数确定模块,用于基于所述缺陷检测结果,确定所述目标任务对象对应的缺陷位置信息和缺陷类型信息,并将所述缺陷位置信息和所述缺陷类型信息输入至打磨工艺大模型,确定至少一组目标个性化打磨工艺参数;

11、打磨结果确定模块,用于基于所述目标个性化打磨工艺参数,控制所述具身机器人进行双臂协同打磨操作,获取目标打磨结果,并基于所述目标任务对象对应的前道工艺参数、所述缺陷检测结果、所述目标个性化打磨工艺参数和所述目标打磨结果,生成目标工艺事件,以基于所述目标工艺事件对所述前道工艺参数进行调整。

12、根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:

13、至少一个处理器;以及

14、与所述至少一个处理器通信连接的存储器;其中,

15、所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的基于具身机器人的工件打磨方法。

16、根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的基于具身机器人的工件打磨方法。

17、本发明实施例的技术方案,通过基于具身机器人待执行的目标检测任务信息,确定所述具身机器人对应的目标任务区域和目标相机类型,并对所述目标任务区域进行三维扫描,确定所述目标任务对象对应的不可打磨掩码图和所述目标相机类型对应的目标相机位姿参数,从而为后续的工件打磨提供可靠的数据支撑,有助于提高工件打磨的可靠性。基于预设规划路径、所述不可打磨掩码图、所述目标相机类型和所述目标相机位姿参数,对目标任务对象进行图像采集,获取所述目标任务对象对应的目标任务图像,并将所述目标任务图像输入至缺陷检测大模型,生成所述目标任务对象对应的缺陷检测结果,提高缺陷检测的精度和效率。基于所述缺陷检测结果,确定所述目标任务对象对应的缺陷位置信息和缺陷类型信息,并将所述缺陷位置信息和所述缺陷类型信息输入至打磨工艺大模型,确定至少一组目标个性化打磨工艺参数,可以为后续的工件打磨提供可靠的数据基础,保证打磨精度。基于所述目标个性化打磨工艺参数,控制所述具身机器人进行双臂协同打磨操作,获取目标打磨结果,并基于所述目标任务对象对应的前道工艺参数、所述缺陷检测结果、所述目标个性化打磨工艺参数和所述目标打磨结果,生成目标工艺事件,以基于所述目标工艺事件对所述前道工艺参数进行调整,提高工件打磨的客观性和打磨质量。本发明通过具身机器人将工件的缺陷检测、自适应打磨和工艺预防进行融合,实现对工件缺陷的闭环检测、修复和预防,提升工件生产制造质量及柔性,极大降低对操作人员的技能水平依赖性,降低人工成本,提高打磨结果的可重复性与一致性,从而提高工件打磨的客观性、效率与鲁棒性。

18、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种基于具身机器人的工件打磨方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述对所述目标任务区域进行三维扫描,确定所述目标任务对象对应的不可打磨掩码图和所述目标相机类型对应的目标相机位姿参数,包括:

3.根据权利要求1所述的方法,其特征在于,所述基于所述缺陷检测结果,确定所述目标任务对象对应的缺陷位置信息和缺陷类型信息,并将所述缺陷位置信息和所述缺陷类型信息输入至打磨工艺大模型,确定至少一组目标个性化打磨工艺参数,包括:

4.根据权利要求3所述的方法,其特征在于,所述将所述目标任务对象对应的所述缺陷位置信息和所述缺陷类型信息输入至打磨工艺大模型,确定至少一组目标个性化打磨工艺参数,包括:

5.根据权利要求1所述的方法,其特征在于,所述基于所述目标个性化打磨工艺参数,控制所述具身机器人进行打磨操作,获取目标打磨结果,包括:

6.根据权利要求5所述的方法,其特征在于,所述基于所述目标个性化打磨工艺参数,控制所述具身机器人的右臂根据规划路径执行打磨操作,所述具身机器人的左臂提供辅助操作,以为右臂提供目标作业条件,获取目标打磨结果,包括:

7.根据权利要求1所述的方法,其特征在于,所述基于所述目标工艺事件对所述前道工艺参数进行调整,包括:

8.一种基于具身机器人的工件打磨装置,其特征在于,包括:

9.一种电子设备,其特征在于,所述电子设备包括:

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的基于具身机器人的工件打磨方法。