多模态传感数据融合的大模型机械加工质量检测系统的制作方法

摘要: 本申请涉及机械加工质量检测,尤其是涉及多模态传感数据融合的大模型机械加工质量检测系统。背景技术:1、如航空航天、精密模具、医疗器械等领域高端精密机械加工中,需要...
多模态传感数据融合的大模型机械加工质量检测系统的制作方法

本申请涉及机械加工质量检测,尤其是涉及多模态传感数据融合的大模型机械加工质量检测系统。

背景技术:

1、如航空航天、精密模具、医疗器械等领域高端精密机械加工中,需要对生产零件进行检测,传统质量检测多依赖人工目检、单一视觉检测或离线抽检,存在以下缺陷:

2、单一传感器信息不全,易出现漏检、误检,无法覆盖表面缺陷、尺寸精度、加工振动、刀具状态等多维度指标;

3、现有技术缺乏一套能够同步采集视觉、三维形貌、振动、切削力、温度等多模态信息,并利用大模型进行深度融合推理的一体化智能检测系统,难以实现高精度、高鲁棒性、全流程的加工质量检测。

技术实现思路

1、本申请的目的是提供多模态传感数据融合的大模型机械加工质量检测系统,以解决“上述”的技术问题。

2、本申请提供的多模态传感数据融合的大模型机械加工质量检测系统采用如下的技术方案:多模态传感数据融合的大模型机械加工质量检测系统,包括多模态传感采集单元、边缘预处理单元、多模态数据融合单元、大模型推理单元及质量判定与控制单元;

3、所述多模态传感采集单元包括工业视觉相机、激光轮廓传感器、三轴振动传感器、切削力传感器和温度传感器;

4、所述边缘预处理单元用于对多模态数据进行降噪、时间戳对齐、空间配准、roi截取、特征提取与数据标准化;

5、所述多模态数据融合单元用于执行特征级融合与决策级融合;

6、所述大模型推理单元用于对融合特征进行深度推理,实现缺陷识别、尺寸精度评估、刀具状态监测与加工质量综合判定。

7、可选的,所述边缘预处理单元包括降噪模块、时序对齐模块、空间配准模块、特征提取模块和数据封装模块。

8、可选的,所述时序对齐模块以机床主轴编码器信号为统一时钟基准,实现多传感器数据同步。

9、可选的,所述多模态数据融合单元包括特征级融合模块与决策级融合模块。

10、可选的,所述大模型推理单元采用工业视觉–信号联合预训练大模型。

11、可选的,所述质量判定与控制单元可输出检测报告、异常报警并支持机床加工参数闭环补偿。

12、一种多模态传感数据融合的大模型机械加工质量检测方法,其特征在于,包括以下步骤:

13、s1.同步采集图像、三维形貌、振动、切削力、温度多模态传感数据;

14、s2.对数据进行降噪、时间戳对齐、空间配准、roi截取与特征提取;

15、s3.对多模态特征进行特征级与决策级融合;

16、s4.将融合特征输入大模型进行推理;

17、s5.输出质量判定结果、缺陷信息并执行闭环控制。

18、综上所述,本申请包括以下至少一种有益技术效果:

19、从单一检测到多模态协同感知:克服了传统视觉检测或振动监测的局限性,通过数据互补提升复杂缺陷和综合质量评估的准确性与可靠性。

20、2.同时覆盖外观、尺寸、振动、刀具、热变形等信息,多模态协同以消除检测盲区;

21、3.从传统算法到大模型驱动:利用大模型的强大表征与推理能力,能够处理复杂、非线性的多模态数据关系,实现更智能的缺陷诊断与根因分析。;

22、边缘预处理与云端大模型协同,满足工业在线实时性要求;

23、4.时序对齐与空间配准,数据一致性强、检测精度高;

24、5.从离线抽检到在线实时闭环控制:系统不仅“发现问题”,还能通过参数补偿“解决问题”,将质量控制从结果检验前置到过程优化,实现智能制造。

25、6.可实现闭环控制,支持加工参数自动补偿,提升一次合格率。

1.多模态传感数据融合的大模型机械加工质量检测系统,包括原始零件数据采集单元,多模态传感采集单元、边缘预处理单元、多模态数据融合单元、大模型推理单元及质量判定与控制单元;

2.根据权利要求1所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,原始零件数据采集单元包括三维数据采集模块及三维模型切片模块,所述原始零件数据采集单元,用于对原始零件进行扫描建模及切片处理,获取零件原始轮廓数据。

3.根据权利要求2所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,所述激光轮廓传感器包括环周激光采集模块与顶端激光采集模块,所述环周激光采集模块与顶端激光采集模块为多个阵列激光发射器与激光接收器,所述激光发射器发射出的激光相互交叉,形成网格阵列激光,通过激光发射器与激光接收器获取零件表面的点云数据,通过采集多个面的点云数据形成零件整体结构,对点云数据处理形成零件的三维结构,通过零件的三维结构判断零件的形态结构。

4.根据权利要求3所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,对零件的三维结构进行切片处理,获取单层零件的轮廓数据与原始零件原始轮廓数据进行对比,判断零件是否合格。

5.根据权利要求1所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,所述边缘预处理单元包括降噪模块、时序对齐模块、空间配准模块、特征提取模块和数据封装模块。

6.根据权利要求1所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,所述时序对齐模块以机床主轴编码器信号为统一时钟基准,实现多传感器数据同步。

7.根据权利要求3所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,所述多模态数据融合单元包括特征级融合模块与决策级融合模块。

8.根据权利要求3所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,所述大模型推理单元采用工业视觉–信号联合预训练大模型。

9.根据权利要求3所述的多模态传感数据融合的大模型机械加工质量检测系统,其特征在于,所述质量判定与控制单元可输出检测报告、异常报警并支持机床加工参数闭环补偿。

10.一种多模态传感数据融合的大模型机械加工质量检测方法,其特征在于,包括以下步骤: