一种无损检测机器人多源异构数据同步接收与时空绑定方法与流程

摘要: 本发明涉及机器人无损检测与工业数据处理,具体涉及一种无损检测机器人多源异构数据同步接收与时空绑定方法。背景技术:1、在电力、石化等工业领域,搭载工业相机、机械臂...
一种无损检测机器人多源异构数据同步接收与时空绑定方法与流程

本发明涉及机器人无损检测与工业数据处理,具体涉及一种无损检测机器人多源异构数据同步接收与时空绑定方法。

背景技术:

1、在电力、石化等工业领域,搭载工业相机、机械臂和定位模块的无损检测机器人逐渐替代人工检测。检测过程中会产生多源异构数据:工业相机输出的焊缝图像视频帧、机械臂控制器输出的末端位姿数据、检测操作界面输出的检测工艺状态、以及独立定位模块输出的位置识别结果。这些数据协议格式不统一、采集频率差异大、时间基准不一致,且独立定位模块因算法推理延迟,其位置识别结果往往晚于焊缝图像到达接收端。

2、现有技术中,多源数据同步通常依赖硬件同步信号,成本高且兼容性差;部分方案采用统一时间戳,但仅以数据到达接收端的时间作为同步依据,未考虑不同数据源的传输延迟差异,易导致位置识别结果与焊缝图像错配。此外,现有技术缺乏将焊缝图像与检测工艺状态(如磁粉检测的磁化、观察,渗透检测的预清洗、渗透剂施加、显像等工序)有效绑定的机制,也缺乏对迟到数据的补充和对数据包完整性的校验标记,导致后续缺陷识别和定位追溯所使用的数据可信度低。

3、综上所述,急需一种无损检测机器人多源异构数据同步接收与时空绑定方法,以解决上述问题。

技术实现思路

1、本发明目的在于提供一种无损检测机器人多源异构数据同步接收与时空绑定方法,旨在解决现有技术中多源异构数据协议不统一、时间同步精度低、位置识别结果易与焊缝图像错配、检测工艺状态难以绑定、数据完整性缺乏保障等问题,具体技术方案如下:

2、一种无损检测机器人多源异构数据同步接收与时空绑定方法,包括:

3、s1、建立多源数据接入通道,分别接收焊缝图像数据、末端位姿数据、检测工艺状态数据和位置识别结果;

4、s2、对各数据源的检测数据进行解析,封装为标准化数据记录;

5、s3、将各标准化数据记录按数据源标识写入对应数据源的缓存队列;

6、s4、以焊缝图像采集时间为时间锚点,对缓存队列中的多源数据执行时间同步;

7、s5、将经s4时间同步后的所述位置识别结果与检测任务初始化信息中的检测对象层级标识构建为结构化位置标签;

8、s6、将经时间同步的所述焊缝图像数据、所述末端位姿数据、所述检测工艺状态数据与所述结构化位置标签进行时空绑定,生成以焊缝图像为单位的结构化检测数据包;

9、s7、对所述结构化检测数据包执行完整性校验,将校验后的结构化检测数据包进行存储,并按照任务标识、所述检测对象层级标识和采集时间建立索引。

10、优选的,对缓存队列中的多源数据执行时间同步,具体是:

11、对于与所述焊缝图像数据来源于同一视频流的位置识别结果,根据帧编号直接关联;

12、对于与所述焊缝图像数据来源于不同视频流的位置识别结果,以当前帧焊缝图像的采集时间为时间锚点,在位置识别结果数据的缓存队列中选取采集时间与所述时间锚点时间差最小的数据记录作为匹配数据;当匹配时间差不超过预设时间窗口时,将该匹配数据对应的位置识别结果与当前帧焊缝图像建立关联,否则标记为位置识别结果缺失;

13、对于所述末端位姿数据,采用最近邻匹配或插值获得所述时间锚点对应的位姿,当匹配时间差超过预设位姿匹配窗口时,标记为末端位姿数据缺失;

14、对于所述检测工艺状态数据,当时间锚点落入某一检测工艺状态的生效时间区间内时,将该检测工艺状态与时间锚点绑定。

15、优选的,所述标准化数据记录至少包含数据源标识、数据类型、采集时间和数据内容;视频类数据的标准化数据记录还包含帧编号。

16、优选的,当各数据源的采集时间不可获得或不可靠时,步骤s4中以统一系统时钟作为时间锚点,基于各数据到达接收端时由统一系统时钟打戳的接收时间执行时间同步,并将预先获得的接收延迟统计参数纳入允许匹配窗口。

17、优选的,所述接收延迟统计参数包括接收延迟均值和接收延迟标准差,根据所述接收延迟均值和接收延迟标准差调整数据源的允许匹配窗口为:

18、

19、其中,表示数据源编号,为数据源的允许匹配窗口,为预设基准窗口,表示第个数据源的接收延迟均值,表示第数据源的接收延迟标准差。

20、优选的,步骤s7中对于在结构化检测数据包生成后迟到的数据,保留预设补充窗口进行数据补充:

21、设结构化检测数据包初始生成时间为,迟到数据实际到达时间为,当满足时,将迟到数据补充至对应结构化检测数据包,并重新计算结构化检测数据包的完整性状态;当超过仍未获得对应数据时,相应字段保留为缺失状态,不再接受补充。

22、优选的,第个焊缝图像对应的结构化检测数据包表示为:

23、

24、其中,表示第个焊缝图像;表示第个焊缝图像的采集时间;表示第个焊缝图像对应的结构化位置标签;表示第个焊缝图像对应的机械臂末端位姿;表示第个焊缝图像对应的检测工艺状态;表示第个焊缝图像对应的多源数据最大匹配时间差;表示数据完整性或有效状态。

25、优选的,对所述结构化检测数据包执行完整性校验,具体是:

26、获取结构化检测数据包的焊缝图像有效性、结构化位置标签有效性、末端位姿数据有效性和检测工艺状态有效性;

27、若满足且且且,则结构化检测数据包为完整状态;

28、若且且(或),则结构化检测数据包为部分完整;

29、若且,则结构化检测数据包为位置待确认;

30、若,则结构化检测数据包为无效;

31、其中,四种状态互斥且按无效、位置待确认、部分完整、完整的优先级顺序进行判断,表示焊缝图像数据有效可解析,表示焊缝图像数据无效;表示结构化位置标签有效关联,表示结构化位置标签缺失;表示末端位姿数据匹配时间差不超过预设位姿匹配窗口,表示末端位姿数据缺失或超差;表示检测工艺状态数据存在且在采集时刻生效,表示检测工艺状态数据缺失。

32、本发明还提供了一种无损检测机器人多源异构数据同步接收与时空绑定系统,该系统采用所述的无损检测机器人多源异构数据同步接收与时空绑定方法,该系统包括:

33、焊缝数据接入模块,用于接收焊缝图像数据;

34、末端位姿数据接入模块,用于接收机械臂末端位姿数据;

35、工艺状态接入模块,用于接收检测工艺状态数据;

36、位置识别结果接入模块,用于接收位置识别结果;

37、统一解析与缓存模块,用于对多源数据进行统一封装并写入对应数据源的缓存队列;

38、时间同步模块,对缓存队列中的多源数据执行时间同步;

39、时空绑定与存储模块,用于构建结构化位置标签并生成结构化检测数据包,对结构化检测数据包执行完整性校验并建立存储索引。

40、本发明还提供了一种存储介质,该存储介质中存储有计算机程序,所述计算机程序被处理器运行时实现所述的无损检测机器人多源异构数据同步接收与时空绑定方法。

41、应用本发明的技术方案,具有以下有益效果:

42、本发明通过对多源异构数据进行统一协议解析和标准化封装,将焊缝图像数据、末端位姿数据、检测工艺状态数据和位置识别结果统一封装为包含数据源标识、数据类型、采集时间和数据内容的标准化数据记录,屏蔽了不同设备的协议和格式差异,使多源数据能够在同一数据框架下接收和管理,提高了系统对不同设备的兼容性。

43、本发明针对不同数据类型的特点采用差异化的时间同步策略:针对同一视频流中的焊缝图像数据和位置识别结果采用帧编号直接关联,对于不同视频流的位置识别结果采用时间窗口最近邻匹配,对于末端位姿数据采用最近邻匹配或插值,对于检测工艺状态数据采用生效状态区间保持,使每种数据类型均采用最适合其特点的同步方式,避免了采用单一同步方式导致的同步精度低问题,整体提高了多源数据时间同步的精度。

44、本发明通过将经时间同步后的位置识别结果与检测任务初始化信息中的检测对象层级标识(电站、机组、叶片、焊缝编号)组合,构建包含轴向距离的五级结构化位置标签,实现了电站、机组、叶片、焊缝编号、轴向距离的完整空间定位,使每一帧焊缝图像都能精确绑定到检测对象的具体空间位置,为后续缺陷定位和历史追溯提供了可靠的空间依据。

45、本发明通过对结构化检测数据包执行完整性校验,基于焊缝图像有效性、结构化位置标签有效性、末端位姿数据有效性和检测工艺状态有效性的布尔有效状态,将数据包标记为完整、部分完整、位置待确认和无效四种互斥状态,明确了数据包的完整性等级,使后续缺陷识别模块能够优先使用完整数据包,对位置待确认和无效数据包进行人工复核或数据补采,提高了检测数据的可信度和可用性。

46、本发明通过在结构化检测数据包生成后保留预设补充窗口,对因通信延迟或算法推理延迟而迟到的位置识别结果和末端位姿数据进行补充,并在补充后重新计算数据包完整性状态,有效避免了因数据迟到导致的字段缺失,提高了长时间视频检测过程中数据接收的完整性和稳定性。

47、本发明通过设置统一系统时钟备选方案,当各数据源的采集时间不可获得或不可靠时,自动切换为基于统一系统时钟打戳的接收时间进行时间同步,并根据接收延迟均值和标准差动态调整允许匹配窗口,使系统在设备时钟异常或采集时间缺失的情况下仍能正常工作,提高了系统的鲁棒性和环境适应性。

48、本发明通过生成以焊缝图像为单位的结构化检测数据包,将焊缝图像、采集时间、结构化位置标签、末端位姿、检测工艺状态和多源数据匹配时间差整合为统一的数据接口,为后续零样本缺陷识别、异常结果空间定位、历史回放和检测报告生成提供了标准化的数据基础,降低了后续处理模块的数据接入复杂度。

49、除了上面所描述的目的、特征和优点之外,本发明还有其它的目的、特征和优点。下面将参照图,对本发明作进一步详细的说明。