一种多相机协同采集与视觉状态监控方法与流程

摘要: 本发明属于工业视觉监控,具体涉及一种多相机协同采集与视觉状态监控方法及系统。背景技术:1、在工业视觉检测产线中,单条产线通常部署多台工业相机从不同角度或工位对产...
一种多相机协同采集与视觉状态监控方法与流程

本发明属于工业视觉监控,具体涉及一种多相机协同采集与视觉状态监控方法及系统。

背景技术:

1、在工业视觉检测产线中,单条产线通常部署多台工业相机从不同角度或工位对产品进行图像采集和缺陷检测。多相机协同采集与集中状态监控是实现产线自动化巡检和异常快速响应的关键技术前提。

2、现有技术中,常见的多相机图像采集方案存在以下三类典型缺陷。

3、第一种方案采用单路串行采集模式,各相机按顺序依次触发快门、传输图像数据。操作人员需要在多个独立窗口中切换查看各相机画面,缺少集中视图。当产线上某台相机出现卡顿或丢帧时,该异常状态难以被及时发现,导致缺陷漏检风险上升。该方案的底层缺陷在于缺少多相机统一调度与同步机制。

4、第二种方案将多路相机画面通过画面拼接方式合成为单一马赛克视图进行显示。虽然操作人员可以在一个窗口中看到全部相机画面,但拼接过程丢弃了每路相机固有的状态元信息,包括各相机的实时帧率、采集分辨率、单帧缺陷检出数量和连续运行时长等关键运维指标。画面拼接后的马赛克视图仅传达了图像内容,无法反映各相机的运行健康状态。

5、第三种方案虽然在各层分别实现了采集功能、图像传输功能和前端监控显示功能,但采集层、传输层和监控层之间彼此独立运行,未形成状态联动的闭环机制。具体表现为:采集层的相机异常状态无法实时驱动监控层的告警,监控层的手动刷新滞后于实际状态变化数秒甚至数十秒,各层之间的信息传递存在断裂。

技术实现思路

1、本发明的目的是提供一种多相机协同采集与视觉状态监控方法及系统,以解决现有技术中多相机采集同步精度不足且采集层、传输层与监控层彼此独立割裂、多相机状态无法实时集中呈现以及异常事件响应滞后的问题。

2、为实现上述目的,本发明提供的技术方案包括以下内容。

3、在采集层构建异步并发调度协程,通过异步聚合机制调度多台工业相机在同一触发轮次内并行执行图像捕获操作,并计算各相机快照完成时刻之间的同步误差;将每台工业相机的状态元信息嵌入对应的图像帧数据,状态元信息至少包括帧率、运行时长、单帧缺陷计数和采集分辨率。上述异步聚合机制使得各相机的快门触发和图像读取在逻辑上处于同一轮次,避免串行采集引入的顺序延迟。同步误差的计算使得系统对多相机间的采集时间偏差具有量化感知能力,为后续同步精度监控提供数据基础。状态元信息嵌入图像帧的设计使得传输层无需额外维护独立的元数据通道,降低了系统复杂度。

4、在传输层建立全双工通信连接,以持续推送模式将采集层生成的嵌入状态元信息的图像帧实时传输至监控层。全双工连接配合推送模式使得每一帧在采集完成后即被发送至监控端,不存在轮询等待延迟。图像帧与状态元信息在同一数据包中传输,避免了元信息与图像内容之间的时序错位。

5、在监控层解析所接收图像帧中的状态元信息,将每路相机的帧率、运行时长、单帧缺陷计数和采集分辨率分别映射至监控面板上对应维度的状态指示区域予以显示,并根据预设告警分级规则在至少一个维度的指标超出预设阈值范围时触发对应级别的告警标识。多维度状态指示区域的集中显示使得操作人员在同一面板中即可全面掌握各相机的运行状态,告警分级规则使得不同程度的异常对应不同的视觉标识,避免告警信息全部为同一级别导致操作人员无法区分严重程度。

6、本发明提供的有益效果在于:

7、第一,采集层通过异步聚合机制实现多相机同一触发轮次内的并行捕获,消除了串行采集的累积延迟。同步误差的量化计算使得系统对多相机间的时间偏差具有可测性,当同步误差超出允许范围时可及时发现采集层的时序异常。这一效果对应于权利要求1中采集层异步聚合与同步误差计算的步骤。

8、第二,传输层以全双工连接持续推送模式替代轮询模式,缩短了从采集完成到监控呈现之间的传输延迟。状态元信息嵌入图像帧数据的设计使得状态信息与图像内容在传输过程中时序一致,避免了额外元数据通道带来的同步复杂度。这一效果对应于权利要求1中传输层全双工推送与状态元信息嵌入图像帧的步骤。

9、第三,监控层将帧率、运行时长、单帧缺陷计数和采集分辨率四个维度的状态信息映射至同一监控面板的对应指示区域,实现了多维度状态融合显示。与现有方案将多画面拼接为马赛克视图不同,本发明的监控面板保留了每路相机的元信息维度,操作人员可在单一界面中同时获知图像内容与相机健康状态,无需在图像和状态面板之间切换。告警分级规则使得不同严重程度的异常以不同视觉标识区分,减少了人工判断的认知负担。这一效果对应于权利要求1中监控层多维度状态映射与告警分级的步骤。

10、第四,采集层→传输层→监控层三个层次之间形成信息闭环:采集层产生的状态元信息经传输层实时传递至监控层,监控层的告警状态可反映出采集层和传输层的异常,从而形成从感知到显示到响应的全链路联动。该三层闭环的整体效果不依赖于任何单一层次的改进,而是三层协同的结果。

1.一种多相机协同采集与视觉状态监控方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述异步聚合机制在同一触发轮次内调用所述n台工业相机各自对应的异步图像捕获协程,并在所有协程返回后获取各协程对应的完成时刻;所述同步误差为所述各完成时刻中的最大值与最小值之差。

3.根据权利要求1所述的方法,其特征在于,所述状态元信息以编码形式嵌入至所述图像帧数据中的辅助数据段,所述图像帧数据的帧格式包括图像载荷段和所述辅助数据段,所述图像载荷段承载工业相机采集的原始图像内容,所述辅助数据段承载所述状态元信息。

4.根据权利要求1所述的方法,其特征在于,所述预设告警分级规则包括:当第一维度的指标超出第一阈值范围时触发提醒级告警,当第二维度的指标超出第二阈值范围时触发警告级告警,当第三维度的指标超出第三阈值范围时触发严重级告警;所述提醒级告警、警告级告警和严重级告警分别对应不同的视觉标识。

5.根据权利要求1所述的方法,其特征在于,所述状态指示区域包括:帧率指示区、运行时长指示区、缺陷计数指示区和分辨率指示区;所述帧率指示区以颜色编码方式反映当前帧率相对于预设目标帧率的偏离程度,所述运行时长指示区记录对应相机的连续运行时长,所述缺陷计数指示区显示最近一帧中检测到的缺陷对象数量,所述分辨率指示区显示对应相机当前采集分辨率。

6.根据权利要求5所述的方法,其特征在于,所述监控面板还包括同步误差指示区域,用于显示当前轮次的所述同步误差数值;当所述同步误差超出同步误差阈值时,在所述同步误差指示区域触发超差告警标识。

7.一种多相机协同采集与视觉状态监控系统,其特征在于,包括:

8.根据权利要求7所述的系统,其特征在于,所述采集模块具体用于:在同一触发轮次内调用所述n台工业相机各自对应的异步图像捕获协程,并在所有协程返回后获取各协程对应的完成时刻;所述同步误差为所述各完成时刻中的最大值与最小值之差。

9.一种终端设备,其特征在于,包括权利要求7或8所述的多相机协同采集与视觉状态监控系统。

10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法。