一种卷烟生产现场协同巡检方法、装置、设备及介质与流程

本发明涉及卷烟生产现场巡检技术，尤其涉及一种卷烟生产现场协同巡检方法、装置、设备及介质。

背景技术：

1、在卷烟生产现场，固定视频监控系统因具备连续采集、稳定覆盖、便于集中管理等优点，被广泛用于重点区域和关键点位的巡检。然而，由于固定摄像头的安装位置和拍摄角度一经确定便无法动态调整，在实际作业环境中，其拍摄画面容易受到设备遮挡、烟包堆放、人员走动、光照变化等因素的干扰，导致目标巡检点位虽然位于摄像头的理论覆盖范围之内，但在实际视频画面中该点位的图像区域可能出现不可见、严重遮挡、画面模糊、光照异常、目标不完整或拍摄角度倾斜过大等问题。在此情况下，巡检人员或自动化系统若仅依赖该固定视角视频画面进行判断，极易产生误判或漏判，这是固定监控方案固有的视角局限性所导致的可靠性缺陷。

2、为克服上述缺陷，现有技术中出现了固定监控与移动巡检设备联动的方案，当移动巡检设备检测到环境参数超出正常范围时，系统调取对应子区域的固定监控画面进行复核。此类方案虽然引入了移动视角作为补充，但其联动触发机制依赖于异常事件的被动检测，无法在常规巡检任务中主动识别固定视角画面存在的遮挡、模糊、角度不足等非异常但影响判断的画面质量问题。换言之，即使固定视角画面因遮挡或模糊而完全无法用于判断，只要没有检测到环境异常，系统便不会调用移动视角进行补盲，导致巡检任务在该点位上存在判断依据缺失的风险。

3、此外，现有联动方案在获取固定视角和移动视角两路画面后，仅将其分别展示或简单切换，缺少对两个视角各自判断结果的一致性比对机制。当两路画面的判断结论存在冲突时，系统无法自动识别该冲突，也无法生成具有不同可信度等级的巡检结论，而只能依赖人工进行二次判断，降低了自动化巡检系统的决策效率和可靠性。同时，由于缺乏统一的事件标识关联机制，固定视频记录、移动视频记录、拍照图片、广播指令、现场确认信息等多源数据分散存储，难以形成完整的、可追溯的巡检证据链。

技术实现思路

1、本发明提供一种卷烟生产现场协同巡检方法、装置、设备及介质，以提高卷烟生产现场巡检的覆盖可信度、远程协同效率和过程追溯可靠性。

2、第一方面，本发明提供了一种卷烟生产现场协同巡检方法，包括：

3、建立并存储巡检视频协同映射表，所述映射表将巡检点位、固定视频采集装置覆盖区域、智能安全帽终端定位信息、佩戴人员权限信息进行关联；

4、获取巡检任务，确定目标巡检点位；

5、根据所述巡检任务调用覆盖或关联所述目标巡检点位的固定视频采集装置，获取固定视角视频画面；

6、对所述固定视角视频画面进行图像识别，得到固定视角判断结果；

7、对所述固定视角视频画面中与目标巡检点位对应的图像区域进行点位级覆盖可信度评估，得到固定视角覆盖可信度；

8、当所述固定视角覆盖可信度不满足预设可信条件时，从多个智能安全帽终端中确定目标智能安全帽终端；

9、向目标智能安全帽终端发送巡检协同指令，所述巡检协同指令包括开启视频流上传移动视角视频画面、执行远程拍照、提示佩戴人员移动至指定巡检点位或提示佩戴人员调整拍摄角度中的一种或多种；

10、接收目标智能安全帽终端回传的移动视角视频画面或远程拍照图片；

11、对接收到的移动视角视频画面或远程拍照图片进行图像识别，得到移动视角判断结果；

12、对所述固定视角判断结果与所述移动视角判断结果进行一致性判定，并根据判定结果生成确认型巡检结果、复核型巡检结果或补盲型巡检结果；

13、为所述巡检任务生成唯一巡检事件标识，并基于所述唯一巡检事件标识将巡检过程中产生的多源数据关联存储，形成巡检过程追溯链路。

14、可选的，对所述固定视角视频画面中与目标巡检点位对应的图像区域进行点位级覆盖可信度评估，得到固定视角覆盖可信度，包括：

15、计算可见性评分v、遮挡比例o、清晰度评分s、光照状态评分l、目标完整性评分t和拍摄角度充分性评分a；

16、通过公式计算固定视角覆盖可信度c，其中至为权重且权重和为1；

17、其中，所述可见性评分v为目标巡检点位投影至图像平面的目标矩形区域与图像边界的交集面积与该目标矩形区域面积之比；

18、所述遮挡比例o为目标矩形区域内被非目标物体覆盖的像素数与该区域总像素数之比；

19、所述清晰度评分s基于拉普拉斯方差归一化得到：，其中为目标区域拉普拉斯滤波后的方差，为预标定的最佳清晰度参考值；

20、所述光照状态评分l基于目标区域灰度图的均值μ和标准差σ计算：，其中，，且当 μ<40 或 μ>220 时 l=0；

21、所述目标完整性评分t为目标巡检对象在图像中实际可见关键点数量与标准模板关键点数量之比；

22、所述拍摄角度充分性评分a基于摄像头光轴与目标巡检点位法向量的夹角θ计算分段函数：当 θ ≤ θgood 时，a=1，当 θ ≥ θbad 时，a=0，当 θgood < θ < θbad 时，其中 θgood =30°，θbad =75°。

23、可选的，从多个智能安全帽终端中确定目标智能安全帽终端包括：

24、获取多个智能安全帽终端的定位信息、在线状态、电量状态、佩戴人员权限、距离信息、通信质量和当前任务状态；

25、计算各智能安全帽终端的协同巡检评分，所述协同巡检评分由距离评分、在线状态评分、电量评分、权限评分、通信质量评分和空闲状态评分加权求和得到；

26、选择协同巡检评分最高且不低于预设最低阈值的智能安全帽终端作为目标智能安全帽终端。

27、可选的，所述协同巡检评分中各子评分的量化方式如下：

28、距离评分：，其中 d 为智能安全帽终端定位与目标巡检点位的空间距离，为预设最大有效距离；

29、在线状态评分：终端在线且心跳正常时为1，离线或心跳超时时为0；

30、电量评分：；

31、权限评分：佩戴人员具有目标巡检点位进入权限或作业权限时为1，否则为0且该终端被剔除候选集合；

32、通信质量评分：基于rssi归一化，；

33、空闲状态评分：终端当前未执行其他巡检任务且无未处理sos时为1，正在执行其他任务但允许抢占时为0.5，正在执行高优先级任务或sos处置中时为0。

34、可选的，对所述固定视角判断结果与所述移动视角判断结果进行一致性判定，并根据判定结果生成确认型巡检结果、复核型巡检结果或补盲型巡检结果，包括：

35、当固定视角判断结果与移动视角判断结果相同时，生成确认型巡检结果；

36、当固定视角判断结果与移动视角判断结果不同时，生成复核型巡检结果，并将固定视角视频片段、移动视角视频片段、远程拍照图片、固定视角覆盖可信度、移动视角识别结果和人工复核入口同步推送至中控端；

37、当固定视角覆盖可信度低于预设可信阈值导致固定视角判断结果缺失时，采用移动视角判断结果生成补盲型巡检结果。

38、可选的，卷烟生产现场协同巡检方法还包括：

39、当接收到智能安全帽终端上传的sos告警信息时，根据告警信息确定告警人员、告警时间和告警位置；

40、根据告警位置查询巡检视频协同映射表，确定覆盖告警位置或与告警位置相邻的固定视频采集装置，同时接管该智能安全帽终端的移动视角视频画面；

41、将固定视角视频画面和移动视角视频画面同步推送至中控端；

42、为sos告警生成sos事件标识，并基于所述sos事件标识将sos告警信息、告警人员信息、告警位置、固定视角视频记录、移动视角视频记录、远程广播记录、现场处置记录和告警关闭记录进行关联存储。

43、可选的，卷烟生产现场协同巡检方法还包括：

44、当巡检任务对应的固定视频采集装置不可用、视频流中断、画面质量低于预设质量阈值或固定视角覆盖可信度低于预设可信阈值时，自动切换至目标智能安全帽终端的视频流；

45、当目标智能安全帽终端不可用、离线、通信质量低于预设通信阈值或电量低于预设电量阈值时，自动切换至候补智能安全帽终端或候补固定视频采集装置，所述候补智能安全帽终端根据协同巡检评分的排序结果确定。

46、第二方面，本发明还提供了一种卷烟生产现场协同巡检装置，包括：

47、映射关系管理模块，建立并存储巡检视频协同映射表，所述映射表将巡检点位、固定视频采集装置覆盖区域、智能安全帽终端定位信息、佩戴人员权限信息进行关联；

48、巡检任务获取模块，用于获取巡检任务，确定目标巡检点位；

49、固定视频调用模块，用于根据所述巡检任务调用覆盖或关联所述目标巡检点位的固定视频采集装置，获取固定视角视频画面；

50、固定视角识别模块，用于对所述固定视角视频画面进行图像识别，得到固定视角判断结果；

51、覆盖可信度评估模块，用于对所述固定视角视频画面中与目标巡检点位对应的图像区域进行点位级覆盖可信度评估，得到固定视角覆盖可信度；

52、智能安全帽调度模块，用于当所述固定视角覆盖可信度不满足预设可信条件时，从多个智能安全帽终端中确定目标智能安全帽终端；

53、协同指令发送模块，用于向目标智能安全帽终端发送巡检协同指令，所述巡检协同指令包括开启视频流上传移动视角视频画面、执行远程拍照、提示佩戴人员移动至指定巡检点位或提示佩戴人员调整拍摄角度中的一种或多种；

54、移动视频接收模块，用于接收目标智能安全帽终端回传的移动视角视频画面或远程拍照图片；

55、移动视角识别模块，用于对接收到的移动视角视频画面或远程拍照图片进行图像识别，得到移动视角判断结果；

56、双视角判定模块，用于对所述固定视角判断结果与所述移动视角判断结果进行一致性判定，并根据判定结果生成确认型巡检结果、复核型巡检结果或补盲型巡检结果；

57、记录追溯模块，用于为所述巡检任务生成唯一巡检事件标识，并基于所述唯一巡检事件标识将巡检过程中产生的多源数据关联存储，形成巡检过程追溯链路。

58、第三方面，本发明还提供了一种电子设备，包括：

59、一个或多个处理器；

60、存储装置，用于存储一个或多个程序；

61、当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明第一方面提供的卷烟生产现场协同巡检方法。

62、第四方面，本发明还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如发明第一方面提供的卷烟生产现场协同巡检方法。

63、本发明通过对固定视角视频画面进行点位级覆盖可信度评估，能够区分“理论覆盖”与“可信覆盖”，避免因画面质量问题导致误判或漏判。在固定视角不可信时，从多个智能安全帽终端中确定目标智能安全帽终端并发起协同指令，自动调度智能安全帽补盲，通过对固定视角判断结果和移动视角判断结果进行一致性判定，生成不同类型的巡检结果，通过生成唯一巡检事件标识，将巡检过程中的多源数据关联存储，支持事后审计、责任追踪和问题分析。

64、应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。