基于网格覆盖置信度的多云台摄像机局部补位方法及系统与流程
本发明属于多云台摄像机协同观测与覆盖评估,具体涉及多云台摄像机协同观测、监控盲区动态补位技术,适用于智慧园区、智慧医院、智慧社区等智慧空间安全监控场景下云台摄像机姿态偏移、画面遮挡、硬件故障后的自适应补位调度。
背景技术:
1、在多摄像机协同观测系统中,依靠多台云台摄像机按照预设巡检方案完成全域区域巡查。实际运行过程中,摄像机极易出现云台外力偏转、前景物体遮挡镜头、图像画质劣化、硬件告警等问题,造成原有视域覆盖部分失效,形成监控盲区。该类故障往往并非设备彻底离线,而是以姿态偏移、局部遮挡、画质下降等形式渐进发生,同一摄像机视域内可能同时存在仍然有效的空间区域和已经失效的空间区域。
2、现有技术中,cn120975509b公开了一种基于邻机协作的云台失效巡检补位方案。该方案能够通过数字孪生模型识别云台全失效、部分视角失效及返回图像局部异常,据此确定缺口区域并按风险划分为缺口子区域,再结合覆盖能力匹配度、任务干扰度、能耗成本和响应速度加权选择最优接管云台,将补位任务插入原有巡检序列,并在失效云台恢复后经观察期退出接管;还能够周期扫描更新环境遮挡关系。因此,该方案并不是仅在整机离线后才接管,已经能够处理部分视角失效和图像局部异常。
3、但该现有技术仍存在以下不足。
4、第一,该方案能够在非整机离线时启动邻机补位,但其缺口区域由失效种类判定结果确定:部分视角失效对应的缺口主要由预置位覆盖范围确定,图像局部异常对应的缺口主要由异常图像有效画面边界确定。对于设备仍在线工作、尚未被划入上述失效种类,仅因云台姿态连续偏转而使视域与空间网格的交叠连续变化、同一视域内部分网格监视能力下降、另一部分网格仍然有效的情形,该方案未给出以摄像机整体效能评价值与视锥—网格交叠比例之积表征各网格有效覆盖能力的连续量化方法,难以在尚未完成失效种类判定时即按网格区分有效覆盖与低覆盖并求解补位任务分配。
5、第二,缺口区域主要由失效种类、预置位覆盖范围或异常图像有效画面边界确定,未明确记载随云台实时姿态,将摄像机整体效能评价值与视锥—网格交叠比例相乘,形成摄像机—空间网格覆盖映射矩阵,并用该连续量区分同一摄像机当前视域内仍然有效的网格与已经低于阈值的网格。
6、第三,补位任务采用基于风险—时间映射的序列插入,未将补位目标姿态和观测持续时长作为优化模型输入,也未在补位资源约束下对多处低覆盖网格并发分配作以未覆盖网格数最少为首要目标、以总耗时最小为次要目标的全局求解;资源不足时是否允许部分缺口暂不覆盖,未见同等限定。
7、第四,闭环主要用于确认失效云台是否稳定恢复以及更新环境遮挡关系,并未利用补位巡检回传的清晰度与目标检测完整率,对覆盖映射矩阵中的有效覆盖置信度进行递推修正,对渐进式覆盖衰减的长期自适应能力不足。
8、此外,当前行业内仍有大量方案仅实现摄像机偏移、遮挡检测与告警,通知运维人员人工处置,无法自动重构巡检任务;常规巡检优化算法只针对设备正常工况下的路径优化。现有邻机补位方案虽能在部分视角失效或图像局部异常被判定后启动自动补位,但对于云台姿态连续偏转、尚未达到失效种类判定标准时的渐进式覆盖衰减,仍缺乏按网格连续量化并仅对低覆盖网格局部补位的自动能力,该阶段往往仍需人工介入确认,处理周期长,盲区持续时间久。
9、因此,亟需一种能够在摄像机尚未完全失效时,将设备性能退化映射为不同空间网格的有效覆盖能力变化,仅对低覆盖网格进行局部补位,并依据现场观测更新覆盖置信度从而调整下一周期补位任务分配的方案。
技术实现思路
1、针对现有邻机补位巡检方案仍以失效类型或异常状态的识别结果确定缺口范围、难以表征同一摄像机视域内网格级渐进覆盖衰减、补位任务插入缺乏资源约束下的全局分配、以及闭环不回写覆盖置信度的问题,本发明提供基于网格覆盖置信度的多云台摄像机局部补位方法及系统。其核心技术关系为:摄像机性能退化不是简单判定摄像机故障或整机失效,而是通过设备效能因子与视锥—网格交叠比例之积,将性能退化映射成不同空间网格的有效覆盖能力变化。其中,设备效能因子为该摄像机当前状态的整体评价值,同一摄像机视锥内各网格共用该评价值;各网格有效覆盖置信度的差异主要来源于该摄像机当前视锥与各网格的交叠比例不同。因此,当云台姿态连续偏转时,仍处于视锥中部的网格可保持较高置信度,偏出视锥或仅少量交叠的网格置信度下降,从而在未判定整机失效时仅对低于阈值的网格驱动局部补位。画面遮挡比例、图像质量下降会使该摄像机视锥内各网格的有效覆盖置信度同步折减,再与交叠比例共同决定哪些网格低于阈值;本方法并不将整幅画面中的局部遮挡或局部画质缺陷单独映射为某一网格专属的设备状态。由此实现摄像机偏转为主、整机遮挡和画质劣化为辅的场景下,对监控盲区作网格级覆盖判定与局部补位,并动态调整补位任务分配。本技术所称网格级,是指覆盖结果和补位对象按空间网格确定,而不是指图像倾斜度、画面遮挡比例、图像质量等设备状态指标按网格分别测量。本技术所称未被判定为整机失效,是指该摄像机仍在线回传视频流、仍承担巡检任务且尚未被调度系统整体退出其原监控区域;整机失效至少包括通信中断、设备离线或被判定为不再参与原区域巡检的情形。被判定为整机失效的摄像机不再参与设备效能因子和有效覆盖置信度计算;本技术可以并行识别整机失效,但低覆盖网格仍由有效覆盖置信度与阈值比较得到。本技术与现有技术中部分视角失效或图像局部异常处理的区别,不在于是否非整机离线,而在于低覆盖网格由设备整体评价值与实时交叠比例之积直接确定,而非先完成失效种类判定后再按预置位或画面边界划分离散缺口。因此,本技术不是将现有技术已确定的缺口区域再切分成网格,而是改变了低覆盖对象的生成机制。
2、上述技术关系形成三方面协同,而不是将设备状态评分、空间交叠计算、任务分配和反馈更新彼此孤立使用。其一,设备效能因子与视锥—网格交叠比例相乘,使同一摄像机对视锥内不同网格给出差异化有效覆盖置信度,从而在未完成失效种类判定时即可识别渐进式覆盖衰减,避免将仍有效网格与低覆盖网格一并退出。相乘表示摄像机整体效能对几何交叠的共同折减:交叠为零则有效覆盖为零,效能下降则各网格同比下降,同一摄像机因而对不同网格给出连续差异,而不是整机失效与否的二值状态。其二,先按视域重叠度、云台调整时延、待执行观测任务占用比和区域风险权重计算补位适配度,该评分只决定能否进入候选集合;再只在已进入候选集合的云台摄像机之间求解指派,以未覆盖网格数最少为首要目标、总耗时最小为次要目标,资源不足时允许部分低覆盖网格暂不覆盖,从而在资源约束下实现局部补位而非整机接管。其三,回传图像清晰度与目标检测完整率对覆盖映射矩阵元素作方差倒数加权修正,异常检出率更新区域风险权重并回写下一周期的补位适配度;同一补位摄像机上多个观测时段重叠时,观测执行次序仍按区域风险等级从高到低安排。因适配度变化导致候选筛选与任务分配变化,下一周期再按区域风险等级重新安排执行次序,形成覆盖评估与补位任务分配的闭环联动。该组合针对现有技术在“渐进式覆盖衰减连续量化”和“资源约束下的局部补位”两方面的局限,使低覆盖判定、候选筛选、全局分配与现场观测修正相互衔接。
3、基于网格覆盖置信度的多云台摄像机局部补位方法,包括如下步骤:
4、s1、采集系统运行数据:获取各摄像机输出的图像倾斜度、画面遮挡比例、图像质量指标、云台姿态信息、硬件告警信息以及环境光照照度或图像亮度均值;
5、s2、摄像机—网格有效覆盖能力量化评估:根据图像倾斜度、画面遮挡比例、图像质量指标、云台姿态信息和硬件告警信息计算设备效能因子;根据当前云台姿态与镜头视场角确定视锥,计算视锥与各空间网格的交叠比例;以二者之积作为该摄像机对该网格的有效覆盖置信度,亦即基础有效覆盖置信度,生成覆盖映射矩阵,矩阵元素即为该相乘结果;
6、s3、动态重构空间覆盖关系:对每个网格取其被各摄像机覆盖的、用于本周期比较的覆盖评价值的最大值,低于阈值的网格标记为低覆盖网格;无写回更新值时,所述覆盖评价值即为基础有效覆盖置信度,即设备效能因子与交叠比例之积;
7、s4、第一阶段筛选补位候选摄像机并生成补位参数:针对低覆盖网格,结合视域重叠度、云台调整时延、待执行观测任务占用比、区域风险权重计算补位适配度,该评分只决定能否进入候选集合,不直接指定最终执行补位的云台摄像机;再根据三维空间向量分解、网格投影跨度和云台扫描角速度生成目标姿态与观测持续时长;
8、s5、第二阶段生成补位任务分配:在补位摄像机可用时长约束下,只在已进入候选集合的云台摄像机之间求解指派,该指派即补位任务分配;以未覆盖网格数量最少为首要目标、以补位总耗时最小为次要目标,求解后下发执行;当补位候选摄像机受视域不可达或可用时长不足限制而无法覆盖全部低覆盖网格时,允许部分低覆盖网格暂时保持未覆盖;
9、s6、闭环参数迭代更新:在预设统计周期内,根据补位巡检回传图像的实际清晰度和目标检测完整率计算观测置信度,采用方差倒数加权递推对覆盖映射矩阵元素作闭环修正:基础有效覆盖置信度仍按设备效能因子与交叠比例之积每周期重新计算,修正结果写入与该元素对应的历史修正字段,并据此形成用于步骤s3比较的覆盖评价值;同时更新区域风险权重;更新后的风险权重回写下一周期的补位适配度;同一补位摄像机上多个观测时段重叠时,观测执行次序仍按区域风险等级从高到低安排,任务分配变化后再按该等级重新排定。
10、本发明还提供基于网格覆盖置信度的多云台摄像机局部补位系统,包括:数据采集模块,用于在云台摄像机未被判定为整机失效时获取各摄像机设备状态数据;置信度评估模块,用于根据设备状态数据计算设备效能因子,将该因子与视锥—网格交叠比例相乘,得到各网格有效覆盖置信度并形成覆盖映射矩阵,该因子为摄像机整体评价值且对各网格共用;覆盖重构模块,将最大有效覆盖置信度低于阈值的网格定为低覆盖网格,据该比较确定而非由失效种类缺口确定;补位决策模块,用于仅对低覆盖网格筛选补位候选摄像机,形成候选集合并生成目标云台姿态和观测持续时长;规划优化模块,用于再仅在所述候选集合内,在可用时长约束下以未覆盖网格数最少为首要、补位总耗时最小为次要求解补位任务分配,视域不可达或时长不足时允许部分低覆盖网格暂不覆盖;闭环反馈模块,用于按回传清晰度和检测完整率更新有效覆盖置信度。上述模块与步骤s1至s6对应,用于实施所述方法。
11、步骤s1,采集系统运行数据。
12、调度服务实时获取各摄像机的图像倾斜度、画面遮挡比例、图像清晰度、信噪比、云台俯仰角与水平角信息以及硬件故障码,并采集环境光照照度或图像亮度均值,供步骤s6确定观测方差时评价图像采集环境稳定性。其中,图像倾斜度通过检测图像中垂直线条与图像竖直边缘的夹角计算得到;画面遮挡比例为当前画面中被遮挡像素数占总像素数的比值;图像清晰度基于图像梯度能量或无参考图像质量评价方法计算;信噪比经分贝换算后归一化处理;云台俯仰角与水平角信息由云台编码器读取;硬件故障码由设备自检模块输出,按告警严重程度映射为0至1区间的等级值。
13、步骤s2,对摄像机的设备效能及其对各空间网格的有效覆盖能力进行量化评估。
14、对步骤s1采集的五项设备效能指标做最大最小归一化处理,分别定义图像倾斜度归一化值、画面遮挡比例归一化值、图像质量综合评分归一化值、云台姿态偏差量归一化值和硬件告警等级归一化值,各项取值均处于0到1区间。图像倾斜度以图像倾斜角度计。该五项设备效能指标仅用于计算设备效能因子,不同于步骤s4中用于计算补位适配度的四项补位适配指标。图像倾斜度归一化值为实际倾斜角度除以预设的倾斜角度上限;本实施例各指标最小值取0,故该除法与最大最小归一化等价。该上限按画面可接受歪斜程度设定,而不是云台机械行程的最大可调倾斜角度;画面遮挡比例归一化值为遮挡像素数除以总像素数;图像质量综合评分归一化值由清晰度评分和信噪比评分加权平均后再经最大最小归一化得到,与图像质量包括图像清晰度和信噪比一致;作为可选实施方式,还可计入色彩还原度评分;云台姿态偏差量归一化值为当前姿态与预设基准姿态的角位移除以最大可调角位移;硬件告警等级归一化值按告警严重程度划分为0.2、0.5、0.8和1.0四个告警等级。
15、设备效能因子由上述五项设备效能指标加权融合得到:以1减去图像倾斜度归一化值后乘以第一权重,以1减去画面遮挡比例归一化值后乘以第二权重,以图像质量综合评分归一化值乘以第三权重,以1减去云台姿态偏差量归一化值后乘以第四权重,以1减去硬件告警等级归一化值后乘以第五权重,五项相加得到设备效能因子。其中图像倾斜度、画面遮挡比例、云台姿态偏差和硬件告警为负向指标,归一化值越大则效能越差,故以1减去后再乘以对应权重;图像质量为正向指标,归一化值直接乘以对应权重。第一权重至第五权重之和为1,且第一权重大于第三权重、第二权重大于第四权重。各权重采用熵权法根据各摄像机的实时采集数据动态计算。当参与计算的摄像机数量低于预设数量下限时,信息熵不稳定,不采用熵权法,改用满足第一权重大于第三权重、第二权重大于第四权重且分量之和为1的预设权重;本实施例该下限取3。仅当数量不低于该下限时按下列步骤计算信息熵。设参与计算的摄像机数量为m,第i个摄像机第j项指标归一化值为xij。先按下式将该项各摄像机取值换算为占比:
16、再按下式计算第j项指标的信息熵:
17、信息效用值dj = 1 − ej(亦称差异系数);初始权重为dj占各项信息效用值之和的比例。
18、若初始权重不满足第一权重大于第三权重或第二权重大于第四权重,则将权重向量投影到满足该序约束且分量之和为1的可行域:对不满足序关系的一对权重,在保持二者之和不变的前提下增大应较大的分量、减小应较小的分量,直至满足严格的大于关系(第一权重大于第三权重、第二权重大于第四权重);若两分量将相等,则继续微调并保留预设的最小正间隔,不得以相等结束;再将五个分量按比例缩放使之和为1,缩放后仍保持上述严格大于关系。投影后的权重再代入上述加权计算。设备效能因子越接近1代表摄像机自身监控效能越完好。
19、将监控空间划分为预设空间网格。第i个摄像机的当前视锥由当前水平角、俯仰角、镜头视场角及预设最大可视距离确定,其中预设最大可视距离对应视锥远裁剪面。记该视锥与第j个网格的交叠比例,取值0到1。交叠比例按视锥与该网格的空间交叠确定:按交叠体积占该网格体积的比例,或按视锥在水平面上的投影与该网格水平投影的交叠面积占该网格水平投影面积的比例;同一场景只选用其中一种,不混用。真实监控空间均为三维,后一种为按地面分区调度时的投影算法。构建摄像机数量行、网格数量列的覆盖映射矩阵,矩阵中对应元素为该摄像机的设备效能因子与该交叠比例的乘积,作为该摄像机对该网格的基础有效覆盖置信度;未特别说明时,有效覆盖置信度即指该乘积。相乘表示整体效能对几何交叠的共同折减:交叠为零则有效覆盖为零,效能下降则各网格同比下降。例如设备效能因子为0.8时,交叠比例0.9的网格有效覆盖置信度为0.72,交叠比例0.4的网格为0.32,同一摄像机对不同网格形成连续差异,而不是整机失效与否的二值状态。设备效能因子由该摄像机五项设备效能指标加权得到,对应该摄像机当前整体状态,不随网格分别取值。因此,同一摄像机对各网格有效覆盖置信度的不同,主要来自各网格交叠比例的不同,而不是来自各网格各自的遮挡或画质评分。云台姿态偏转时,交叠比例随视锥连续变化,可以形成“部分网格仍高于阈值、部分网格已低于阈值”的网格级差异;画面整体遮挡占比升高或整幅画质下降时,设备效能因子下降,该摄像机视锥内各网格的有效覆盖置信度同步降低,再按交叠比例决定哪些网格跌破阈值。由此,同一摄像机可以对不同网格产生不同的有效覆盖置信度:仍处于视锥中部且交叠比例较高的网格可保持较高置信度,偏出视锥或仅少量交叠的网格置信度下降。与将性能下降的摄像机整台退出、由邻机接管其全部原监控区域的传统整机接管方式不同,本方法只把综合有效覆盖置信度低于阈值的网格标记为低覆盖网格并对其补位,避免因摄像机局部性能下降而导致该摄像机承担的有效监控区域被整体判定为失效。文中低覆盖网格指综合有效覆盖置信度低于阈值的空间网格;相邻低覆盖网格构成的连续空间可称为低覆盖区域。视域重叠度按候选摄像机当前视锥与低覆盖网格的空间交叠确定:按交叠体积占该网格体积的比例,或按水平投影交叠面积占该网格水平投影面积的比例,与前述交叠比例同一场景只选用其中一种。全文区分两类指标:五项设备效能指标为图像倾斜度、画面遮挡比例、图像质量、云台姿态偏差和硬件告警等级,仅用于计算设备效能因子;四项补位适配指标为视域重叠度、云台调整时延、待执行观测任务占用比和区域风险权重,仅用于步骤s4筛选补位候选摄像机。全文设备效能只使用设备效能因子这一名称,目标检测指标统一使用目标检测完整率。
20、步骤s3,动态重构摄像机与空间网格之间的覆盖关系。
21、针对每个网格,取其被各摄像机覆盖的、用于本周期比较的覆盖评价值的最大值,作为该网格的综合有效覆盖置信度。无写回更新值时,覆盖评价值即为基础有效覆盖置信度,亦即设备效能因子与交叠比例之积。预先设定阈值,取值范围为0.5至0.7,巡检区域重要程度越高阈值越大。设定逻辑是:阈值越高,越早把交叠下降或效能折减的网格纳入补位,漏检风险越低,但补位占用也越多。一般巡检区域可取0.50,人员或设备较密集的重点区域可取0.60,核心巡检区域可取0.70。当综合有效覆盖置信度低于阈值时,将该网格标记为低覆盖网格,另设与覆盖映射矩阵对应的标记字段,将达到最大值的元素记为主覆盖或待补位,不覆盖该元素的有效覆盖置信度数值,表示该网格当前最佳覆盖仍不足,需要进入后续补位,而不表示将该摄像机整机判定为失效。若同一网格被多个摄像机覆盖且各有效覆盖置信度均未达到阈值,则只按有效覆盖置信度从高到低保留一个主覆盖标记,其余为辅助候选,供后续补位决策使用;相关摄像机不因此被整机退出。
22、步骤s4,第一阶段:针对每个低覆盖网格筛选补位候选摄像机并生成补位巡检参数。
23、针对每个低覆盖网格,从其周边预设范围内的其他摄像机中计算补位适配度,用于形成候选集合;该评分只决定能否进入候选集合,不直接指定最终执行补位的云台摄像机。若按适配度直接指定执行摄像机,可能导致高适配度摄像机被连续分配多个低覆盖网格而超出可用时长;故第一阶段只输出候选集合,第二阶段再在候选集合内全局分配。对于每一个候选摄像机,分别计算视域重叠度、云台调整时延、待执行观测任务占用比和区域风险权重四项补位适配指标。该四项补位适配指标仅用于第一阶段筛选,不同于步骤s2中用于计算设备效能因子的五项设备效能指标。
24、视域重叠度根据候选摄像机当前视锥与低覆盖网格的空间交叠确定:按交叠体积占该低覆盖网格体积的比例,或按水平投影交叠面积占该网格水平投影面积的比例,与步骤s2选用方式一致,同一场景只选用其中一种。云台调整时延由候选摄像机云台当前姿态角与目标姿态角之间的角位移除以云台最大角速度得到预估时间,经最大最小归一化后取反,映射至0到1区间。待执行观测任务占用比为候选摄像机当前观测任务队列中的待执行任务数量与预设最大并发任务数之比,经归一化后取反再参与加权。区域风险权重由该网格预设的区域风险等级初始化,并按步骤s6依据实际异常检出率更新;区域风险等级本身不随周期改写。
25、上述四项补位适配指标经加权求和得到综合补位适配度评分,按下式计算:
26、其中o为视域重叠度,t为云台调整时延归一化取反值,l为待执行观测任务占用比归一化取反值,r为该网格的区域风险权重,λ1至λ4为对应权重,且λ1 + λ2 + λ3 + λ4 =1。视域重叠度权重λ1和区域风险项权重λ4分别大于云台调整时延权重λ2和待执行观测任务占用比权重λ3。
27、区域风险权重r由该网格预设的区域风险等级初始化,并按步骤s6依据实际异常检出率动态更新;区域风险等级本身不随周期改写。将补位适配度不低于预设筛选阈值、或按评分从高到低保留的前若干台摄像机,作为该低覆盖网格的补位候选摄像机进入第二阶段任务分配。区域风险权重越高,该网格在补位适配度中的风险项越大,越容易被优先纳入候选。观测执行次序按区域风险等级从高到低安排,不按区域风险权重排序;权重更新不改写区域风险等级。
28、对进入候选集合的摄像机,计算补位云台目标姿态、观测持续时长和观测执行次序。目标俯仰角和目标水平角由低覆盖网格的几何中心坐标与补位候选摄像机的空间位置坐标之间的三维空间向量分解得到。观测持续时长按该网格相对补位候选摄像机的视角张角与云台扫描角速度之比得到:视角张角由该网格在垂直于视线方向上的投影跨度以及摄像机至网格几何中心的距离确定,再结合云台最小稳定转动步长和必要驻留时间,向上取整至预设时间粒度单位。观测执行次序根据区域风险等级确定;当同一补位摄像机上多个观测时段重叠时,按区域风险等级从高到低安排执行次序,并作为步骤s5中规划模型的顺序约束。观测执行次序与区域风险等级对应,等级高者先执行。区域风险权重只进入补位适配度,不改写区域风险等级,因而重叠时段的排序规则不变。
29、步骤s5,第二阶段:将补位候选摄像机、补位巡检参数和可用时长约束输入补位优化模型,在候选摄像机之间分配补位任务,生成补位任务分配。
30、该补位优化模型基于混合整数规划构建。第二阶段只在已进入候选集合的云台摄像机之间求解指派,该指派即补位任务分配。决策变量为各候选云台摄像机对每一低覆盖网格是否承担补位观测的二元变量;承担补位观测即承担对该网格的补位任务。另设未被覆盖指示变量:当某低覆盖网格没有任何候选摄像机承担补位观测时该指示变量取1,否则取0。当补位候选摄像机因视域几何不可达,或其预设最大可用时长不足以承担全部低覆盖网格的补位任务时,允许部分低覆盖网格暂时保持未覆盖,此时未被覆盖指示变量取1。所述视域几何不可达,是指候选摄像机当前或可达视锥与该低覆盖网格的交叠比例为零,或补位所需目标姿态超出该云台行程范围。因此,最小化未覆盖网格数量作为首要目标具有实际意义:补位资源充足时该目标的最优值为零,等价于每处低覆盖网格至少分配一台补位摄像机;补位资源不足时该目标用于保证尽可能多的低覆盖网格得到补位。
31、首要目标为最小化各未被覆盖指示变量之和。在该目标取得最优值的前提下,次要目标为最小化各已指派补位观测的执行耗时之和,其中单项耗时为该摄像机转动至目标姿态的预估时延与区域观测持续时长之和。
32、约束条件包括:每一候选摄像机已指派补位观测的耗时合计不超过其预设最大可用时长;仅允许在第一阶段进入候选集合的云台摄像机中进行指派。补位云台目标姿态和观测持续时长作为模型输入参数,用于计算任务执行耗时。模型求解后输出补位任务分配,经校验后下发各云台执行。
33、步骤s6,在预设时间窗口内执行补位巡检后,对覆盖映射矩阵元素对应的有效覆盖置信度和区域风险权重进行闭环迭代更新:基础有效覆盖置信度仍按设备效能因子与交叠比例之积每周期重新计算,按清晰度和目标检测完整率递推得到的修正结果写入与该元素对应的历史修正字段,并据此形成用于步骤s3比较的覆盖评价值。
34、该更新分为两个方面。
35、第一方面是对摄像机—网格有效覆盖置信度的动态更新。该更新采用方差倒数加权递推,是实现覆盖置信度随现场观测变化的一种技术手段,而不是本发明区别于现有技术的核心。以前一周期该元素的基础有效覆盖置信度或写回更新值作为先验均值。以当前周期补位巡检回传图像的实际清晰度和目标检测完整率加权得到观测置信度均值。目标检测完整率指补位巡检回传图像中,目标检测算法成功检出且检测框完整的目标数量占该网格内应检测目标总数量的比例。先验方差取最近5至10个周期该元素置信度的样本方差;当可用于计算先验方差的周期数不足预设下限时,先验方差取预设初值。观测方差根据图像采集环境稳定性确定:统计窗口内光照照度相对均值的波动小于正负10%时取较小值0.010,大于等于正负30%时取较大值0.040,介于二者之间时按波动幅度线性插值。将先验均值按先验方差的倒数加权,将观测均值按观测方差的倒数加权,再按两权之和作归一化后加权平均。记先验均值为c(k),观测均值为co,先验方差为σ1²,观测方差为σ2²,按下式得到写回更新值:
36、当连续多个周期更新后的置信度变化量低于预设阈值时,停止对该元素的更新,亦即停止对该元素的方差倒数加权修正。写回更新值存入与该矩阵元素对应的历史修正字段,不改变有效覆盖置信度等于设备效能因子与交叠比例之积这一定义。下一周期执行步骤s2时,仍重新计算基础有效覆盖置信度;再以写回更新值为先验均值、以本周期基础有效覆盖置信度为观测均值,按与步骤s6相同的方差倒数归一化加权规则融合,得到用于步骤s3比较的覆盖评价值。该融合是对乘积定义的递推修正,不是另给一套有效覆盖置信度定义。记写回更新值为先验均值、当前基础有效覆盖置信度为观测均值,先验方差和观测方差取值规则与步骤s6相同,覆盖评价值按下式计算:
37、其中上标f表示本周期用于步骤s3比较的覆盖评价值,上标w表示上一周期写回更新值,下标b表示本周期重新计算的基础有效覆盖置信度(设备效能因子与交叠比例之积)。该式与步骤s6写回更新公式同构。若该元素连续多个周期变化量低于预设阈值而停止更新,则下一周期直接以最近写回更新值作为覆盖评价值参与步骤s3。
38、第二方面是对区域风险权重的自适应调整。统计当前周期内各低覆盖网格在补位巡检过程中被检出异常事件的次数nd以及该网格累计补位巡检总次数np,按ρ = nd / np得到实际异常检出率ρ。当累计补位巡检总次数为0时,不计算实际异常检出率,并保持当前区域风险权重不变。前述异常事件至少包括图像中检出未经授权的运动目标、画面突变触发告警、目标区域设备通信中断后恢复时画面缺失等类型。记当前区域风险权重为r,基准检出率为ρ0,更新步长为η。步长与该区域当前周期更新前的区域风险权重负相关,按η = η0 × (1 − r)计算后再限制到0.05至0.2,其中在本实施例中η0取0.5,r为当前周期更新前的区域风险权重;r越大则η越小。将步长限制在0.05至0.2,是为了避免步长过小导致风险权重对检出率变化不敏感,或步长过大导致单周期波动过度改变下一周期筛选结果:当r接近0时η接近0.5,再被上限截断为0.2;当r接近1时η接近0,再被下限截断为0.05。更新后的区域风险权重按r′ = r + η × (ρ − ρ0)计算,再限制在预设上限rmax与下限rmin之间,rmin取0、rmax取1。当ρ高于ρ0时r′增大,低于时r′减小。基准检出率ρ0根据该区域的历史平均检出率动态确定,或根据监控场景安全等级预设确定;该安全等级仅用于预设基准检出率,不同于区域风险等级,也不同于阈值分档所用的巡检区域重要程度。更新后的区域风险权重回写至下一周期步骤s4和步骤s5:风险权重升高时,该网格在四项补位适配指标中的风险项增大,更容易进入补位候选集合,使下一周期补位摄像机选择和补位任务分配发生变化;风险权重降低时则相反。观测执行次序仍按区域风险等级从高到低安排;因任务分配变化,下一周期重叠时段的集合可能变化,再按区域风险等级重新排定,不是按风险权重排序。由此形成异常检出率改变风险权重、风险权重改变下一周期补位规划的闭环。区域风险权重与区域风险等级不是同一量:区域风险等级是部署时预设的安全分级,区域风险权重是在该分级初值上按检出率动态更新的权重值。
39、更新完成后进入下一轮补位周期。当摄像机遮挡消除、云台姿态复位后,相应网格的交叠比例与设备效能因子回升,有效覆盖置信度回升至阈值以上,系统逐步取消临时补位任务并恢复基础巡检方案。
40、与现有技术相比,本发明具备如下有益效果:
41、第一,在摄像机仍在线、尚未被判定为失效的前提下,以设备效能因子与当前视锥—网格交叠比例之积连续表征各网格有效覆盖置信度。设备效能因子反映该摄像机当前整体状态,网格之间的置信度差异主要来自交叠比例。由此可以区分因姿态偏转而仍处于视锥中部的网格与已经偏出或仅少量交叠的网格,只对低于阈值的网格补位,适应云台轻微偏转导致的渐进式覆盖衰减;整机遮挡占比或整幅画质下降时,则表现为该摄像机视锥内各网格置信度同步折减后再按交叠比例分化;
42、第二,低覆盖判定以网格为对象进行,只对低于阈值的网格补位,避免因云台姿态偏转或该摄像机整体效能下降而将其承担的仍有效监控区域一并判定为失效,减少不必要的整机接管和补位占用;
43、第三,先按视域重叠度、云台调整时延、待执行观测任务占用比和区域风险权重作第一阶段评分并形成候选集合,该评分不直接指定最终执行补位的云台摄像机;再只在已进入候选集合的云台摄像机之间求解指派,在可用时长约束下按未覆盖网格数量最少、总耗时最小分配;补位资源不足时允许部分低覆盖网格暂不覆盖,使最小化未覆盖数量具有实际优化意义;
44、第四,利用补位巡检回传的清晰度与目标检测完整率对覆盖映射矩阵元素作方差倒数加权修正,并按异常检出率更新区域风险权重;更新结果回写下一周期的低覆盖判定和进入候选集合的结果;观测执行次序按区域风险等级安排,任务分配变化后再按该等级重新排定,形成覆盖评估与补位任务分配之间的闭环;
45、第五,相对将性能下降摄像机整机退出、邻机接管其原覆盖范围内全部网格的方式,本方法仅对低覆盖网格补位,减少不必要的补位占用并缩短监控盲区。具体对照数据见实施例;
46、第六,故障消除、姿态复位后,相应网格交叠比例与设备效能因子回升,有效覆盖置信度超过阈值后自动取消临时补位,恢复基础巡检方案。
47、为避免术语混淆,本技术所用关键术语界定如下。区域风险等级:根据人员密度、设备价值、历史告警频次预先设定的安全重要性分级,取值范围为0到1,同一网格在系统部署时确定,不随巡检周期自动改写。区域风险权重:在区域风险等级初值基础上,按步骤s6依据实际异常检出率动态更新的权重值,记为r,回写下一周期用于补位适配度中的风险项。观测执行次序按区域风险等级从高到低安排,权重更新不改写该等级。区域风险等级是预设分级,用于观测执行次序及作为区域风险权重的初值;区域风险权重是闭环更新量,只进入补位适配度,不直接作为观测执行次序的排序依据。监控场景安全等级仅用于预设基准检出率,与区域风险等级不是同一套分级。阈值0.50、0.60、0.70按一般、重点、核心巡检区域选取,不与区域风险等级混用。二者初值可以相同,但含义和更新机制不同。设备效能因子:由五项设备效能指标加权得到的摄像机整体评价值,同一摄像机视锥内各网格共用,不随网格分别取值。有效覆盖置信度:设备效能因子与视锥—网格交叠比例之积,亦即基础有效覆盖置信度,是同一摄像机对不同网格给出差异化覆盖评估的直接量。写回更新值:按回传清晰度和目标检测完整率对基础有效覆盖置信度作方差倒数递推后的历史修正结果。覆盖评价值:由写回更新值与本周期基础有效覆盖置信度按方差倒数融合得到、用于步骤s3与阈值比较的量;无写回更新值时覆盖评价值即为基础有效覆盖置信度。三者不得混为两个乘积定义。目标检测完整率:补位巡检回传图像中,目标检测算法成功检出且检测框完整的目标数量占该网格内应检测目标总数量的比例。视域不可达:候选摄像机当前或可达视锥与该低覆盖网格的交叠比例为零,或补位所需目标姿态超出该云台行程范围。待执行观测任务占用比:补位候选摄像机当前待执行观测任务数量与预设最大并发任务数之比,参与第一阶段评分,不单独作为最终分配依据。观测执行次序:同一补位摄像机上多个观测时段重叠时,按区域风险等级从高到低安排的执行顺序。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com