小型空中目标异步检测跟踪协同方法、系统及存储介质
本技术涉及机器视觉目标检测跟踪,特别涉及一种小型空中目标异步检测跟踪协同方法、系统及存储介质。
背景技术:
1、现有低空安防与移动平台视觉监测场景中,小型空中目标的检测跟踪多采用全图逐帧检测、单帧目标跟踪或检测跟踪简单串联的处理方式。全图逐帧检测方式运算量大,对边缘设备算力要求高,难以维持视频流高帧率实时处理,且图像缩放处理会压缩小型目标像素特征,极易造成小目标漏检。单一目标跟踪方式运算速度快,但抗干扰能力弱,在目标快速移动、贴近视野边界、短时遮挡或背景复杂场景下,易出现跟踪漂移、目标跟丢的问题。检测跟踪简单串联的处理模式,多直接采用历史检测结果初始化跟踪器,在边缘设备异步推理工作模式下,检测结果对应帧时刻与当前跟踪帧时刻存在固有时间差,会造成跟踪搜索区域偏移,大幅降低检测转跟踪的匹配稳定性。同时,传统处理模式无标准化的检跟切换判定逻辑,目标出视野后易留存无效历史跟踪数据与错误跟踪状态,导致后续目标重新捕获精度低、系统运行稳定性差,无法适配小型空中目标长时间、高精度、高实时性的监测需求。
技术实现思路
1、本技术的目的是提供一种小型空中目标异步检测跟踪协同方法、系统及存储介质,旨在解决现有技术中边缘设备下检测与跟踪异步协同性差、整体监测稳定性低的技术问题。
2、为实现上述目的,本技术提供一种小型空中目标异步检测跟踪协同方法,包括:
3、构建跟踪主线程与异步检测线程协同的双线程处理架构,配置有限状态机,并行执行视频跟踪处理与异步检测任务;
4、基于所述异步检测线程进行目标检测,并对检出的候选目标进行局部核验;
5、对于通过局部核验的候选目标,所述跟踪主线程进行异步时序补偿,采用跟踪模板与搜索区域位置解耦方式,完成检测结果向跟踪模块的时序对齐与参数交接;
6、依据检测跟踪交接权限约束规则,采用经局部核验有效的检测结果触发跟踪主线程内的跟踪器初始化;
7、依托所述有限状态机配合所述跟踪主线程,对目标跟踪状态与目标视野状态进行监测,判定目标出视野时,清空历史数据并复位检测跟踪流程。
8、在一些可选的实施例中,构建跟踪主线程与异步检测线程协同的双线程处理架构,配置有限状态机,并行执行视频跟踪处理与异步检测任务,包括:
9、分配视频跟踪处理任务至所述跟踪主线程,分配异步检测任务至所述异步检测线程;
10、配置所述有限状态机作为调度单元,建立所述跟踪主线程与异步检测线程的数据交互通道;
11、启动所述跟踪主线程执行视频跟踪处理,同时启动所述异步检测线程执行目标检测;
12、依托所述有限状态机管控任务时序,使所述跟踪主线程与所述异步检测线程并行运行。
13、在一些可选的实施例中,基于所述异步检测线程进行目标检测,并对检出的候选目标进行局部核验,包括:
14、依托所述异步检测线程逐帧解析视频图像,完成小型空中目标的特征检测,输出对应的候选目标;
15、采集所述候选目标的置信度特征与图像特征,构建候选目标的核验特征信息;
16、对多帧连续图像中的同一候选目标进行重复性核验与特征校验,过滤误检噪声目标,并留存局部核验通过的候选目标。
17、在一些可选的实施例中,对于通过局部核验的候选目标,所述跟踪主线程进行异步时序补偿,采用跟踪模板与搜索区域位置解耦方式,完成检测结果向跟踪模块的时序对齐与参数交接,包括:
18、接收异步检测线程推送的、局部核验通过的候选目标数据包,所述数据包包括目标检测坐标、检测时间戳;
19、读取跟踪主线程当前帧基准时间,确定跟踪主线程与异步检测线程的时间偏差;
20、调用所述跟踪主线程内置的运动模型对候选目标执行异步时序补偿,输出匹配跟踪主线程时刻的目标校正状态;
21、按照跟踪模板与搜索区域位置解耦方式,分别生成跟踪模板与搜索区域;
22、以目标校正状态作为基准实现检测结果时序对齐,组装跟踪输入参数并推送至跟踪模块。
23、在一些可选的实施例中,调用所述跟踪主线程内置的运动模型对候选目标执行异步时序补偿,输出匹配跟踪主线程时刻的目标校正状态,包括:
24、解析接收的候选目标数据包,提取检测时刻对应的目标检测坐标以及检测时间戳;
25、读取跟踪主线程当前帧的基准时刻,将基准时刻与检测时间戳进行比对,计算所述双线程之间的异步时间偏差;
26、调取候选目标的历史跟踪状态参数,结合目标检测坐标构建检测时刻下的目标原始状态信息;
27、将目标原始状态信息与异步时间偏差输入所述跟踪主线程内置的运动模型;
28、通过所述运动模型对目标时序偏差进行推演补偿,求解得到匹配跟踪主线程基准时刻的目标校正状态,并缓存存储目标校正状态。
29、在一些可选的实施例中,按照跟踪模板与搜索区域位置解耦方式,分别生成跟踪模板与搜索区域,包括:
30、调取局部核验通过的有效图像帧,对有效图像帧中的目标区域进行特征提取,构建并生成跟踪模板;
31、读取缓存的目标校正状态,依据校正后的目标坐标划定图像局部空间范围,生成目标搜索区域;
32、单独配置跟踪模板的更新触发逻辑与搜索区域的更新触发逻辑,使二者更新动作相互独立、无绑定关联;
33、将独立生成的跟踪模板与搜索区域同步输出,完成解耦参数制备。
34、在一些可选的实施例中,依据检测跟踪交接权限约束规则,采用经局部核验有效的检测结果触发跟踪主线程内的跟踪器初始化,包括:
35、预加载跟踪主线程本地存储的检测跟踪交接权限约束规则;
36、读取经异步检测线程局部核验留存的有效候选目标数据,结合时序对齐后的交接参数生成跟踪准入信息;
37、按照检测跟踪交接权限约束规则对跟踪准入信息开展交接准入判定;
38、准入判定通过后,调用跟踪主线程内部跟踪器,采用跟踪准入信息配置跟踪器参数,并执行跟踪器初始化操作。
39、在一些可选的实施例中,依托所述有限状态机配合所述跟踪主线程,对目标跟踪状态与目标视野状态进行监测,判定目标出视野时,清空历史数据并复位检测跟踪流程,包括:
40、调用预置有限状态机绑定跟踪主线程的运行状态,实时采集目标跟踪状态数据与目标视野状态数据;
41、通过有限状态机对采集的状态数据进行实时解析,识别目标相对图像视野的驻留状态;
42、依据解析结果判定目标是否处于出视野状态;
43、识别到目标出视野状态时,依次清空缓存的目标校正状态、跟踪模板、搜索区域与历史跟踪参数;
44、基于数据清空结果复位异步检测线程与跟踪主线程的协同工作流程。
45、此外,本技术还提供一种小型空中目标异步检测跟踪协同系统,该系统包括双线程架构搭建模块、异步检测核验模块、时序补偿解耦交接模块、跟踪初始化触发模块以及状态监测复位模块;
46、所述双线程架构搭建模块,用于构建跟踪主线程与异步检测线程协同的双线程处理架构,配置有限状态机,并行执行视频跟踪处理与异步检测任务;
47、所述异步检测核验模块,用于基于所述异步检测线程进行目标检测,并对检出的候选目标进行局部核验;
48、所述时序补偿解耦交接模块,用于对于通过局部核验的候选目标,通过所述跟踪主线程进行异步时序补偿,采用跟踪模板与搜索区域位置解耦方式,完成检测结果向跟踪模块的时序对齐与参数交接;
49、所述跟踪初始化触发模块,用于依据检测跟踪交接权限约束规则,采用经局部核验有效的检测结果触发跟踪主线程内的跟踪器初始化;
50、所述状态监测复位模块,用于依托所述有限状态机配合所述跟踪主线程,对目标跟踪状态与目标视野状态进行监测,判定目标出视野时,清空历史数据并复位检测跟踪流程。
51、此外,本技术还提供一种存储介质,所述存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上文所述的小型空中目标异步检测跟踪协同方法的步骤。
52、本技术的上述技术方案至少具有如下有益技术效果:
53、本技术的技术方案通过构建双线程并行协同架构并配置有限状态机,将检测任务与跟踪任务并行拆分处理,有效分摊边缘设备算力压力,保障视频流高帧率实时运行;通过对检出候选目标进行局部核验,可有效滤除误检噪声目标,提升小目标检测精准度;通过跟踪主线程异步时序补偿结合模板与搜索区域解耦交接方式,能够修正异步线程的时间偏差,减少跟踪初始化位置偏移问题,提升检跟时序对齐精度与参数交接可靠性;通过标准化交接权限规则触发跟踪器初始化,规范检跟切换逻辑,有效减少误检触发无效跟踪;通过有限状态机实时监测目标视野与跟踪状态并及时复位流程,可有效清除无效历史数据,减少目标出视野后的错误跟踪问题,显著提升小型空中目标跟踪稳定性与重新捕获能力,适配各类边缘移动监测平台的实际部署需求。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com