一种基于门控与红外局部动态检索的小热源行为检测系统的制作方法
本发明涉及智能视觉检测、边缘计算与多模态双光传感器融合,尤其涉及一种基于门控与红外局部动态检索的小热源行为检测系统。
背景技术:
1、在园区监控和安全巡检等场景中,吸烟等由微小明火引起的违规行为检测是一个长期的技术痛点。吸烟时产生的烟头属于微小目标,且易受人体手部动作、衣物或夜间低照度环境的遮挡,导致传统算法检测困难。
2、现有的相关视觉检测算法存在以下显著缺陷:1、单可见光或单红外模态容易产生极高的误报率:单可见光算法依赖外观特征,极其容易将“手持铅笔托腮”、“托下巴沉思”、“手持手机靠近面部”等日常动作误判为吸烟;而单一热红外检测虽对高温敏感,但缺乏丰富的语义与行为上下文,极易将背景中远处的白炽灯泡、反光阳光斑点或发热电机误判为高温烟头。2、传统密集型双光融合计算开销巨大,不适合边缘计算部署:主流的双模态方案通常采用全图像素级对齐或特征层密集交叉注意力融合。这种密集耦合架构不仅需要成对的双光标注数据集,且两套深度神经网络同时在全分辨率图像上运行,计算复杂度极高,无法在算力与显存受限的边缘终端(如jetson系列、前端智能摄像机)上实现高帧率实时推理,且导致芯片发热严重。3、缺乏空间视差容错与状态时序消抖机制:双光云台相机由于物理结构限制,可见光与热红外镜头之间天然存在空间光轴视差。当目标距离发生变化时,如果仅仅进行点对点的硬对齐映射,极易漏掉占位仅几像素的微小热源;此外,缺乏对行为时序连续性的约束,会导致临界状态下误报频发。
3、因此,亟需一种既能在资源受限的边缘设备上以超低延迟运行,又具备极高抗干扰能力的非对称双光行为检测方案。
技术实现思路
1、本发明目的在于提供一种基于门控与红外局部动态检索的小热源行为检测系统,以解决上述现有技术存在的问题。
2、本发明中所述一种基于门控与红外局部动态检索的小热源行为检测系统,包括轻量级可见光姿态感知门控模块,空间视差容错与红外局部动态检索模块;
3、所述轻量级可见光姿态感知门控模块:在可见光通道仅部署轻量级的人体姿态估计网络;实时提取人体的2d骨骼关键点;当手部关节点至嘴唇关节点的欧氏几何矢量距离小于预设动态阈值时,激活第一级门控信号,并将对应手腕/指尖关键点的像素坐标作为备选热源中心;
4、所述空间视差容错与红外局部动态检索模块:当第一级门控触发后,启动多传感器内外参对齐投影;以投影至红外通道的指尖映射坐标为中心,在热红外图像中开辟一个半径为的局部感兴趣区域窗口;仅对所述局部感兴趣区域窗口内的热红外矩阵进行最大温度值检索与动态判定,当窗口内峰值温度大于微小热源阈值时,通过第二级物理热源校验。
5、本发明中所述一种基于门控与红外局部动态检索的小热源行为检测系统,其优点在于,完全跳出了传统双光图像全图特征层融合的思维定势。
6、提出了非对称算力级联架构:以可见光的人体姿态拓扑关系作为低成本计算门控,使后置的热红外感知仅需针对roi进行简单矩阵峰值查询,从而在边缘芯片上实现了高达30+ fps的实时运算效率。
7、构建了零样本规则与空间绝对温度互补的交叉验证体系:通过将“手近口腔”的行为几何先验与“局部异常高温”的红外物理先验形成二元合取条件(and逻辑),对生活中的类抽烟误导行为以及复杂的背景热源形成了极其强悍的免疫能力。
8、设计了视差容错膨胀与降级容灾机制:在工业级现场解决了双目物理视差导致的小目标漏检问题,为各类嵌入式巡检装备和边缘摄像头赋能了低成本、高精度的微小热源违规行为监测能力。
1.一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,包括轻量级可见光姿态感知门控模块,空间视差容错与红外局部动态检索模块;
2.根据权利要求1所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,包括光照感知动态降级与双层逻辑门消抖机制:通过可见光通道全局亮度指标监测,在全黑夜间导致可见光骨骼网络失效时,自动平滑降级至红外通道的亮斑追踪分支;同时,结合基于时间滑动窗口的状态机消抖算法,实现行为状态的连续性双重验证,彻底过滤短暂误操作。
3.根据权利要求2所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,可见光处理主线程运行以高帧率运行轻量级姿态感知;热红外主通道处于被动就绪状态,仅接收经过筛选的局部几何坐标指令并执行矩阵查询,将原全图热红外推理降维至局部空间查询。
4.根据权利要求3所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,运行时进行以下步骤:
5.根据权利要求4所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,所述步骤 s100具体为:
6.根据权利要求5所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,所述步骤 s200具体为:
7.根据权利要求6所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,所述步骤 s300具体为:
8.根据权利要求7所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,所述步骤 s400具体为:
9.根据权利要求8所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,所述步骤 s500具体为:
10.根据权利要求9所述一种基于门控与红外局部动态检索的小热源行为检测系统,其特征在于,所述步骤 s600具体为:
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com