一种声光可调谐红外光谱成像系统多类型目标探测方法与流程

摘要: 本发明属于红外多光谱成像领域,具体涉及一种声光可调谐红外光谱成像系统多类型目标探测方法。背景技术:1、声光可调谐红外光谱成像系统具有探测波段可调谐、凝视成像的优...
一种声光可调谐红外光谱成像系统多类型目标探测方法与流程

本发明属于红外多光谱成像领域,具体涉及一种声光可调谐红外光谱成像系统多类型目标探测方法。

背景技术:

1、声光可调谐红外光谱成像系统具有探测波段可调谐、凝视成像的优点,可以获取红外多光谱图像进行不同类型目标的识别,在很多领域均有重要作用。对于将声光可调谐红外光谱成像系统用于目标探测而言,面临着两个方面的难题:一是复杂背景的干扰,复杂背景导致图像信杂比低,目标容易淹没在背景中,目标的显著性缺乏;二是多类型目标的探测识别,多类型目标间可能存在运动、辐射等特征相似,导致难以有效区分,从而识别并跟踪错误目标。因此,需要设计声光可调谐红外光谱成像系统的多类型目标探测方法,解决复杂背景与多类型目标问题,实现准确的目标检测、识别与跟踪。

2、目前已有的目标探测方法研究中,缺乏将探测波段选择、目标检测、目标识别与目标跟踪进行综合设计并构建完整工作逻辑的研究;对于目标探测过程中面临的复杂背景干扰与多类型目标问题,缺乏从目标背景特性、探测波段设置进行优化的研究;此外,现有模型在准确性方面有着极大进步,但是模型的轻量化与实时性不足,不利于实际探测过程的应用。

3、为解决这些问题,设计了一种声光可调谐红外光谱成像系统多类型目标探测方法。该方法利用信杂比和光谱余弦相似性构造波段选择指数选择探测波段组合,设计了基于多帧图像与时空特征的目标检测模型,并提取多维特征且构建基于自注意力机制的目标识别模型,并利用光谱信息辅助目标的跟踪;在此基础上利用声光可调谐红外光谱成像系统进行光谱图像数据获取与多类型目标的检测、识别和跟踪,实现对多类型目标的探测。

技术实现思路

1、(一)要解决的技术问题

2、本发明要解决的技术问题是如何提供一种声光可调谐红外光谱成像系统多类型目标探测方法,以解决声光可调谐红外光谱成像系统的目标探测应用过程中的复杂背景干扰与多类型目标探测的问题。

3、(二)技术方案

4、为了解决上述技术问题,本发明提出一种声光可调谐红外光谱成像系统多类型目标探测方法,该方法包括如下步骤:

5、s1、用声光可调谐红外光谱成像系统采集包含多类型目标的场景的红外光谱图像序列;

6、s2、对s1获得的红外光谱图像序列中的多类型目标进行标注,利用信杂比和光谱余弦相似性构造波段选择指数,结合标注信息进行波段选择,获得有利于探测的优选波段组合;

7、s3、根据s2获得的优选波段组合设置红外光谱成像系统的探测波段,再次获取多类型目标的场景的红外光谱图像序列;

8、s4、对s3获得的红外光谱图像序列中的多类型目标进行标注,然后利用标注数据训练基于多帧图像与时空特征的目标检测模型;

9、s5、利用s4中的标注数据,提取多类型目标的轨迹、速度、光谱、辐射强度、波段比和形状特征,构建基于自注意力机制的目标识别模型,利用提取的特征训练多类型目标识别模型;

10、s6、利用s4中的标注数据,提取目标的光谱特征,用于跟踪过程中对目标的光谱的预测,构建目标跟踪模型,利用目标的位置、速度和光谱构建状态量,采用最近邻搜索方法进行目标跟踪;

11、s7、将s4训练好的目标检测模型、s5训练好的多类型目标识别模型、s6中构建的目标跟踪模型部署到数据处理器,数据处理过程中依次进行多类型目标的检测、识别与跟踪;

12、s8、在s7模型部署的基础上,根据s2获得的优选波段组合设置红外光谱成像系统的探测波段,进行光谱图像数据获取与多类型目标的检测、识别和跟踪,实现对多类型目标的探测。

13、(三)有益效果

14、本发明提出一种声光可调谐红外光谱成像系统多类型目标探测方法,本方法的多类型目标探测方法结合了探测波段选择、目标检测、多类型目标识别与目标跟踪方法;它具有以下的优点:

15、(1)利用信杂比与光谱余弦相似性度量,优选得到了有利于目标检测与多类型目标区分的探测波段,并重新获取多类型目标的场景的红外光谱图像序列用于目标检测模型、目标识别模型、目标跟踪模型的训练;

16、(2)通过利用多帧图像中的时空特征,可以检测到复杂背景中的目标;

17、(3)在先验知识的引导下,提取了多类型特征用于多类型目标的识别;

18、(4)在目标跟踪阶段,引入了光谱信息辅助目标跟踪,增加跟踪的准确性。

1.一种声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,该方法包括如下步骤:

2.如权利要求1所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s1包括:声光可调谐红外光谱成像系统由成像系统、信息处理器2个部分组成,成像系统利用声光可调谐滤波器进行分光,通过对声光可调谐滤波器施加不同频率的驱动信号,获得不同波长的红外光谱图像;信息处理器对获取的图像进行目标检测、识别与跟踪;利用声光可调谐红外光谱成像系统,采集目标场景的红外光谱图像序列h,h含有n个波段,图像大小均为h×w,n个波段的中心波长集合为,h用于波段选择。

3.如权利要求2所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s2包括:

4.如权利要求3所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s3包括:利用红外光谱成像系统再次进行数据采集,根据波长与驱动信号频率对应关系,通过λk得到对应的驱动信号频率组合fk,对声光可调谐滤波器依次施加fk中的不同频率的驱动信号,红外光谱成像系统依次获取新数据hnew,hnew为多组依次获取的k个波段的红外光谱图像序列。

5.如权利要求4所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s4包括:

6.如权利要求5所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s5中,利用s4中的标注数据,提取多类型目标的轨迹、速度、光谱、辐射强度、波段比和形状特征包括:

7.如权利要求6所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s5中,构建基于自注意力机制的目标识别模型,利用提取的特征训练多类型目标识别模型包括:

8.如权利要求7所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s6包括:

9.如权利要求8所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s7包括:将s4训练好的目标检测模型modeldetect、s5训练好的多类型目标识别模型modelrecognize、s6中构建的目标跟踪模型modeltrack部署到数据处理器,并连接3个模型的输入输出;其中,目标检测模型的输入是连续的多帧图像序列,输出为多目标的位置;在目标检测的基础上进行特征提取,并输入目标识别模型进行目标识别,在识别到需要跟踪的目标类型后进行目标跟踪,否则再次进行目标检测。

10.如权利要求9所述的声光可调谐红外光谱成像系统多类型目标探测方法,其特征在于,所述s8包括:在s7模型部署的后,利用声光可调谐红外光谱成像系统进行目标探测,根据s2获得的优选波段组合设置声光可调谐红外光谱成像系统的探测波段,利用波长与驱动信号频率对应关系,通过λk得到对应的驱动信号频率组合fk,对声光可调谐滤波器循环施加fk中的不同频率的驱动信号,循环采集中心波长为的红外光谱图像序列,并将红外光谱图像序列输入目标检测模型、目标识别模型与目标跟踪模型,进行多类型目标的检测、识别和跟踪,实现对多类型目标的探测。