一种基于自监督机制的遥感图像细粒度目标识别方法与流程

技术特征：
1.一种基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，所述的基于自监督机制的遥感图像细粒度目标识别方法，包括：获取高光谱卫星遥感图像并按照预设规则对所述高光谱卫星遥感图像进行切割获得切割后的高光谱卫星遥感图像；对切割后的高光谱卫星遥感图像进行预处理，而后根据不同的波段获得可见光卫星遥感图像以及对应的红外成像卫星遥感图像，并对所述可见光卫星遥感图像以及对应的红外成像卫星遥感图像进行图像融合以得到融合卫星遥感图像；将所述融合卫星遥感图像输入目标检测卷积神经网络以获得目标位置；根据所述目标位置从所述融合卫星遥感图像截取目标图像截图，输入语义分割卷积神经网络以获得所述目标图像截图的语义分割结果；根据所述语义分割结果对所述目标图像截图进行图像滤波，并将滤波后的图像输入细粒度目标识别网络模型进行目标细粒度识别获得遥感图像目标识别结果。2.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，对所述可见光卫星遥感图像以及对应的红外成像卫星遥感图像进行图像融合以得到融合卫星遥感图像，包括：融合采用如下公式：i
s
＝λ
a
i
a
λ
b
i
b
其中，i
s
为所述融合卫星遥感图像，i
a
为所述可见光卫星遥感图像，i
b
为所述红外成像卫星遥感图像，“ ”表示所述可见光卫星遥感图像和所述红外成像卫星遥感图像相对应位置处的元素相加，λ
a
和λ
b
表示可见光卫星遥感图像和所述红外成像卫星遥感图像的权重。3.如权利要求2所述的基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，0＜λ
b
0.5＜λ
a
＜1.0。4.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，所述目标检测卷积神经网络采用改进的yolov3网络，包括特征提取网络层、特征融合层以及检测输出层，其中：在特征提取网络层darknet-53中加入两组hrfb结构以及对应的两组空间注意力结构；所述hrfb结构包括输入层、卷积层和拼接层，所述卷积层包括三个支路，第一支路包括一个1*1的卷积结构，第二支路包括一个1*1的卷积结构和两个3*3的卷积结构，第三支路包括一个1*1的卷积结构和一个3*3的卷积结构，其中3*3的卷积结构的间隔率均为1；所述空间注意力结构包括池化核分别为3、5、7的三个最大池化层，所述三个最大池化层的输出经过拼接后在输入到一个卷积层，最后经过激活函数输出空间注意力特征。5.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，所述根据所述语义分割结果对所述目标图像截图进行图像滤波，包括：滤波采用公式：f
s
＝f
b
·
f其中，f
s
为滤波后的图像，f
b
为所述语义分割结果的二值化图像，其中有目标的位置像素值为1，其余为背景位置像素值为0；f为所述目标图像截图，“·”表示所述二值化图像和所述目标图像截图相对应位置处的元素相乘。6.如权利要求1所述的基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，
所述细粒度目标识别网络模型包括第一网络结构和第二网络结构，其中：所述第一网络结构用于预测图像中每个预选区域的信息量，并根据信息量推荐预定数量的图像区域作为特征提取的候选区域，所述信息量用于表征所述预选区域的目标特征显著程度；所述第二网络结构将第一网络结构获得的候选区域缩放至相同大小并通过卷积网络结构进行特征提取和特征融合以获得图像的联合特征向量，将所述联合特征向量输入支持向量机以获得目标细粒度识别结果。7.如权利要求6所述的基于自监督机制的遥感图像细粒度目标识别方法，其特征在于，所述使用第一网络结构用于预测图像中每个预选区域的信息量，并根据信息量推荐预定数量的图像区域作为特征提取的候选区域的方法，包括：根据输入图像，随机产生n个矩形区域{r1，r2，...，r
n
}，其中，所述矩形区域具有m种不同的分辨率和m种不同的长宽比率；将所述n个矩形区域通过所述第一网络结构进行信息量提取得到信息量列表{i1，i2，...，i
n
}；对所述信息量列表从大到小进行排序，选取信息量列表前m个信息量对应的矩形区域作为特征提取的候选区域。

技术总结
本发明公开了一种基于自监督机制的遥感图像细粒度目标识别方法，将所述融合卫星遥感图像输入目标检测卷积神经网络以获得目标位置，根据目标位置从所述融合卫星遥感图像截取目标图像截图，输入语义分割卷积神经网络以获得所述目标图像截图的语义分割结果，最后根据所述语义分割结果对所述目标图像截图进行图像滤波，并将滤波后的图像输入细粒度目标识别网络模型进行目标细粒度识别获得遥感图像目标识别结果。本发明解决了细粒度遥感图像检测和识别中标注样本监督信息不充足、领域知识不匹配问题，提高了识别准确度。提高了识别准确度。提高了识别准确度。


技术研发人员：陈初杰 瞿崇晓 张永晋 祝中科 张建楠 杜鑫 范长军
受保护的技术使用者：中国电子科技集团公司第五十二研究所
技术研发日：2021.10.18
技术公布日：2022/1/28