圆台形目标的位姿检测方法
本发明属于计算机视觉、视觉测量领域,具体涉及一种圆台形目标的位姿检测方法。
背景技术:
1、空中加油技术是增加飞行器续航能力的关键手段,能有效解决飞行器航程受限的问题,使飞行器通过燃料补给延长任务时间,在不依赖中转机场的条件下扩大任务范围。作为提升飞行器航程及续航时间的核心技术之一,空中加油技术已成为各国航空现代化发展的重要方向。通过配备空中加油机实施长途飞行时的中途加油,飞行器能够减少起飞重量、降低落地中转频次,减少油耗与碳排放,对于航空经济性、安全性和可持续发展具有重要作用。
2、在受油机与加油机自主对接的过程中,实时、高精度的位姿(位置与姿态)测量是实现精准对接的前提。在软式自主空中加油任务中,受油机需借助视觉传感器实时获取加油机锥套的位姿信息,以引导受油探管精准插入锥套底部的加油孔。
3、目前,针对锥套位姿测量任务,主流的视觉测量方法主要有以下几种:
4、1.基于单圆特征的小孔成像测距法:该方法通常利用目标检测算法识别锥套的外圆轮廓,并提取其包围框的尺寸作为像素直径。在理想的正对视角下,根据预设的锥套物理直径、相机焦距以及检测框的像素宽度,通过比例关系计算相对距离。这种方法计算简便,在正对视角下具有较好的实时性。
5、2.基于中心点位置的粗略偏移校正:部分研究通过提取锥套外圆中心与底部加油孔中心在图像上的坐标,计算两者间的像素位移,并利用该位移与锥套物理深度的比值定性判断锥套的倾斜方向,并在解算出位姿后,对由于倾斜导致的距离误差进行后验补偿。
6、3.基于边缘拟合的椭圆检测法:通过提取锥套边缘像素点并进行椭圆拟合,获得椭圆的长轴、短轴及中心坐标,并利用椭圆几何参数推导锥套的空间法向量,从而解算其3d 位姿。
7、然而,在复杂的空中加油实际环境中,上述技术面临着严峻的挑战。首先,由于加油机锥套质量轻、迎风面积大,易受加油机尾流及大气湍流影响,常处于复杂的侧摆和旋转状态。当锥套相对于相机平面发生倾斜时,其圆形轮廓在成像平面上投影为椭圆。此时,传统的轴对齐检测框会随椭圆的旋转而发生剧烈的尺寸波动,导致无法直接、稳定地获取用于测距的基准像素直径,致使测距误差增大。其次,椭圆拟合法虽然精度较高,但其计算量巨大,在高速对接阶段难以满足实时控制的需求。
技术实现思路
1、针对现有视觉测量方法技术在复杂的空中加油实际环境中测量锥套位姿时存在的测距误差大、难以满足实时控制需求的不足,本发明提出了一种圆台形目标的位姿检测方法。本发明通过底层解析模型的重建,实现从受到姿态干扰的像素特征中精准还原目标的物理真实尺度,能够极大减小因锥套侧偏等问题引起的测距误差,并且能快速获得更精确的加油锥套位姿信息。
2、本发明采取的技术方案是:
3、圆台形目标的位姿检测方法,其特殊之处在于,包括步骤:
4、将检测相机采集的目标图像输入预先训练好的目标检测模型中,目标检测模型输出像素级的目标外圆轮廓的矩形检测框及目标底部轮廓/底部中心圆孔的矩形检测框;
5、计算所述目标外圆轮廓的矩形检测框在图像坐标系下的水平宽度m以及目标外圆轮廓中心点r和底部轮廓/底部中心圆孔中心点b的像素坐标;
6、获取目标相对于检测相机的空间姿态信息,包括目标相对于检测相机光轴的侧偏角和由目标外圆轮廓中心点r指向底部轮廓/底部中心圆孔中心点b的向量相对于目标图像水平轴线的旋转角;
7、求解目标外圆轮廓在成像平面上的椭圆投影的长轴长度像素值m;;;
8、基于小孔成像原理,利用目标外圆在成像平面上的椭圆投影的长轴长度像素值m计算目标外圆中心点r距离检测相机光心的深度距离d;
9、通过几何解耦的方式,解算目标底部中心点b相对于目标外圆轮廓中心点r在三维空间中的相对偏移量;
10、将目标外圆轮廓中心点r在成像平面上的投影的坐标值与目标底部中心点b相对于目标外圆轮廓中心点r在三维空间中的相对偏移量线性合成,得到目标底部中心点b在相机坐标系下的三维空间坐标。
11、进一步地,所述目标检测模型采用yolo网络、transformer编码器或者rcnn网络;利用事先构建的训练集和验证集进行训练和验证;训练集与验证集的构建方法是:
12、采集涵盖多种气象条件及远、中、近尺度的可见光目标图像和红外目标图像;
13、在每张目标图像中用相切的矩形框标注出目标外圆轮廓和底部轮廓/底部中心圆孔轮廓;
14、利用标注后的目标图像构建多模态、多尺度的数据集,然后按预设比例划分为训练集与验证集。
15、进一步地,所述目标检测模型利用完备联合目标损失函数监督训练,损失函数公式如下:
16、
17、
18、
19、式中, 、 分别是边界框几何损失函数和分布焦距损失函数,和分别是物体边缘梯度对齐损失函数和边界框的一维概率分布方差连续性正则化损失函数;j为对边界框进行采样的采样点序号;n为采样点的个数;为通过双线性插值抽取的物理梯度响应向量集;、分别是和 的权重系数;为预设的离散回归区间长度,即表征边界相对偏移量的离散格子总数;为离散回归区间内格子的序号;为边界框出现在第 个格子的概率;为边界的一维分类概率向量围绕其当前亚像素期望解码值。
20、进一步地,由目标外圆轮廓中心点r指向底部中心点b的向量相对于目标图像水平轴线的旋转角利用下式计算:
21、
22、式中,为目标外圆轮廓中心点r在图像坐标系下的像素坐标;为目标底部中心点b在成像平面上的像素坐标;
23、目标相对于检测相机光轴的侧偏角利用下式计算:
24、
25、式中,为目标外圆轮廓物理直径;h为目标物理深度;为目标外圆轮廓中心点r与底部中心点b在成像平面上投影的像素位移,。
26、进一步地,基于小孔成像原理计算的目标外圆中心点r距离检测相机光心的深度距离d为:
27、
28、式中,d为检测相机焦距。
29、进一步地,通过几何解耦的方式,解算目标底部中心点b相对于目标外圆轮廓中心点r在三维空间中的相对偏移量为:
30、
31、式中,、、分别为深度方向、水平方向和竖直方向偏置。
32、进一步地,线性合成后目标底部中心点b在相机坐标系下的三维空间坐标为:
33、。
34、进一步地,所述圆台形目标为空中加油锥套。
35、本发明的有益效果是:
36、以圆台形的空中加油锥套的位姿检测为例,本发明首先基于目标检测模型同步输出的矩形检测框提取图像中锥套外圆轮廓中心与底部加油孔中心的像素坐标。随后,利用锥套外圆轮廓中心与底部加油孔中心的连线构成的几何向量解算出锥套的空间旋转姿态(侧偏角与旋转角)。以此空间旋转姿态作为几何约束,引入椭圆支撑函数解析模型,对目标检测框的宽度进行补偿还原,从而提取出无畸变的锥套外圆在成像平面上的椭圆投影的长轴长度像素值。最后,基于该无畸变的像素直径长轴结合小孔成像原理,实现对锥套相对位置的精确测量。本发明具体具有以下有益效果:
37、1.消除了旋转诱发的尺度失真,显著提升了测距精度
38、现有技术在锥套发生侧偏时,通常粗糙地选取目标检测框(aabb)的宽或高作为直径像素值,或者采用简单的最大值取值法。由于旋转椭圆的水平包络线宽度在几何上必然小于其真实长轴长度,这种做法会引入不可消除的系统性测量偏差。针对锥套侧偏导致投影轮廓由圆变椭圆,进而引发轴对齐检测框尺寸随旋转角度异常波动的技术痛点,本发明引入椭圆支撑函数解析模型。该模型建立了矩形检测框水平宽度与锥套外圆轮廓椭圆投影长轴间的解析映射关系,能够从受姿态干扰的观测值中精准反求出锥套外圆在成像平面上的椭圆投影的长轴长度像素值m,保证了前端测距基准在理论层面达到了解析解精度,从源头上避免了现有技术因简单选取目标检测框的宽或高作为锥套外圆在成像平面上的椭圆投影的长轴长度像素值而引入的系统性测量偏差,确保即便在锥套大幅度偏摆的情况下,依然能够获得高精度的像素直径长轴,解决了几何投影畸变导致的测距不准问题。
39、2.构建姿态与尺度的去耦合解算框架,增强了位姿稳定性
40、现有技术通常采用“先粗略测距、再事后补偿”的方案,导致测距误差与姿态偏转误差相互耦合、反复叠加。本发明构建姿态与尺度的去耦合解算框架:预先解算锥套的空间旋转姿态并将其作为几何约束,再结合椭圆支撑函数解析模型对目标检测框的宽度进行反向补偿与还原,实现对尺度信息的独立还原。这一去耦合解算框架打破了测距误差与姿态偏转误差之间的关联性,确保了在锥套连续动态晃动、侧偏角度频繁变化的复杂对接过程中,位姿测量结果依然能够保持高度的平滑性与一致性。
41、3.能抵御透视畸变干扰,复杂环境下的观测稳健性好
42、在近距离对接阶段,透视投影带来的“近大远小”畸变会导致目标特征点发生非线性偏移。本发明利用锥套外圆轮廓中心与底部加油孔中心连线在透视投影中表现出的“共模误差抑制”特性,提出一种对“近大远小”非线性畸变具有天然抗性的姿态感知手段。配合解析还原得到的锥套外圆在成像平面上的椭圆投影的长轴长度像素值,解决了近距离对接阶段由于透视效应导致的目标特征点偏移问题,确保输出的三维坐标符合真实物理空间演变规律,为自主空中加油的末端精准对接提供了符合空间物理演变规律的高信噪比观测数据。
43、4. 计算效率高,能满足实时控制的需求
44、相比于复杂的边缘像素采样及椭圆曲线拟合法,本发明仅需利用目标检测框的水平宽度、锥套外圆轮廓中心点和底部加油孔中心点的像素坐标,即可通过解析公式直接获取高精度的锥套外圆在成像平面上的椭圆投影的长轴长度像素值,无需复杂的迭代运算,极大降低了计算复杂度,能够更好地适配无人机等嵌入式平台对于实时位姿反馈的高频要求。
45、5.通用性好
46、本发明不局限于检测圆台形的空中加油锥套位姿,还能检测其他圆台形目标的位姿。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com