一种超高压输电线路无人机图像识别感应取电方法与流程
本发明属于图像识别及无人机视觉控制,具体涉及一种超高压输电线路无人机图像识别感应取电方法。
背景技术:
1、超高压输电线路无人机巡检通常依靠机载相机获取导线、绝缘子、金具和通道环境图像,再通过图像识别模型对目标区域进行检测、分割或缺陷判断。对于导线类目标,常规方案多采用边缘提取、目标框检测或语义分割方式确定导线在图像中的大致位置,再结合无人机飞行控制系统完成沿线巡航或悬停拍摄。在需要靠近导线执行特定作业时,现有方案通常以导线目标框中心、导线分割区域中心或人工设定的图像参考点作为靠近依据,将像素偏差转换为飞行姿态调整量。此类方案能够满足巡检拍摄和缺陷识别需求,但输出结果主要停留在目标存在性、目标位置和图像区域层面,缺少面向感应取电耦合关系的姿态表达。
2、现有无人机在线补能或感应取电控制中,将视觉定位与取电控制分开处理。视觉部分负责识别输电导线位置,取电控制部分根据无人机与导线之间的相对接近状态或电路输出状态判断是否进入取电过程。在图像识别环节,导线通常被视为线状目标,取电线圈多被视为机载机构的固定参考对象,二者之间的空间关系往往通过简单的中心偏差、距离估计或预设姿态条件进行表达。在超高压线路环境中,导线图像容易受到逆光、背景边缘、塔材遮挡、导线弧垂和飞行抖动影响,单帧图像中得到的导线边界和目标中心容易发生跳变。若后续控制仍依赖单一图像坐标误差,难以反映导线局部切向、线圈投影法向和可取电点位之间的耦合状态。
3、图像识别结果不能直接、稳定地表征输电导线与取电线圈之间满足感应取电要求的耦合位姿关系。具体而言,普通目标检测或分割结果只能提供导线图像区域,不能同时给出导线中心轴、局部切向方向、线圈中心、线圈投影法向和可取电点位候选区域之间的约束关系;单帧识别结果又容易因环境干扰出现边界漂移或误检。由此导致无人机在接近导线时只能依据粗略像素偏差进行对位,无法判断当前线圈姿态是否处于可耦合窗口内,也无法将视觉识别结果稳定转换为感应取电对位控制所需的耦合位姿向量,进而影响非接触式取电过程中的对位可靠性和姿态保持稳定性。
技术实现思路
1、本发明的目的在于提供一种超高压输电线路无人机图像识别感应取电方法,可以解决上述背景技术中的问题。
2、为实现上述目的,本发明采取的技术方案为:
3、一种超高压输电线路无人机图像识别感应取电方法,包括:获取无人机接近超高压输电导线过程中的连续图像帧;
4、构建导线与取电点位的目标检测模型,对所述连续图像帧中的输电导线、取电线圈投影轮廓和可取电点位候选区域进行联合识别;
5、依据所述输电导线的分割边界拟合导线中心轴及局部切向方向,依据所述取电线圈投影轮廓确定线圈中心及投影法向;
6、将所述导线中心轴、局部切向方向、线圈中心、投影法向和可取电点位候选区域输入时空约束解算过程,实时解算输电导线的空间位姿与取电线圈的对位偏差,并生成用于感应取电对位控制的耦合位姿向量。
7、优选的,所述连续图像帧在输入目标检测模型前,按照无人机航向变化量和导线图像尺度变化量建立帧间配准关系;
8、在所述帧间配准关系中选取导线纹理连续区域、线圈投影边缘区域和背景弱纹理区域分别形成图像识别约束样本;
9、依据所述图像识别约束样本对每一图像帧进行亮度均衡、边缘保留增强和尺度归一处理,并保留每一图像帧对应的拍摄时序标识,使后续导线中心轴拟合结果和取电线圈投影识别结果能够按照同一时序坐标进行关联。
10、优选的,所述目标检测模型包括共享特征提取网络、导线细粒度分割分支、导线中心轴回归分支、取电线圈投影识别分支和可取电点位候选区域生成分支;
11、所述共享特征提取网络提取包含导线细长边缘、线圈闭合轮廓和导线局部走向的多尺度特征;
12、所述导线细粒度分割分支输出输电导线边界掩膜,所述导线中心轴回归分支依据所述输电导线边界掩膜输出中心轴采样点序列,所述取电线圈投影识别分支输出线圈投影参数,所述可取电点位候选区域生成分支依据中心轴采样点序列和线圈投影参数生成候选取电窗口。
13、优选的,所述时空约束解算过程包括:在单帧图像内依据所述导线中心轴建立导线局部坐标系,并将线圈中心投影至所述导线局部坐标系中得到横向偏差和纵向偏差;
14、依据所述局部切向方向与投影法向之间的夹角得到角度偏差;
15、依据所述可取电点位候选区域在相邻图像帧中的位置延续关系得到窗口稳定度;
16、将所述横向偏差、纵向偏差、角度偏差和窗口稳定度共同编码为耦合位姿向量。
17、优选的,所述帧间配准关系按照所述输电导线在相邻图像帧中的中心线方向变化建立导线主方向约束,并按照所述取电线圈投影轮廓在相邻图像帧中的中心位移建立线圈运动约束;
18、当所述导线主方向约束与所述线圈运动约束之间的相对变化超出预设一致性范围时,将对应图像帧标记为待校正帧;
19、对所述待校正帧引用前序稳定图像帧中的导线中心轴采样点序列和线圈投影参数进行位姿补偿,并将补偿后的图像特征输入目标检测模型。
20、优选的,所述导线中心轴回归分支对所述输电导线边界掩膜进行骨架化采样,形成沿导线延伸方向排列的中心轴采样点序列;
21、对所述中心轴采样点序列进行局部曲率分段,将曲率连续且边界置信度满足识别条件的采样点段确定为有效导线段;
22、所述可取电点位候选区域生成分支仅基于有效导线段、线圈投影参数和导线局部坐标系生成候选取电窗口,并为每一候选取电窗口配置与导线直线度和线圈重合度相关联的窗口置信度。
23、优选的,所述取电线圈投影识别分支在识别线圈可见局部弧段后,结合线圈已知物理尺寸先验参数,将局部弧段拟合为受约束的投影椭圆姿态,并解算投影椭圆中心、长轴方向、短轴方向和弧段置信度;
24、当所述投影椭圆与所述导线中心轴在图像坐标中的相对位置满足预设耦合几何关系时,将解算得到的投影椭圆中心作为线圈中心,将长轴方向和短轴方向共同转换为投影法向,并将投影法向与局部切向方向建立角度关联。
25、优选的,所述窗口稳定度由所述候选取电窗口在连续图像帧中的中心漂移量、窗口形状变化量、导线边界置信度变化量和线圈弧段置信度变化量共同确定;
26、在生成耦合位姿向量时,对所述横向偏差、纵向偏差和角度偏差分别配置与窗口稳定度相关联的权重,并将低稳定度图像帧中的偏差量按照相邻稳定图像帧的偏差变化趋势进行约束更新。
27、优选的,在所述待校正帧完成位姿补偿后,建立包含有效导线段、中心轴采样点序列、线圈投影参数和窗口置信度的历史特征队列;
28、在新图像帧进入目标检测模型时,将所述历史特征队列中与新图像帧的导线主方向相匹配的特征作为先验约束,对新图像帧中的虚假导线响应、塔材边缘响应进行筛除,对线圈遮挡导致的导线边界中断区域进行补全约束,并更新候选取电窗口的连续性标识。
29、优选的,所述耦合位姿向量在输出前按照连续性标识和窗口稳定度进行分级编码;
30、当同一候选取电窗口在连续图像帧中保持相同导线主方向且线圈弧段置信度满足识别条件时,将对应的所述横向偏差、纵向偏差、角度偏差、窗口稳定度和窗口置信度组合为有效耦合位姿向量;
31、当所述候选取电窗口的连续性标识中断时,保留前序所述有效耦合位姿向量,并对中断图像帧的偏差分量进行时序插值编码。
32、与现有技术相比,本发明的有益效果在于:
33、1.采用连续图像帧、导线与取电点位目标检测模型、导线中心轴拟合、取电线圈弧段姿态解算和时空约束解算相结合的技术方案后,图像识别输出由普通目标位置转换为可用于取电对位控制的耦合位姿向量。输电导线分割边界用于确定中心轴,中心轴进一步限定局部切向方向;取电线圈可见弧段结合线圈物理尺寸先验约束用于解算线圈中心和投影法向;可取电点位候选区域用于限定导线局部可耦合窗口;连续图像帧中的时序关系用于约束单帧跳变。上述技术特征相互配合,使横向偏差、纵向偏差、角度偏差和窗口稳定度在同一解算过程中形成关联,减少仅依据目标框中心或单帧分割结果产生的对位误差,使无人机感应取电控制获得与导线—线圈耦合关系对应的视觉状态输入。
34、2.在进一步处理过程中,帧间配准关系、导线主方向约束、线圈运动约束、有效导线段筛选、结合先验约束的投影椭圆姿态解算、窗口置信度、历史特征队列和分级编码共同限定识别结果的更新方式。导线边界受到背景线条干扰时,可通过历史特征队列和导线主方向匹配筛除虚假响应;取电线圈局部遮挡导线时,可利用线圈投影参数和前序稳定图像帧对被遮挡的导线边界与中心轴进行位姿补偿;候选取电窗口发生短时中断时,可通过连续性标识和时序插值保留前序有效耦合位姿向量的状态连续性。由此,视觉识别结果在飞行抖动、尺度变化和局部遮挡条件下保持较好的时序一致性,取电点位候选区域的生成不再依赖孤立图像帧,后续感应取电对位控制能够获得更平滑、更完整的输入数据。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com