一种基于多光谱图像识别的果园对靶变量喷雾控制方法及系统

摘要: 本技术涉及果园喷雾控制,具体地涉及一种基于多光谱图像识别的果园对靶变量喷雾控制方法及系统。背景技术:1、果园植保作业的精准化与智能化水平,直接影响着果品生产的施...
一种基于多光谱图像识别的果园对靶变量喷雾控制方法及系统

本技术涉及果园喷雾控制,具体地涉及一种基于多光谱图像识别的果园对靶变量喷雾控制方法及系统。

背景技术:

1、果园植保作业的精准化与智能化水平,直接影响着果品生产的施药效率与农业生态环境保护。随着多光谱遥感技术、嵌入式计算平台以及机电一体化喷雾装备的发展,基于图像感知的果园对靶变量喷雾技术能够根据果树冠层的光谱特征、几何结构及长势调节喷嘴施药量,从而为果园精准施药提供技术基础。

2、申请公布号为cn119559504a,申请公布日为2025年3月4日的中国发明专利公开了一种农药变量喷施系统及方法,该专利利用无人机载多光谱成像仪获取影像,通过树木分割算法定位单株果树,进而依据植被指数(如ndvi)计算施药量,最终由变量喷施装置执行作业。

3、然而,在冠层区域存在阴影的情况下,植被指数的计算易受光照不足影响,导致反射信号微弱,进而使阴影区域的施药量估算值出现过度衰减或异常突变。

技术实现思路

1、有鉴于此,本技术提供一种基于多光谱图像识别的果园对靶变量喷雾控制方法及系统,以利于缓解相关技术中果树冠层阴影区域需药量估算结果准确性偏低的技术问题。

2、第一方面,本技术实施例提供了一种基于多光谱图像识别的果园对靶变量喷雾控制方法,应用于搭载有多光谱感知单元的移动载具,所述控制方法包括如下步骤:

3、获取包含果树冠层区域的多光谱图像序列,基于多光谱图像序列,提取近红外波段和红边波段的表观反射率,再结合光照阴影补偿因子、冠层叶面积指数以及时序变异特征,计算当前帧中各像素点的目标需药量密度;

4、基于移动载具的当前位姿数据、多光谱感知单元的视场角及喷嘴的横向喷幅,构建图像像素坐标系与地面物理喷雾坐标系的时空映射矩阵,利用时空映射矩阵将目标需药量密度投影至地面物理喷雾坐标系,得到靶标需药量分布图;

5、基于靶标需药量分布图,计算各电磁阀的实时脉冲宽度调制占空比信号,以调控喷嘴的瞬时流量。

6、在一种可能的实现方式中,所述基于多光谱图像序列,提取近红外波段和红边波段的表观反射率,再结合光照阴影补偿因子、冠层叶面积指数以及时序变异特征,计算当前帧中各像素点的目标需药量密度,包括:

7、对多光谱图像序列进行辐射定标与几何校正处理,得到处理后的多光谱图像序列;

8、基于处理后的多光谱图像序列,提取近红外波段和红边波段的表观反射率;

9、利用近红外波段的表观反射率、红边波段的表观反射率、光照阴影补偿因子、冠层叶面积指数和时序变异特征,计算当前图像帧中各像素点的目标需药量密度:

10、

11、其中,为t时刻像素点(x,y)处的目标需药量密度;为预设的最大施药量阈值;为t时刻像素点(x,y)处近红外波段的表观反射率;为t时刻像素点(x,y)处红边波段的表观反射率;、、为土壤背景及大气散射校正系数;为冠层叶面积指数;为作物生理敏感系数;为冠层截获率权重系数;为光照阴影补偿因子;为光照非线性调制指数;为预设时间滑动窗口内近红外反射率的时序方差;为预设时间滑动窗口内近红外反射率的时序均值的平方;为冠层动态风摆补偿系数;为指数函数;为对数函数。

12、在一种可能的实现方式中,所述光照阴影补偿因子的获取过程,包括:

13、根据多光谱图像中近红外波段的局部梯度特征,利用形态学顶帽变换分离直射光强分量和散射光强分量;

14、获取当前时刻的太阳天顶角、移动载具的航向角与太阳方位角的偏差角,并结合直射光强分量、散射光强分量、太阳天顶角及偏差角计算光照阴影补偿因子;

15、获取全局标准光照强度,根据全局标准光照强度对光照阴影补偿因子进行更新。

16、在一种可能的实现方式中,所述根据全局标准光照强度对光照阴影补偿因子进行更新,包括:

17、当连续两帧图像的全局标准光照强度变化率超过预设突变阈值时,停止更新当前帧的光照阴影补偿因子并沿用上一帧光照阴影补偿因子的数值;

18、在停止更新当前帧的光照阴影补偿因子之后,计算相邻帧的全局标准光照强度变化率,当连续预设帧数的全局标准光照强度变化率低于预设突变阈值时,采用指数平滑函数逐步恢复更新光照阴影补偿因子。

19、在一种可能的实现方式中,所述冠层叶面积指数的获取过程,包括:

20、利用多光谱感知单元中的双目视觉系统,基于双目视觉系统的双目视差对近红外波段图像进行半全局匹配立体视觉计算,得到冠层表面的三维点云数据和匹配置信度;

21、当所述匹配置信度低于预设阈值时,利用移动载具获取激光雷达点云数据,将激光雷达点云数据作为三维点云数据的补充输入,得到融合后的三维点云数据;

22、基于融合后的三维点云数据计算当前帧各像素点的冠层高度和孔隙率,结合比尔-朗伯定律反演得到冠层叶面积指数。

23、在一种可能的实现方式中,所述基于移动载具的当前位姿数据、多光谱感知单元的视场角及喷嘴的横向喷幅,构建图像像素坐标系与地面物理喷雾坐标系的时空映射矩阵,包括:

24、对移动载具的当前位姿数据进行小波包分解,得到刚体运动数据;

25、结合动态差分全球卫星导航系统数据,利用扩展卡尔曼滤波算法计算移动载具的实时俯仰角;

26、基于实时俯仰角对扩展卡尔曼滤波算法的过程噪声协方差矩阵进行调节,得到调节后的扩展卡尔曼滤波算法;

27、根据调节后的扩展卡尔曼滤波算法估计姿态角,并构建旋转矩阵,结合手眼标定矩阵生成时空映射矩阵。

28、在一种可能的实现方式中,所述基于实时俯仰角对扩展卡尔曼滤波算法的过程噪声协方差矩阵进行调节,包括:

29、计算实时俯仰角的变化率,提取目标频段内的多尺度能量熵作为特征向量输入预设的路面起伏等级分类器,得到分类结果;

30、基于分类结果调节扩展卡尔曼滤波算法的过程噪声协方差矩阵中与惯性传感器零偏状态对应的对角线元素,得到调节后的扩展卡尔曼滤波算法。

31、在一种可能的实现方式中,所述基于靶标需药量分布图,计算各电磁阀的实时脉冲宽度调制占空比信号,包括:

32、计算初始系统纯滞后时间,利用药液在管路中的声速传播模型及在线采集的药液温度对初始系统纯滞后时间进行动态修正;

33、基于动态修正后的系统纯滞后时间以及扩展卡尔曼滤波算法输出的状态估计向量,前向预测得到考虑系统纯滞后时间后的预测行驶速度;

34、根据靶标需药量分布图及经系统纯滞后时间修正的预测行驶速度确定各喷嘴的脉冲宽度调制占空比。

35、在一种可能的实现方式中,所述计算初始系统纯滞后时间,包括:

36、在喷雾系统启动阶段或管路压力发生阶跃变化时,将电磁阀驱动器接收到脉冲宽度调制占空比触发沿的时刻记为第一时刻,将管路末端喷嘴处压力响应达到最大施药量阈值所对应的压力值的时刻记为第二时刻,将第一时刻与第二时刻的差值作为初始系统纯滞后时间。

37、第二方面,本技术实施例提供了一种基于多光谱图像识别的果园对靶变量喷雾控制系统,所述系统适用于如第一方面所述的控制方法,包括:

38、多光谱数据感知模块,用于获取包含果树冠层区域的多光谱图像序列;

39、需药量密度解算模块,用于基于多光谱图像序列,提取近红外波段和红边波段的表观反射率,再结合光照阴影补偿因子、冠层叶面积指数以及时序变异特征,计算当前帧中各像素点的目标需药量密度;

40、时空映射与投影模块,用于基于移动载具的当前位姿数据、多光谱感知单元的视场角及喷嘴的横向喷幅,构建图像像素坐标系与地面物理喷雾坐标系的时空映射矩阵,利用时空映射矩阵将目标需药量密度投影至地面物理喷雾坐标系,得到靶标需药量分布图;

41、脉冲宽度调制控制模块,用于基于靶标需药量分布图,计算各电磁阀的实时脉冲宽度调制占空比信号,以调控喷嘴的瞬时流量。

42、第三方面,本技术实施例提供了一种电子设备,包括:

43、处理器;

44、存储器;

45、以及计算机程序,其中所述计算机程序被存储在所述存储器中,所述计算机程序包括指令,当所述指令被所述处理器执行时,使得所述电子设备执行第一方面中任意一项所述的方法。

46、第四方面,本技术实施例提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机可读存储介质所在设备执行第一方面中任意一项所述的方法。

47、本技术的有益效果如下:

48、首先,本技术引入了光照阴影补偿因子,该因子能够根据光照强弱动态调整增益系数,当检测到冠层处于极端阴影导致近红外和红边波段反射信号微弱时,便主动对这些微弱信号进行增益补偿,将表观反射率还原为接近真实光照条件下的数值,从而有效避免了植被指数因分母趋近于零而产生计算失效,进而抑制了施药量的过度衰减。

49、其次,本技术还耦合了冠层叶面积指数作为物理约束,在阴影区域即使反射信号被人为补偿增强,本技术也会根据该区域实际的叶面积密度来校验补偿后的数值是否合理,有效防止因过度补偿引发异常的数值突变。本技术利用多光谱图像的时序序列提取变异特征,由于极端阴影往往由云层移动或叶片瞬时摆动等偶然因素造成,本技术通过对比当前帧与前后帧的反射率波动模式,能够识别出那些孤立且不连续的光照干扰,并借助时序滤波对其进行平滑处理,使单帧图像因突发阴影产生的畸变不会直接传递至后续的施药决策。

50、在信号初步校正后,本技术构建了图像像素坐标系与地面物理喷雾坐标系之间的时空映射矩阵,该映射不仅实现了坐标转换,还将像素级的需药量密度重新采样并投影到实际的物理喷雾网格中,使得图像上零散分布的阴影异常点被分散到多个空间网格内,通过网格内的加权平均计算,降低了单个异常像素对整体需药量评估的影响。

51、最后,本技术将映射后的靶标需药量分布图转化为各电磁阀的脉冲宽度调制占空比信号,这种占空比输出是对整个喷雾网格内需药量进行积分平均后得出的结果,属于面尺度的调控指令而非点对点的直接驱动,因此即便图像局部仍残留有未能完全消除的阴影异常,经过空间积分后其对最终占空比数值的扰动也极为有限,从而保证了各喷嘴瞬时流量的平稳输出,进而有效避免了施药量估算值因光照不足而出现的过度衰减或异常突变问题。

52、通过采用上述方案,本技术能够有效抑制施药量估算的过度衰减与异常突变,提升阴影区域需药量估算的鲁棒性与准确性。