一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法及系统与流程

摘要: 本发明涉及结构健康监测,具体涉及一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法及系统。背景技术:1、结构健康监测是保障桥梁、高层建筑、高塔等土木基础设施...
一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法及系统与流程

本发明涉及结构健康监测,具体涉及一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法及系统。

背景技术:

1、结构健康监测是保障桥梁、高层建筑、高塔等土木基础设施长期安全服役的核心技术支撑,对于提前预警结构性能退化、防范坍塌等灾难性事故具有至关重要的工程价值。传统接触式位移测量依赖加速度计、线性可变差动变压器等硬件设备,存在部署周期长、布线复杂、难以在存量老旧结构上规模化布设的局限。基于计算机视觉的非接触位移测量技术凭借部署灵活、成本低廉、可同时实现多点位同步监测等优势,成为结构振动位移监测领域的重要发展方向。其中klt特征跟踪算法基于亮度恒定基本假设,通过最小化帧间像素强度差的平方和求解特征点的光流位移,无需人工布设靶标且计算效率优异,目前已被广泛应用于各类土木工程结构的视觉振动测量场景。

2、然而,现有基于单参考帧的klt位移测量方法存在难以突破的固有技术矛盾:采用前一帧作为参考帧时,相邻帧间位移幅度小、跟踪精度高,但每帧的微小跟踪误差会逐帧累积,随监测时长增加产生严重的结果漂移,无法支撑长期稳定监测;采用初始帧作为固定参考帧时,可从原理上避免误差累积,但当结构产生较大位移时,帧间图像差异超出算法小位移假设的适用范围,线性近似失效会导致跟踪精度急剧下降。现有技术无法同时兼顾长期测量的无漂移特性与大位移工况下的测量精度,难以满足土木工程结构健康监测对位移测量高精度、长时程可靠运行的实际需求。

技术实现思路

1、为解决现有技术中的问题,本发明提供一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法及系统。

2、本发明提供的一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法,包括如下步骤:

3、步骤s1,获取待监测土木工程结构的视频序列,划定结构监测的感兴趣区域roi,在视频序列的初始帧中感兴趣区域roi内提取klt跟踪的初始特征点集;

4、步骤s2,以初始特征点集为共同跟踪基准,采用初始参考帧irf与前一参考帧prf两种参考策略,对每一帧的特征点集进行klt光流跟踪,分别得到第t帧相对于初始参考帧irf的位移测量值,以及第t帧相对于前一参考帧prf的位移测量值;

5、步骤s3,针对得到的每帧初始参考帧跟踪结果与前一参考帧跟踪结果,分别提取角点趋势、双向误差、有效特征点数量、光流大小、空间一致性指标共五种性能指标,构成对应跟踪结果的置信度特征向量;

6、步骤s4,将置信度特征向量输入预训练完成的xgboost回归模型,分别输出当前帧初始参考帧跟踪的预测误差与前一参考帧跟踪的预测误差;

7、步骤s5,以初始参考帧irf的位移测量值作为位移观测量,以前一参考帧prf的位移测量值计算得到的帧间速度作为速度观测量,以当前帧初始参考帧跟踪的预测误差作为位移观测的测量噪声幅值,以当前帧前一参考帧跟踪的预测误差作为速度观测的测量噪声幅值,基于两路测量噪声幅值构建时变测量噪声协方差矩阵,通过卡尔曼滤波对位移观测与速度观测进行自适应加权融合,输出当前帧的最优位移估计结果。

8、本发明作进一步改进,步骤s2中,klt光流跟踪通过最小化帧间像素强度差的平方和求解特征点位移,满足线性方程组:

9、

10、其中,为特征点的位移向量,和分别为和方向的光流大小;

11、

12、其中,为特征点周围的邻域窗口;为窗口内的像素坐标,为图像在方向的灰度梯度;为图像在方向的灰度梯度,为图像在时间灰度梯度;

13、第帧相对于irf的位移测量值满足:

14、

15、其中,为第帧中特征点的位置向量,为初始帧中特征点的位置向量,为第帧相对于初始帧的位移向量;

16、第帧相对于prf的位移测量值满足:

17、

18、其中,为第帧中特征点的位置向量,为第帧相对于前一帧的位移向量。

19、本发明作进一步改进,在步骤s4中,xgboost回归模型的目标函数为:

20、

21、其中,为损失函数,用于度量预测误差与真实误差的差异;为正则化项,t为决策树的叶子节点数,w为叶子权重向量,γ和λ为正则化系数。

22、本发明作进一步改进,步骤s5具体包括:

23、步骤s51,构建系统状态向量:,其中为第帧的位移向量,为第帧的速度向量;

24、状态转移方程满足:,其中状态转移矩阵,δt为帧间时间间隔,为过程噪声,服从零均值高斯分布,为过程噪声协方差矩阵;

25、步骤s52,构建测量向量:,其中为位移观测,为速度观测;

26、测量方程满足:,其中测量矩阵为单位矩阵为测量噪声,服从零均值高斯分布;

27、步骤s53,构建时变测量噪声协方差矩阵,以位移观测的测量噪声幅值的平方、速度观测的测量噪声幅值的平方作为对角元素,构建对角形式的时变测量噪声协方差矩阵:

28、

29、其中,为跟踪的预测误差,为跟踪的预测误差;

30、步骤s54,计算卡尔曼增益并更新状态,输出最优位移估计,卡尔曼增益满足:,其中为预测状态协方差矩阵;

31、状态更新满足:;

32、协方差更新满足:;

33、最终输出最优位移估计为。

34、本发明作进一步改进,还包括步骤s6:实时监测irf跟踪的预测误差,当预测误差大于预设误差阈值且持续帧数超过预设帧阈值时,触发参考帧重选;将当前帧设置为新的irf,同时计算重选前相对于旧irf的累积位移作为位移偏置,重选后的位移测量值叠加位移偏置,保证位移序列的连续性。

35、本发明作进一步改进,步骤s5中还设置有自适应更新速率调节步骤:计算光流大小的变化率,当变化率低于预设低振动阈值时,将卡尔曼滤波的更新频率降低至原帧率的1/3;当变化率高于预设高振动阈值时,保持全帧率进行滤波更新。

36、本发明作还公开了一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量系统,包括视频输入模块、双参考帧跟踪模块、性能指标提取模块、误差预测模块和时变卡尔曼滤波融合模块;

37、视频输入模块,用于获取待监测土木工程结构的视频序列,划定结构监测的roi,并在初始帧的roi内提取klt光流跟踪的初始特征点集;

38、双参考帧跟踪模块,以初始特征点集为共同跟踪基准,用于同时采用irf与prf两种参考策略,对每一帧的特征点集进行klt光流跟踪,分别输出irf位移测量值与prf位移测量值;

39、性能指标提取模块,针对双参考帧跟踪模块输出的每帧irf跟踪结果与prf跟踪结果,用于分别提取五种性能指标,构成对应跟踪结果的置信度特征向量;

40、误差预测模块,内置预训练完成的xgboost回归模型,用于根据置信度特征向量,分别输出当前帧irf跟踪的预测误差与prf跟踪的预测误差;

41、时变卡尔曼滤波融合模块,以irf位移测量值作为位移观测、以prf位移测量值计算得到的帧间速度作为速度观测,以irf跟踪的预测误差作为位移观测的测量噪声幅值、以prf跟踪的预测误差作为速度观测的测量噪声幅值,基于两路测量噪声幅值构建时变测量噪声协方差矩阵,用于通过卡尔曼滤波进行自适应加权融合,输出最优位移估计结果。

42、本发明作进一步改进,性能指标提取模块提取的满足:

43、

44、其中,为有效特征点数量,为第个特征点的位移向量,为所有特征点位移向量的均值。

45、本发明作进一步改进,还包括动态参考帧重选模块,用于实时监测irf跟踪的预测误差,当预测误差大于预设阈值且持续超过预设帧数时,将当前帧重置为新的irf,并继承此前的累积位移偏置。

46、本发明作进一步改进,时变卡尔曼滤波融合模块中还设置有自适应更新速率调节模块,用于根据光流大小的变化率判断结构振动状态,动态调整卡尔曼滤波的更新频率。

47、与现有技术相比,本发明的有益效果是:本发明提供一种基于双参考帧与时变卡尔曼滤波的视觉结构位移测量方法及系统,解决现有结构视觉位移测量方式,存在单参考帧klt累积漂移与大位移精度难以兼顾的问题。本发明与现有技术相比,具有以下有益效果:

48、(1)实现了累积误差与大位移精度的统一:本发明通过双参考帧并行跟踪与时变卡尔曼滤波自适应融合,首次在单一系统中同时克服了prf的累积误差问题和irf的大位移失效问题。仿真表明,本发明双参考klt的平均rmse为24.32像素,优于irf(28.64像素)和prf(24.75像素)。在实验室尺度验证中,本发明将prf从6.19像素的rmse降至0.40像素,精度提升超过93%,实现了长期监测稳定性与瞬时测量精度的统一。

49、(2)显著提升了异常检测的灵敏度与鲁棒性:本发明新增的空间一致性指标(sci)可在局部遮挡发生的3-5帧内从基准值跃升至2像素以上,响应速度显著快于传统双向误差指标。在模拟局部遮挡实验中,sci辅助的dr-klt将最大误差从6.19像素降至0.42像素,有效防止了异常值的扩散和污染。

50、(3)大幅提升了超长期监测的适应性:通过动态参考帧重选(drr)机制,本发明在跨季节、跨天气条件的超长期监测中能够自动重置参考帧。模拟跨季度光照变化实验(从夏季强光到冬季阴天)表明,传统irf方法的rmse从初始的0.5像素恶化至8.7像素,而本发明drr机制将rmse稳定控制在1.2像素以内,验证了其在极端环境变化下的鲁棒性。

51、(4)实现了计算效率的智能化优化:本发明的自适应更新速率调节机制根据结构振动状态动态调整滤波更新频率。在桥梁正常运营(低振动)时段,计算负载降低约40%;在地震或强风(高振动)时段自动切换至全帧率更新以保证精度。实测表明,在24小时连续监测中,该机制使总计算量降低约35%,显著延长了电池供电边缘设备的续航时间,提升了系统的工程实用性。