柔性植株三维摆动与泥沙平面运动场测量方法和装置

摘要: 本技术涉及环境水力学测量,尤其涉及一种柔性植株三维摆动与泥沙平面运动场测量方法和装置。背景技术:1、在河流、潮滩及近岸等自然水体中,水流驱动下的柔性植株会产生摆...
柔性植株三维摆动与泥沙平面运动场测量方法和装置

本技术涉及环境水力学测量 ,尤其涉及一种柔性植株三维摆动与泥沙平面运动场测量方法和装置。

背景技术:

1、在河流、潮滩及近岸等自然水体中,水流驱动下的柔性植株会产生摆动变形,同时床面泥沙在水流作用下发生启动与运移。准确量化柔性植株的三维摆动轨迹以及泥沙的推移质运动场,是研究生态固滩、植被倒伏机理及局部冲淤规律的基础。

2、目前,对于柔性植被的三维摆动轨迹测量,传统方法采用双目或多目立体视觉系统重构其空间坐标,以测量其三维摆动轨迹。对于床面泥沙的推移质运动场测量,则需另行搭建独立的平面图像分析系统,捕捉泥沙颗粒的二维运动,以测量泥沙的推移质运动场。上述两套系统相互独立,各自完成数据测量后,再在后期通过软件进行时间对齐与数据融合。

3、然而,由于多套独立系统之间存在硬件时钟同步误差,无法实现植株三维摆动数据与泥沙运动数据的时空同步测量。

技术实现思路

1、本技术提供一种柔性植株三维摆动与泥沙平面运动场测量方法和装置,可以实现植株三维摆动数据与泥沙运动数据的时空同步测量,从而提高了测量结果的准确度。

2、本技术提供一种柔性植株三维摆动与泥沙平面运动场测量方法,包括:

3、获取通过设置于水槽上方的单目俯视相机采集的时序视频图像,所述时序视频图像包括柔性植株和水槽床面上的泥沙颗粒,所述柔性植株由多个圆形小球通过柔性连接件串联形成小球串,且所述柔性连接件的根部固定于所述水槽床面;

4、对所述时序视频图像逐帧进行小球识别,获取所述多个圆形小球在各帧图像中的像素坐标;

5、基于所述多个圆形小球的像素坐标、小孔成像模型以及相邻小球之间的刚性连杆长度约束,从所述根部向自由端逐点递推解算所述多个圆形小球的三维空间坐标,得到所述柔性植株的三维摆动数据;

6、对所述时序视频图像中的泥沙颗粒进行识别与跨帧追踪,并基于相邻帧之间泥沙颗粒的像素位移,得到存在遮挡缺陷区域的泥沙平面运动场;

7、基于所述多个圆形小球的像素坐标确定所述遮挡缺陷区域,并根据所述泥沙平面运动场中所述遮挡缺陷区域周边的泥沙颗粒运动信息,对所述泥沙平面运动场中的所述遮挡缺陷区域进行插值修复,得到补偿后的泥沙平面运动场;并结合相邻帧中的泥沙颗粒运动信息,对所述补偿后的泥沙平面运动场进行时间序列平滑或多帧联合插值,得到目标泥沙平面运动场;

8、同步输出所述柔性植株的三维摆动数据与所述目标泥沙平面运动场。

9、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述单目俯视相机的拍摄方向朝向所述水槽床面,且在采集所述时序视频图像之前,对所述单目俯视相机进行标定,获得相机内参、相机外参以及像素坐标与水槽床面物理坐标之间的映射关系。

10、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述对所述时序视频图像逐帧进行小球识别,获取所述多个圆形小球在各帧图像中的像素坐标,包括:

11、利用颜色阈值分割、灰度阈值分割或自适应阈值分割从所述时序视频图像中提取所述圆形小球的候选区域;

12、对所述候选区域进行圆形识别或连通域分析,提取各所述圆形小球的二维像素质心坐标;

13、按照所述圆形小球在所述小球串中的连接顺序,对各所述圆形小球的二维像素质心坐标进行编号,得到各所述圆形小球的像素坐标序列。

14、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述柔性连接件在流场作用下处于拉伸状态,并将相邻圆形小球之间的柔性连接件等效为长度不变的刚性连杆。

15、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述基于所述多个圆形小球的像素坐标、小孔成像模型以及相邻小球之间的刚性连杆长度约束,从所述根部向自由端逐点递推解算所述多个圆形小球的三维空间坐标,得到所述柔性植株的三维摆动数据,包括:

16、以固定于所述水槽床面的根部小球作为已知起始节点;

17、根据小孔成像模型,将当前圆形小球的像素坐标转换为包含深度未知量的三维相机坐标表达式;

18、将所述三维相机坐标表达式代入所述当前圆形小球与前一已知圆形小球之间的刚性连杆长度约束方程,建立关于所述当前圆形小球深度值的一元二次方程;

19、求解所述一元二次方程,确定所述当前圆形小球的目标深度值;

20、根据所述目标深度值计算所述当前圆形小球的三维空间坐标,并由所述根部向自由端逐点递推,得到所述多个圆形小球的三维空间坐标序列,所述三维空间坐标序列构成所述柔性植株的三维摆动数据。

21、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述求解所述一元二次方程,确定所述当前圆形小球的目标深度值,包括:

22、求解所述一元二次方程得到两个候选深度值;

23、当仅有一个候选深度值满足所述柔性植株面向顺流侧摆动的先验条件时,将该候选深度值确定为所述目标深度值;

24、当两个候选深度值均满足所述先验条件时,结合前一帧中所述当前圆形小球的历史深度值,选取时序连续性更优的候选深度值作为所述目标深度值。

25、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述刚性连杆长度约束方程中的连杆长度参数通过如下方式修正:

26、获取所述柔性植株在至少一种流速条件下的三维摆动轨迹真值;

27、将所述三维摆动轨迹真值与基于初始连杆长度参数递推解算得到的三维摆动轨迹进行对比,确定各所述圆形小球的空间误差;

28、基于所述空间误差确定对应连杆的弯曲修正系数;

29、利用所述弯曲修正系数对所述初始连杆长度参数进行补偿,得到修正后的连杆长度参数。

30、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述对所述时序视频图像中的泥沙颗粒进行识别与跨帧追踪,包括:

31、对所述时序视频图像中的床面区域进行背景分离或图像增强,提取泥沙颗粒候选目标;

32、获取所述泥沙颗粒候选目标在各帧图像中的像素质心坐标;

33、基于相邻帧中泥沙颗粒的像素位置、运动连续性和最大位移约束,对所述泥沙颗粒进行跨帧匹配。

34、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述基于相邻帧之间泥沙颗粒的像素位移,得到存在遮挡缺陷区域的泥沙平面运动场,包括:

35、根据相邻帧中同一泥沙颗粒的像素坐标差值,确定所述泥沙颗粒的像素位移;

36、根据像素坐标与水槽床面物理坐标之间的映射关系,将所述像素位移转换为床面平面内的实际位移或速度;

37、汇总多个泥沙颗粒的实际位移或速度,形成泥沙平面运动场。

38、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述基于所述多个圆形小球的像素坐标确定所述遮挡缺陷区域,包括:

39、根据各帧图像中所述多个圆形小球的像素坐标和预设半径生成动态遮挡掩膜;

40、将所述动态遮挡掩膜覆盖的床面区域确定为所述泥沙平面运动场中的遮挡缺陷区域。

41、根据本技术提供的一种柔性植株三维摆动与泥沙平面运动场测量方法,所述对所述泥沙平面运动场中的所述遮挡缺陷区域进行插值修复,得到补偿后的泥沙平面运动场,包括:

42、提取所述遮挡缺陷区域周边未被遮挡的泥沙颗粒运动轨迹或运动矢量;

43、基于所述泥沙颗粒运动轨迹或运动矢量,对所述遮挡缺陷区域进行空间插值,得到补偿后的泥沙平面运动场。

44、本技术还提供一种柔性植株三维摆动与泥沙平面运动场测量装置,包括:

45、图像获取单元,用于获取通过设置于水槽上方的单目俯视相机采集的时序视频图像,所述时序视频图像包括柔性植株和水槽床面上的泥沙颗粒,所述柔性植株由多个圆形小球通过柔性连接件串联形成小球串,且所述柔性连接件的根部固定于所述水槽床面;

46、小球识别单元,用于对所述时序视频图像逐帧进行小球识别,获取所述多个圆形小球在各帧图像中的像素坐标;

47、三维解算单元,用于基于所述多个圆形小球的像素坐标、小孔成像模型以及相邻小球之间的刚性连杆长度约束,从所述根部向自由端逐点递推解算所述多个圆形小球的三维空间坐标,得到所述柔性植株的三维摆动数据;

48、泥沙追踪单元,用于对所述时序视频图像中的泥沙颗粒进行识别与跨帧追踪,并基于相邻帧之间泥沙颗粒的像素位移,得到存在遮挡缺陷区域的泥沙平面运动场;

49、缺陷修复单元,用于基于所述多个圆形小球的像素坐标确定所述遮挡缺陷区域,并根据所述泥沙平面运动场中所述遮挡缺陷区域周边的泥沙颗粒运动信息,对所述泥沙平面运动场中的所述遮挡缺陷区域进行插值修复,得到补偿后的泥沙平面运动场;并结合相邻帧中的泥沙颗粒运动信息,对所述补偿后的泥沙平面运动场进行时间序列平滑或多帧联合插值,得到目标泥沙平面运动场;

50、输出单元,同步输出所述柔性植株的三维摆动数据与所述目标泥沙平面运动场。

51、本技术还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述任一种所述的柔性植株三维摆动与泥沙平面运动场测量方法。

52、本技术还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述的柔性植株三维摆动与泥沙平面运动场测量方法。

53、本技术还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述的柔性植株三维摆动与泥沙平面运动场测量方法。

54、本技术提供的柔性植株三维摆动与泥沙平面运动场测量方法和装置,获取通过设置于水槽上方的单目俯视相机采集的时序视频图像,时序视频图像包括柔性植株和水槽床面上的泥沙颗粒,柔性植株由多个圆形小球通过柔性连接件串联形成小球串,且柔性连接件的根部固定于水槽床面;对时序视频图像逐帧进行小球识别,获取多个圆形小球在各帧图像中的像素坐标;基于多个圆形小球的像素坐标、小孔成像模型以及相邻小球之间的刚性连杆长度约束,从根部向自由端逐点递推解算多个圆形小球的三维空间坐标,得到柔性植株的三维摆动数据;对时序视频图像中的泥沙颗粒进行识别与跨帧追踪,并基于相邻帧之间泥沙颗粒的像素位移,得到存在遮挡缺陷区域的泥沙平面运动场;基于多个圆形小球的像素坐标确定遮挡缺陷区域,并根据泥沙平面运动场中遮挡缺陷区域周边的泥沙颗粒运动信息,对泥沙平面运动场中的遮挡缺陷区域进行插值修复,得到补偿后的泥沙平面运动场;并结合相邻帧中的泥沙颗粒运动信息,对补偿后的泥沙平面运动场进行时间序列平滑或多帧联合插值,得到目标泥沙平面运动场;同步输出柔性植株的三维摆动数据与目标泥沙平面运动场。这样通过单目俯视相机同时采集包含柔性植株和水槽床面泥沙颗粒的时序视频图像,并从同一组时序视频图像中分别提取植株的三维摆动数据和泥沙平面运动场,从根本上避免了多套独立系统之间硬件时钟不同步的问题,实现了植株三维摆动数据与泥沙运动数据的时空同步测量,同时通过对柔性植株遮挡的数据缺失区域进行数据补偿,有效消除了柔性植株摆动对泥沙运动场测量的干扰,从而进一步提高了测量结果的准确度。