结构面产状测量方法及系统与流程
本发明涉及工程地质与三维测量,具体涉及一种结构面产状测量方法及系统。
背景技术:
1、结构面是岩体中节理、层理、断层面等地质界面的总称,其产状由走向、倾向和倾角表征,是岩体质量分级与边坡稳定性分析的基础参数。
2、结构面产状长期依靠地质罗盘现场量测,需人员抵达目标位置并将罗盘紧贴结构面读数,属接触式测量;在高陡边坡、危岩体与采空区顶板等部位人员难以到达,且面临落石与坍塌风险。三维激光扫描、摄影测量与无人机倾斜摄影可非接触获取三维数据,但设备成本高、外业流程繁琐、内业后处理依赖专业软件,难以现场即时给出结果。
3、专利cn109738440b在岩面布设水平标靶并以手机电子罗盘量测其产状,再由含标靶的多幅照片生成点云并完成定向;专利cn108830317b以罗盘量测一块平滑结构面的产状作为方位基准,另立标杆恢复尺度。二者的定向均依赖人工布设物与罗盘的接触量测,人员无法抵达时布设本身即不可行。专利cn118152714a仅由手机加速度计与磁力计解算产状,手机需贴合被测面;专利cn116758133b以全站仪等量测三个不共线点求解产状,需专业仪器进场设站;均不能非接触快速普查。
4、近年发展的前馈式三维重建模型可由单张图像经一次前向推理直接输出稠密三维几何信息,无需影像匹配与光束法平差,但其输出点云的大地朝向未知且缺乏绝对物理尺度,通常被认为难以直接用于工程测量,尚未见用于结构面产状获取。
5、综上所述,现有技术存在以下缺点:
6、(1)地质罗盘量测需接触目标结构面,人员难以到达且存在安全风险;
7、(2)三维激光扫描、摄影测量与无人机倾斜摄影需专用设备,成本高、后处理复杂,难以现场实时测量;
8、(3)已有手机影像方案需布设标靶或标杆并以罗盘接触量测参考面产状,非接触性未覆盖全部流程;
9、(4)前馈式三维重建模型输出的点云朝向未知,无法直接解算具有地理参考意义的产状;
10、(5)工程现场钢拱架、锚杆等磁干扰源普遍存在,仅依赖磁传感器解算的航向存在偏差,且缺乏对数据质量的前置判别与对航向偏差的校正手段。
技术实现思路
1、有鉴于此,本发明提供一种结构面产状测量方法及系统,用以解决现有技术中存在的下列问题:接触式量测受限于人员可达性与作业安全;三维激光扫描与摄影测量依赖专用设备且后处理繁琐,难以现场即时获取产状;基于智能手机的影像方案仍需布设标靶并接触量测参考面,未能实现全部作业流程的非接触;前馈式三维重建模型输出点云的大地空间朝向与绝对物理尺度均未知,无法直接解算具有地理参考意义的角度量;磁干扰环境下缺乏对采集数据质量的事前判别与对航向偏差的校正手段。
2、为解决上述技术问题,本发明一方面提供一种结构面产状测量方法,包括:以移动终端拍摄包含目标结构面的单张图像,并在拍摄时刻同步采集所述移动终端的加速度数据与磁场数据;将所述单张图像输入前馈式三维重建模型,推理输出位于图像坐标系的三维点云,所述三维点云的绝对物理尺度未知;按照所述图像坐标系与所述移动终端的设备坐标系之间的映射关系,将所述三维点云变换至所述设备坐标系,所述映射关系为与拍摄所述单张图像时所述移动终端的持机朝向相对应的正交映射矩阵,该正交映射矩阵表示所述图像坐标系的坐标轴与所述设备坐标系的坐标轴之间的对应关系;由所述加速度数据得到重力向量,由所述磁场数据得到地磁向量,并仅由所述重力向量与所述地磁向量构造所述设备坐标系至世界坐标系的旋转矩阵,所述世界坐标系以东向、北向和天向为坐标轴;以所述旋转矩阵对位于所述设备坐标系的所述三维点云施加旋转变换,得到位于所述世界坐标系的三维点云;从位于所述世界坐标系的所述三维点云中提取所述目标结构面的点集,对所述点集进行平面拟合得到平面法向量,并由所述平面法向量计算所述目标结构面的产状,所述产状包括走向、倾向和倾角中的至少一项;其中,全程不对所述三维点云进行绝对物理尺度恢复。
3、本发明所称前馈式三维重建模型,是指以单张图像为唯一影像输入、经一次前向推理即直接输出场景稠密三维几何量的神经网络模型,其推理过程不包含影像特征匹配、光束法平差或多视立体匹配等迭代优化环节。按输出形态,此类模型分为两条实施路线:其一为逐像素三维点图回归,模型直接为图像中每一个像素回归一个三维坐标,输出即为与像素一一对应的三维点云;其二为稠密深度图回归,模型为每一个像素回归一个深度值,再按相机内参将深度图反投影为三维点云,此路线还可进一步同时回归表面法向量。上述两条路线的模型均可用于本发明。
4、本发明所称绝对物理尺度未知,是指所述三维点云各点坐标的量纲与真实世界的长度单位之间不存在已知的确定比例关系,即点云在整体上可相差一个未知的正实数倍。本发明不对该比例关系进行求解,也不借助任何已知尺寸的参照物、基线或测距手段予以恢复。其原因在于:结构面产状由走向、倾向与倾角三个角度量表征,而角度量在点云整体作等比例缩放时保持不变,即具有尺度不变性;平面拟合所得法向量的方向亦不因等比例缩放而改变。因此,在本发明的应用场景下,绝对物理尺度的缺失不影响产状的解算结果,且省去了尺度恢复所需的参照物布设与相应计算。
5、本发明所称世界坐标系,其x轴指向正东,y轴指向正北,z轴竖直向上,即东北天坐标系。本发明所称方位角,一律自北向起顺时针度量为正,取值归化至不小于0度且小于360度的范围。
6、优选地,所述前馈式三维重建模型为由单张图像经一次前向推理直接回归逐像素三维点图的神经网络模型,或者为由单张图像经一次前向推理直接回归稠密深度图、并按相机内参将所述稠密深度图反投影为三维点云的神经网络模型;所述前馈式三维重建模型在输出所述三维点云的同时输出所述三维点云中各点的置信度,并剔除所述三维点云中置信度低于设定置信度阈值的点。
7、优选地,所述映射关系按下述方式确定:以所述加速度数据在所述移动终端的屏幕平面内的分量作为重力投影,计算所述重力投影相对于所述屏幕平面内设定基准方向的旋转角,并按所述旋转角所属的角度区间,从与所述移动终端的多种持机朝向一一对应的多组映射矩阵中选取一组作为所述映射关系;所述旋转矩阵按下述方式构造:以所述重力向量与所述地磁向量的叉乘之积并单位化作为东向量,以所述东向量与所述重力向量的叉乘之积并单位化作为位于水平面内的北向量,以所述重力向量的反向向量作为天向量,并由所述东向量、所述北向量和所述天向量构成所述旋转矩阵。
8、优选地,在推理输出所述三维点云之前还包括传感器可信度评价:以所述磁场数据的模值超出拍摄地参考地磁强度区间的量作为磁场偏离量,所述模值落入该区间内时所述磁场偏离量为零,以1减去所述磁场偏离量与设定磁场偏离容限的比值作为磁场可信度,且该比值大于1时所述磁场可信度取零;以所述加速度数据的模值与重力加速度之差的绝对值作为加速度偏离量,以1减去所述加速度偏离量与设定加速度偏离容限的比值作为加速度可信度,且该比值大于1时所述加速度可信度取零;对所述移动终端在拍摄前连续采集的多个姿态旋转矩阵求平均旋转矩阵,以各姿态旋转矩阵相对于所述平均旋转矩阵的相对旋转矩阵作为姿态偏差矩阵,以各所述姿态偏差矩阵与单位矩阵之间的矩阵距离的均值作为姿态离散量,以1减去所述姿态离散量与设定的最大允许姿态变化量的比值作为姿态稳定性可信度,且该比值大于1时所述姿态稳定性可信度取零;以三个权重分别对所述磁场可信度、所述加速度可信度与所述姿态稳定性可信度加权求和得到综合可信度,所述三个权重之和为1;当所述综合可信度低于设定的最低可信度阈值时,输出重新采集提示并中止后续步骤。
9、优选地,在得到位于所述世界坐标系的所述三维点云之后、提取所述目标结构面的点集之前,还包括方位校正:对所述单张图像执行语义识别,得到空间姿态已知的场景对象所对应的像素掩膜;按照所述前馈式三维重建模型所建立的像素与三维点之间的对应关系,将所述像素掩膜映射为位于所述世界坐标系的参考点集;对所述参考点集进行平面拟合得到参考平面法向量;依据所述参考平面法向量与所述场景对象的已知空间姿态之间的偏差构造校正旋转矩阵,并以所述校正旋转矩阵对位于所述世界坐标系的所述三维点云施加二次旋转变换,以经所述二次旋转变换后的三维点云替代位于所述世界坐标系的所述三维点云;其中,所述场景对象包括语义识别结果为水平面的对象和语义识别结果为垂直面的对象中的至少一者,所述水平面的对象的已知空间姿态为其法向量沿竖直方向,所述垂直面的对象的已知空间姿态为其法向量在所述世界坐标系中具有已知的方位角,该已知的方位角记为真方位角。
10、优选地,所述场景对象包括语义识别结果为水平面的对象时,由所述水平面的对象得到的校正旋转矩阵为倾斜校正矩阵,所述倾斜校正矩阵以所述水平面的对象所对应的参考平面法向量与天向单位向量的叉乘之积并单位化作为旋转轴、以所述参考平面法向量与所述天向单位向量之间的夹角作为旋转角构造,且所述倾斜校正矩阵仅改变俯仰分量和横滚分量而不改变航向分量;所述场景对象包括语义识别结果为垂直面的对象时,由所述垂直面的对象得到的校正旋转矩阵为航向校正矩阵:以所述垂直面的对象所对应的参考平面法向量在水平面内的投影的方位角作为实测方位角,以所述真方位角与所述实测方位角之差作为航向偏差,所述航向校正矩阵为绕天向轴旋转所述航向偏差的旋转矩阵,且所述航向校正矩阵仅改变航向分量而不改变俯仰分量和横滚分量;同时,以所述磁场数据的模值超出拍摄地参考地磁强度区间的量作为磁场偏离量,所述模值落入该区间内时所述磁场偏离量为零,以1减去所述磁场偏离量与设定磁场偏离容限的比值作为磁场可信度,且该比值大于1时所述磁场可信度取零,由所述磁场可信度确定融合权重:所述磁场可信度不高于设定的磁场可信度下限阈值时,所述融合权重取零;所述磁场可信度不低于设定的磁场可信度上限阈值时,所述融合权重取1;所述磁场可信度介于所述下限阈值与所述上限阈值之间时,以所述磁场可信度与所述下限阈值之差同所述上限阈值与所述下限阈值之差的比值作为所述融合权重;以所述融合权重对所述实测方位角赋权、以1与所述融合权重之差对所述真方位角赋权,对二者加权求和得到融合方位角,并以所述融合方位角与所述实测方位角之差替代所述航向偏差构造所述航向校正矩阵;当所述水平面的对象与所述垂直面的对象均被识别时,所述校正旋转矩阵为所述航向校正矩阵与所述倾斜校正矩阵之积,且所述倾斜校正矩阵先于所述航向校正矩阵作用于所述三维点云。
11、优选地,提取所述目标结构面的点集包括:接收作用于所述单张图像上所述目标结构面所在区域的点选操作,以该点选操作所对应的三维点作为种子点;以所述三维点云中各点的邻域点集所拟合平面的法向量作为该点的局部法向量,以所述单张图像中与该点相对应的像素的颜色作为该点的颜色向量;以所述种子点为起点执行区域生长,将局部法向量与所述种子点的局部法向量之间的夹角小于设定法向夹角阈值、且颜色向量与所述种子点的颜色向量之间的夹角小于设定颜色夹角阈值的邻域点并入所述点集;计算所述产状包括:以所述平面法向量的天向分量的绝对值与所述平面法向量的模的比值的反余弦作为所述倾角,以所述平面法向量与所述平面法向量的反向向量中天向分量为负者作为下法向量,以所述下法向量的东向分量为第一自变量、北向分量为第二自变量作四象限反正切并归化至不小于0度且小于360度的范围作为所述倾向,以所述倾向减去90度并归化至不小于0度且小于180度的范围作为所述走向。
12、本发明另一方面还提供一种结构面产状测量系统,包括图像采集模块、三维重建模块、坐标映射模块、姿态解算模块、点云定向模块、结构面提取模块与产状计算模块。
13、所述图像采集模块用于以移动终端拍摄包含目标结构面的单张图像,并在拍摄时刻同步采集所述移动终端的加速度数据与磁场数据;
14、所述三维重建模块用于将所述单张图像输入前馈式三维重建模型,推理输出位于图像坐标系的三维点云,所述三维点云的绝对物理尺度未知;
15、所述坐标映射模块用于按照所述图像坐标系与所述移动终端的设备坐标系之间的映射关系,将所述三维点云变换至所述设备坐标系,所述映射关系为与拍摄所述单张图像时所述移动终端的持机朝向相对应的正交映射矩阵,该正交映射矩阵表示所述图像坐标系的坐标轴与所述设备坐标系的坐标轴之间的对应关系;
16、所述姿态解算模块用于由所述加速度数据得到重力向量,由所述磁场数据得到地磁向量,并仅由所述重力向量与所述地磁向量构造所述设备坐标系至世界坐标系的旋转矩阵,所述世界坐标系以东向、北向和天向为坐标轴;
17、所述点云定向模块用于以所述旋转矩阵对位于所述设备坐标系的所述三维点云施加旋转变换,得到位于所述世界坐标系的三维点云;所述结构面提取模块用于从位于所述世界坐标系的所述三维点云中提取所述目标结构面的点集,并对所述点集进行平面拟合得到平面法向量;
18、所述产状计算模块用于由所述平面法向量计算所述目标结构面的产状,所述产状包括走向、倾向和倾角中的至少一项;其中,全程不对所述三维点云进行绝对物理尺度恢复。
19、本发明还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述结构面产状测量方法。所述计算机可读存储介质包括只读存储器、随机存取存储器、闪存、磁盘或光盘。
20、本发明还提供一种电子设备,包括摄像头、加速度传感器、磁传感器、处理器和存储器,所述存储器上存储有计算机程序,所述计算机程序被所述处理器执行时实现上述结构面产状测量方法,且所述电子设备构成所述结构面产状测量方法中的所述移动终端。所述电子设备为智能手机或平板计算机。
21、相比现有技术,本发明具有如下有益效果:
22、1、本发明将前馈式三维重建模型与移动终端内置的加速度传感器、磁传感器结合,使结构面产状的获取在全部作业流程中均无需接触目标结构面,并可在现场直接得到结果。与需人员抵近并将罗盘贴合结构面的传统量测方式相比,本发明不要求人员进入高陡边坡、危岩体、隧洞拱顶与采空区顶板等部位,减少了临空作业的安全风险。与三维激光扫描、摄影测量以及现有手机影像方案相比,本发明不需专用设备,不需在岩面布设标靶或标杆,不需以外部实测基准完成空间定向,也不需影像匹配、光束法平差或多视立体匹配等后处理环节;仅由移动终端拍摄的单张图像与同步采集的传感器数据,经一次前向推理即可完成自影像采集至产状输出的全部计算,作业方式简化为单人单次拍摄,设备购置与运维成本、外业采集与内业处理所需时间均相应降低,便于工程现场的快速普查。
23、2、本发明利用产状作为角度量在三维点云等比例缩放下保持不变这一性质,全程不对前馈式三维重建模型输出的点云进行绝对物理尺度恢复,在不引入参照物的前提下仍能正确计算平面法向量的方向,此类模型缺乏绝对物理尺度的限制因而不影响产状的解算,同时省去了尺度恢复所需的作业环节。本发明还在姿态解算之前对磁场、加速度与姿态稳定性三项分别评价并加权得到综合可信度,据以判别本次采集数据是否可用并在必要时提示重新采集,避免粗差数据进入后续解算。针对工程现场钢拱架、锚杆与含磁性矿物岩体等磁干扰源,本发明以语义识别所得的水平面对象修正俯仰分量与横滚分量,以垂直面对象的真方位角和实测方位角按磁场可信度加权融合后修正航向分量,减小了磁干扰环境下航向解算的偏差,使所得产状在该类场地仍能与大地坐标系保持一致。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com