基于一体式结构光的全自动标定方法、系统、设备和介质与流程

摘要: 本发明涉及到计算机辅助外科手术导航及三维视觉测量,特别涉及到一种基于一体式结构光的全自动标定方法、系统、设备和介质。背景技术:1、在神经外科手术导航系统中,结构...
基于一体式结构光的全自动标定方法、系统、设备和介质与流程

本发明涉及到计算机辅助外科手术导航及三维视觉测量,特别涉及到一种基于一体式结构光的全自动标定方法、系统、设备和介质。

背景技术:

1、在神经外科手术导航系统中,结构光三维重建系统与光学定位系统的协同工作已经得到了广泛应用。结构光系统用于获取术区表面的三维点云数据,光学定位系统则负责跟踪手术工具的空间位姿。为实现两个系统的协同工作,需要建立结构光坐标系与光学定位系统坐标系之间的空间转换关系,这一过程即为系统标定。

2、现有技术中,标定过程通常借助一个标定板来完成。具体而言,结构光系统采集标定板表面的点云数据,光学定位系统则获取标定板上标记点的空间坐标。在此基础上,分别求解标定板坐标系到结构光坐标系的转换关系,以及标定板坐标系到光学定位系统坐标系的转换关系,再将两个转换关系进行组合,最终得到结构光坐标系与光学定位系统坐标系之间的转换矩阵。

3、然而,在实际应用中,上述标定方式存在以下不足:

4、第一,标定精度高度依赖于结构光点云的质量。结构光系统采集到的标定板表面点云容易受到标定板表面反射特性、环境光干扰以及系统固有噪声等因素的影响,点云质量的波动会直接传递到后续的坐标转换求解过程中。

5、第二,误差在坐标变换过程中逐级累积。现有方法采用“点云对点云”或“点云对模型”的配准策略,需要经过多个中间坐标系的转换,每一次转换都会引入一定的误差,最终导致系统整体标定精度下降。

6、第三,配准算法的鲁棒性不足。点云配准算法本身计算复杂度较高,且对初始值较为敏感,在不同光照条件或不同标定板姿态下,标定结果的重复性难以保证。

7、上述问题在神经外科手术导航的临床应用场景中尤为突出。神经外科手术对空间定位精度通常要求达到亚毫米级别,而现有标定方法在精度和稳定性方面的局限性,已难以满足日益增长的临床需求。

技术实现思路

1、本发明提供一种基于一体式结构光的全自动标定方法、系统、设备和介质,旨在解决现有结构光系统与光学定位系统联合标定方法中,因依赖结构光点云配准而导致标定精度易受点云质量波动影响、误差在逐级坐标变换中累积、以及标定过程鲁棒性不足的技术问题。

2、为了实现上述发明目的,本发明第一方面提出一种基于一体式结构光的全自动标定方法,应用于包含结构光系统、光学定位系统以及标定板的标定系统,所述标定板上布置有n个标记点,n≥3,包括以下步骤:

3、通过所述结构光系统中的至少两个相机同步拍摄所述标定板的图像,提取各所述标记点在各个所述图像中的像素坐标;

4、根据各所述相机预先标定的内参和外参,基于各所述标记点在所述图像中的像素坐标,计算各所述标记点在所述结构光系统坐标系下的三维坐标,得到第一三维点集;

5、通过所述光学定位系统获取所述标定板上各所述标记点在所述光学定位系统坐标系下的三维坐标,得到第二三维点集;

6、将所述第一三维点集与所述第二三维点集中的各点进行一一对应,利用刚体变换求解算法计算所述结构光系统坐标系到所述光学定位系统坐标系的旋转矩阵和平移向量,完成联合标定。

7、进一步地,所述计算各所述标记点在所述结构光系统坐标系下的三维坐标,包括:

8、基于多目立体视觉的三角测量原理,将每一所述标记点在各个所述相机获取的图像中的像素坐标,分别代入各自对应相机预先标定的投影模型中,联立多个投影方程并求解,得到该标记点的三维坐标。

9、进一步地,所述利用刚体变换求解算法计算所述结构光系统坐标系到所述光学定位系统坐标系的旋转矩阵和平移向量,包括:

10、分别计算所述第一三维点集和所述第二三维点集的质心,将两组点集分别减去各自的质心进行去中心化处理;

11、根据去中心化后的两组点集构建协方差矩阵,对所述协方差矩阵进行奇异值分解,根据分解结果计算所述旋转矩阵,并对所述旋转矩阵进行行列式校验以确保其为有效旋转矩阵;

12、根据所述旋转矩阵和两组质心的差值计算所述平移向量。

13、进一步地,所述标记点为红外标记点,所述相机为具有红外采集功能的红外相机。

14、进一步地,所述红外标记点为反光球标记点或主动发光的红外led标记点。

15、进一步地,所述提取各所述标记点在各个所述图像中的像素坐标,包括:

16、通过阈值分割和连通域提取方法从所述图像中提取各标记点的成像斑点,采用加权平均法或圆拟合法计算各成像斑点的中心坐标,作为各标记点的像素坐标。

17、进一步地,所述n个标记点在所述标定板上呈非共线分布。

18、本发明第二方面提出一种基于一体式结构光的全自动标定系统,包括:

19、结构光系统,包括结构光投射器和至少两个相机,所述相机用于采集标定板的图像;其中,所述结构光系统中的至少两个相机与所述结构光投射器以刚性一体化方式固定连接,且所述至少两个相机已完成立体标定,其内参和外参为已知量;

20、光学定位系统,用于获取所述标定板上各标记点在光学定位系统坐标系下的三维坐标;

21、标定板,其上布置有n个标记点,n≥3;

22、数据处理单元,与所述结构光系统和所述光学定位系统通信连接,用于执行上述任一项所述的基于一体式结构光的全自动标定方法。

23、本发明第三方面提出一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器执行所述计算机程序时实现上述任一项所述的基于一体式结构光的全自动标定方法的步骤。

24、本发明第四方面提出一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述任一项所述的基于一体式结构光的全自动标定方法的步骤

25、与现有技术相比,本发明具有以下有益效果:

26、本发明的标定方法采用标定板上的标记点作为统一标定基元,在结构光系统和光学定位系统中分别获取同一组标记点的三维坐标,由于两组点集天然对应,无需再借助点云配准算法来建立点对关系。这一点与现有技术中通过点云配准获取坐标转换的方式存在本质区别。点云配准本身是一个迭代优化过程,其精度受初始值影响较大,且容易陷入局部最优,本发明从根本上绕开了这一问题。同时,由于不再需要经过标定板坐标系这一中间环节,避免了多个坐标变换步骤之间的误差传递和累积。

27、进一步地,由于本发明不再依赖结构光系统采集标定板表面的点云数据,标定板的表面材质、环境光照以及结构光系统自身的噪声等因素均不会对标定结果产生影响。在实际使用中,即便结构光点云质量出现波动,标定精度依然能够保持稳定,标定的重复性相比传统方法有明显提升。

28、本发明的标定流程涉及图像采集、三维坐标计算和刚体变换求解,中间不需要进行点云的预处理、特征提取或迭代配准,计算量较小,能够在较短时间内完成标定,适合在临床场景中作为常规操作使用。

29、本发明标定精度能够稳定达到亚毫米级,可满足神经外科手术导航系统对空间定位精度的要求。

30、此外,本发明的标定过程由数据处理单元自动执行,各个步骤之间无需人工干预。操作人员只需将标定板放置在两个系统的共同视野内并启动标定程序,系统即可自动完成全部标定流程并输出结果,降低了临床使用的操作门槛,也避免了人为操作引入的误差。