一体式结构光全自动空间注册方法、装置和设备与流程
本发明涉及到空间配准,特别是涉及到一种一体式结构光全自动空间注册方法、装置和设备。
背景技术:
1、在手术导航系统中,实现术前ct影像空间与术中对象实际空间的配准,是保证导航精度的基础环节。基于结构光扫描的表面配准方法,因具备非接触、采集速度快等优势,近年来在手术导航领域得到了较多关注。
2、当前,结构光设备与光学定位系统多采用分离式设计。以手持式结构光方案为例,结构光扫描设备上设有供光学定位系统识别的标记球,定位系统通过识别该标记球间接获取其与结构光设备之间的坐标转换关系。该方案在使用前需对结构光设备与光学定位工具之间的相对位姿进行标定。由于两者为独立组件,安装误差、标记球识别误差以及使用过程中的微小位移均会引入标定偏差,上述误差逐级累积,最终导致配准精度下降。手持操作时设备位姿持续变化,人为抖动亦影响扫描数据质量;分离组件间的通信延迟进一步制约了实时配准性能。
3、为减轻上述问题对配准精度的影响,已有工作在配准算法层面进行了多种优化。例如,有方案通过预训练的点云分割模型对结构光点云进行语义分割以提取有效配准区域,亦有方案通过处理ct图像提取皮肤轮廓后与结构光点云配准,还有方案利用实时结构光扫描获得点云并与术前影像配准。上述方法虽在配准流程上有所改进,但均基于分离式硬件架构,未涉及结构光模块与光学定位仪之间的机械连接方式,无法消除因间接转换引入的误差传递。此外,存在采用手持式扫描仪获取头部表面点云并基于解剖标记点进行配准的方案,其硬件架构与一体式设计存在本质区别。
4、可见,现有基于结构光的空间注册方法难以从根源上避免误差传递,且系统稳定性和自动化程度不足,亟需一种有效的解决方案。
技术实现思路
1、本发明提供一种一体式结构光全自动空间注册方法、装置和设备,旨在解决现有技术中结构光设备与光学定位系统多为分离式布局,存在误差传递,且系统稳定性和自动化程度不足的技术问题。
2、为了实现上述发明目的,本发明第一方面提出一种一体式结构光全自动空间注册方法,采用上述的一体式结构光设备,包括:
3、获取第一空间中的第一配准数据,所述配准数据包括第一特征点集和第一表面点云;
4、控制结构光扫描模块采集第二空间的第二配准数据,所述第二配准数据包括第二特征点集和第二表面点云;
5、获取所述结构光扫描模块与所述光学定位仪之间的预标定转换关系,根据所述预标定转换关系将所述第二配准数据转换至所述光学定位仪的坐标系下;
6、根据所述第一特征点集和转换后的所述第二特征点集进行初始配准,得到初始转换关系;
7、根据所述初始转换关系,以所述第一表面点云作为源点云、转换后的所述第二表面点云作为目标点云进行第二次配准,得到最终转换关系。
8、进一步地,所述预标定转换关系通过如下步骤获得:
9、获取所述结构光扫描模块采集的标定物点云,提取标定物上多个标记点在结构光空间中的第一坐标;
10、获取所述光学定位仪识别的所述标记点在定位仪空间中的第二坐标;
11、获取所述标记点在标定物空间中的理论坐标;
12、根据所述第一坐标与所述理论坐标进行配准,确定结构光空间至标定物空间的第一转换关系;
13、根据所述第二坐标与所述理论坐标进行配准,确定标定物空间至定位仪空间的第二转换关系;
14、根据所述第一转换关系和所述第二转换关系,确定所述预标定转换关系。
15、进一步地,所述提取标定物上多个标记点在结构光空间中的第一坐标,包括:
16、根据所述标定物点云的rgb值筛除非标记点数据;
17、采用聚类算法对剩余点云进行聚类,形成多个点簇;
18、对各所述点簇进行圆拟合,将圆心坐标作为所述第一坐标。
19、进一步地,所述根据所述第一坐标与所述理论坐标进行配准,包括:
20、对所述第一坐标与所述理论坐标进行标定初始配准,得到标定初始转换关系;
21、基于所述标定初始转换关系剔除所述标定物点云中的非标定物点云;
22、对剔除后的点云进行标定精配准,得到所述第一转换关系。
23、进一步地,所述获取第一空间中的第一配准数据,包括:
24、对待注册部位的ct影像进行分割,得到分割体数据;
25、从所述分割体数据中提取多个解剖特征点,构成所述第一特征点集;
26、对所述分割体数据进行二值化及形态学填充处理,提取外表面点,构成所述第一表面点云。
27、进一步地,所述控制所述结构光扫描模块采集第二空间的第二配准数据,包括:
28、控制所述结构光扫描模块同步采集第二空间的三维点云和二维彩色图像,对所述二维彩色图像进行人脸检测,输出人脸区域边界框;
29、在所述人脸区域内提取面部关键点的二维像素坐标;
30、根据所述结构光扫描模块的内外参,将所述二维像素坐标反投影至三维结构光空间,获得所述第二特征点集;
31、将所述人脸区域内的有效点云反投影至三维结构光空间,获得所述第二表面点云。
32、进一步地,根据所述第一特征点集和转换后的所述第二特征点集进行初始配准,得到初始转换关系,包括:
33、最小化所述第一特征点集与转换后的所述第二特征点集之间的欧式距离,求解旋转矩阵和平移矩阵,得到所述初始转换关系。
34、进一步地,所述以所述第一表面点云作为源点云、转换后的所述第二表面点云作为目标点云进行第二次配准,得到最终转换关系,包括:
35、根据所述初始转换关系对所述第一表面点云进行初始转换;
36、以转换后的所述第二表面点云为目标点云,采用点到面icp算法迭代优化,最小化所述第一表面点云中各点至所述第二表面点云中对应局部平面的距离,得到所述最终转换关系。
37、本发明第二方面提出一种一体式结构光全自动空间注册装置,用于实现上述任一项所述的一体式结构光全自动空间注册方法,包括:
38、第一获取单元,用于获取第一空间中的第一配准数据,所述配准数据包括第一特征点集和第一表面点云;
39、采集单元,用于控制结构光扫描模块采集第二空间的第二配准数据,所述第二配准数据包括第二特征点集和第二表面点云;
40、第二获取单元,用于获取所述结构光扫描模块与所述光学定位仪之间的预标定转换关系,根据所述预标定转换关系将所述第二配准数据转换至所述光学定位仪的坐标系下;
41、粗配准单元,用于根据所述第一特征点集和转换后的所述第二特征点集进行初始配准,得到初始转换关系;
42、精配准单元,用于根据所述初始转换关系,以所述第一表面点云作为源点云、转换后的所述第二表面点云作为目标点云进行第二次配准,得到最终转换关系。
43、本发明第三方面提出一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述任一项所述的一体式结构光全自动空间注册方法的步骤。
44、与现有技术相比,本发明具有以下有益效果:
45、传统分离式结构光方案中,光学定位工具制造精度、安装位置偏差及标记球识别误差逐级累积,导致坐标转换关系偏离真实值。本发明的结构光扫描模块与光学定位仪为一体式的,使两者之间相对位姿恒定,从根本上消除了上述误差传递环节。同时,预标定转换关系在设备出厂或安装时一次性精确求解,后续使用中直接调用即可,无需反复标定,进一步保证了坐标转换的稳定性。上述设计使得空间注册的整体精度得到显著提升,能够满足神经外科等对精度要求极高的手术场景。
46、手持式或分离式方案中,设备在操作过程中位姿持续变化,人为抖动直接影响点云采集质量,且分离组件之间的通信延迟亦对实时性造成不利影响。本发明采用一体式结构光设备,结构光扫描模块与光学定位仪通过刚性机械结构固连为一体,相对位置恒定,不受术中操作抖动的影响。该设计使得扫描数据质量保持稳定,且无需因组件间微小位移而频繁重新标定,系统的鲁棒性和可靠性均得到增强。
47、现有的基于结构光的空间注册方法中,点云预处理和特征点提取多依赖人工操作,自动化程度不足。本发明通过对ct影像进行分割处理以自动提取第一特征点集和第一表面点云,通过对实际空间中同步采集的三维点云和二维彩色图像进行人脸检测及关键点提取以自动确定第二特征点集和第二表面点云,整个流程无需人工选点或手动分割点云。上述处理手段配合初始配准与第二次配准的两阶段策略,实现了从数据获取到转换关系求解的全流程自动化,有效降低了操作复杂度和人为因素对配准结果的影响。
48、一体式结构光设备通过固定基座安装于手术台旁或手术灯架上,扫描过程中设备位置固定。结合结构光扫描模块不低于15帧/秒的扫描速度和自动化的配准流程,实际空间数据采集及后续配准计算的总时长显著缩短,有利于术中实时应用场景下的快速响应需求。
49、本发明基于表面点云和面部解剖特征点进行配准,无需在对象体内植入骨性标志点,也无需在体表粘贴额外标记物,避免了因标记点移位所引入的配准误差,同时也降低了对象的创伤风险和术前准备负担。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com