将医学图像配准到圆环-圆弧组件的方法与流程

将医学图像配准到圆环
‑
圆弧组件的方法
1.相关申请的交叉引用
2.本技术是2019年3月22日提交的第16/361，863号美国专利申请的部分继续申请，其中的每一个申请的全部内容出于所有目的特此以引用的方式并入本文中。
技术领域
3.本公开涉及医疗装置和系统，且更具体地涉及神经导航配准和机器人轨迹引导系统及相关方法和装置。


背景技术：

4.用于机器人辅助手术的位置辨识系统用于以三维(3d)方式确定特定对象的位置且跟踪特定对象。例如，在机器人辅助手术中，例如当机器人或医生定位和移动器械时，需要高度精确地跟踪某些对象，例如手术器械。
5.位置辨识系统可使用无源和/或有源传感器或标记来配准和跟踪对象的位置。使用这些传感器，系统可基于来自或关于一个或多个摄像机、信号或传感器等的信息，以几何方式解析传感器的3维位置。因此，这些手术系统可利用位置反馈来精确地引导机器人臂和工具相对于患者手术部位的移动。因此，需要一种在手术圆环境中有效且准确地提供神经导航配准和机器人轨迹引导的系统。
6.此外，可商购立体定向圆环
‑
圆弧系统需要在ct扫描内检测到的用于待完成的ct图像到框架配准的基准部件。一旦将框架配准到解剖图像且在ct图像坐标系中规划轨迹方案，就可计算必须应用以实现期望轨迹的圆环和圆弧坐标。
7.在其中基准阵列或ct扫描仪不可用的一些情况下，需要其它装置以确定圆环和圆弧坐标。因此，需要用于在不使用基准阵列的情况下计算圆环和圆弧设置的系统和方法。


技术实现要素：

8.根据本发明概念的一些实施例，一种使用手术机器人将植入物插入到患者的大脑中的方法包含：将患者的颅骨夹紧到安装到手术台的立体定向框架基座中，将动态参考基座附接到立体定向框架基座，获取大脑的医学图像，将医学图像配准到动态参考基座，将框架参考阵列安装到立体定向框架基座，同时跟踪框架参考阵列和动态参考基座的位置，将动态参考基座配准到立体定向框架基座，将医学图像配准到立体定向框架基座，从立体定向框架基座移除框架参考阵列，将圆环
‑
圆弧组件附接到立体定向框架基座，将圆环
‑
圆弧组件设置为轨迹，以及使用圆环
‑
圆弧组件将植入物沿着轨迹插入到大脑中。
9.根据本发明概念的一些其他实施例，一种将医学图像配准到圆环
‑
圆弧组件的方法包含：将患者的颅骨夹紧到安装到手术台的立体定向框架基座中，将动态参考基座附接到立体定向框架基座，获取大脑的医学图像，将医学图像配准到动态参考基座，将框架参考阵列安装到立体定向框架基座，同时跟踪框架参考阵列和动态参考基座的位置，将动态参考基座配准到立体定向框架基座，将医学图像配准到立体定向框架基座，以及从立体定向
框架基座移除框架参考阵列。
附图说明
10.附图示出了发明概念的某些非限制性实施例，所述附图被包含在内以提供对本公开的进一步理解，并且结合在本技术内并构成本技术的一部分。在附图中：
11.图1a是根据一些实施例的用于机器人系统、患者、外科医生和其它医务人员在手术过程期间的位置布置的俯视图；
12.图1b是根据一些实施例的用于机器人系统、患者、外科医生和其它医务人员在颅骨手术过程期间的另一位置布置的俯视图；
13.图2示出了根据一些实施例的包含手术机器人和摄像机相对于患者的定位的机器人系统；
14.图3是示出了根据一些实施例的用于确定患者的解剖特征相对于手术机器人的机器人臂的位置和定向的计算机执行的操作的流程图；
15.图4是示出了根据一些实施例的用于确定患者的解剖特征相对于手术机器人的机器人臂的位置和定向的数据的处理的图；
16.图5a
‑
5c示出了根据一些实施例的用于使用计算机断层扫描(ct)定位器、框架参考阵列(fra)和动态参考基座(drb)来配准患者的解剖特征的系统；
17.图6a和6b示出了根据一些实施例的用于使用荧光检查(荧光)成像来配准患者的解剖特征的系统；
18.图7示出了根据一些实施例的用于使用术中ct固定装置(ict)和drb来配准患者的解剖特征的系统；
19.图8a和8b示出了根据一些实施例的用于使用drb和x射线锥束成像装置配准患者的解剖特征的系统；
20.图9示出了根据一些实施例的用于使用导航探针和基准来对患者的解剖特征进行配准的系统，以用于解剖特征的点对点映射；
21.图10示出了根据一些实施例的中心点
‑
圆弧机构的调节范围的二维可视化；和
22.图11示出了根据一些实施例的虚拟点旋转机构的二维可视化。
23.图12a
‑
12b示出了具有经由可调整的刚性连杆附接到框架基座的跟踪球的示例性动态参考基座。
具体实施方式
24.应当理解，本公开在其应用方面不限于在本文的描述中阐述的或者在附图中示出的部件的构造和布置的细节。本公开的教导可在其它实施例中使用和实践，并且以各种方式实践或实行。并且，应当理解，本文所使用的措词和术语是出于描述的目的且不应被视为是限制性的。本文中使用“包括”、“包含”或“具有”及其变化形式意在涵盖其后列出的项目和其等效物以及附加项目。除非另外指定或限制，否则术语“安装”、“连接”、“支撑”和“联接”及其变型广泛地使用，并且涵盖直接和间接安装两者、连接、支撑和联接。此外，“连接”和“联接”不限于物理或机械连接或联接。
25.呈现以下论述以使所属领域的技术人员能够制造和使用本公开的实施例。所属领
域的技术人员将容易了解对所示出的实施例的各种修改，并且在不脱离本公开的实施例的情况下，本文的原理可应用于其它实施例和应用。因此，实施例并不旨在限于所示出的实施例，而是应被赋予与本文中所公开的原理和特征相一致的最广范围。以下详细描述应参考附图来阅读，其中不同图中的相似元件具有相似参考标号。不一定按比例的图描绘了所选择的实施例，并且并不旨在限制实施例的范围。本领域的技术人员将认识到，本文提供的实施例具有许多有用的替代方案并且落入实施方案的范围内。
26.根据一些其它实施例，公开了用于神经导航配准和机器人轨迹引导的系统以及相关的方法和装置。在一些实施例中，分析具有患者的解剖特征的第一图像体积、相对于患者的解剖特征固定的配准固定装置、以及相对于配准固定装置固定的第一多个基准标记，并且对于第一多个基准标记中的每个基准标记，确定位置。接下来，基于所确定的第一多个基准标记的位置，确定配准固定装置相对于解剖特征的位置和定向。还分析包括相对于配准固定装置固定的第二多个跟踪标记的数据帧，并且针对第二多个跟踪标记的每个跟踪标记，确定位置。基于第二多个跟踪标记的确定的位置，确定配准固定装置相对于手术机器人的机器人臂的位置和定向。基于所确定的配准固定装置相对于解剖特征的位置和定向以及所确定的配准固定装置相对于机器人臂的位置和定向，确定解剖特征相对于机器人臂的位置和定向，这允许基于确定的解剖特征相对于机器人臂的位置和定向来控制机器人臂。
27.该实施例和其它实施例的优点包含将神经导航和机器人轨迹对准结合到一个系统中的能力，并支持多种不同的配准硬件和方法。例如，如下面将详细描述的，实施例可支持计算机断层扫描(ct)和荧光检查(荧光)配准技术，并且可利用基于框架的和/或无框架的手术布置。此外，在许多实施例中，如果由于配准固定装置的移动而损害了初始(例如术前)配准，则可在术中重新建立配准固定装置(以及延伸的解剖特征)的配准，而无需暂停手术并重新捕获术前图像。
28.现转而参看附图，图1a示出了根据实施例的手术机器人系统100。手术机器人系统100可包含例如手术机器人102、一个或多个机器人臂104、基座106、显示器110、例如包含引导管114的末端执行器112，以及一个或多个跟踪标记118。响应于来自使用者的输入、从处理装置接收的命令，或其它方法，机器人臂104可沿着和/或围绕相对于基座106的轴线是可移动的。手术机器人系统100可包含患者跟踪装置116，所述患者跟踪装置也包含一个或多个跟踪标记118，所述跟踪标记适于被直接地固定到患者210(例如固定到患者210的骨骼)。如在下文将更详细地讨论的，跟踪标记118可固定到或可是相对于患者210的解剖特征固定的立体定向框架的一部分。立体定向框架还可被固定到固定装置，以防止在手术过程中患者210的移动。
29.根据替代实施例，图1b是用于机器人系统100、患者210、外科医生120和其它医务人员在颅骨手术过程期间的另一位置布置的俯视图。在颅骨手术中，例如机器人102可定位在患者210的头部128后面。机器人102的机器人臂104具有末端执行器112，其可在手术过程中保持手术器械108。在该实例中，立体定向框架134相对于患者的头部128固定，以及患者210和/或立体定向框架134也可固定到患者基座211以防止患者头部128相对于患者基座211的移动。此外，患者210、立体定向框架134和/或患者基座211可被固定到机器人基座106，例如经由辅助臂107，以防止手术过程中患者210相对于机器人102的部件相对移动。不同的装置可相对于患者的头部128和/或患者基座211按需要定位，以有利于该过程，例如术
中ct装置130、麻醉站132、擦洗站136、神经调节站138和/或用于在手术过程中控制机器人102和/或其它装置或系统的一个或多个远程挂件140。
30.图1a和/或图1b的实例中的手术机器人系统100还可使用传感器，例如摄像机200，其例如定位于摄像机支架202上。摄像机支架202可具有任何合适的构造以将摄像机200移动、定向并支撑在期望的位置。摄像机200可包含任何合适一个或多个摄像机，例如一个或多个摄像机(例如，双焦或立体摄影测量摄像机)，所述摄像机能够在从摄像机200的视角可检视的给定测量体积中识别例如有源或无源跟踪标记118(展示为图2中的患者跟踪装置116的一部分)。在该实例中，摄像机200可扫描给定测量体积并且检测来自跟踪标记118的光，以便识别和确定跟踪标记118在三维中的位置。例如，有源跟踪标记118可包含由电信号激活的红外发射标记(例如，红外发光二极管(led))，和/或无源跟踪标记118可包含反射红外光或其它光的回射标记(例如，其将传入的ir辐射反射到入射光的方向中)，所述红外光由摄像机200或其它合适的传感器或其它装置上的照明器发射。
31.在许多外科手术程序中，一个或多个手术目标，例如大脑内的目标，被定位在外部参考框架上。例如，立体定向神经外科手术可使用外部安装的立体定向框架，该框架有利于患者经由框架安装圆弧进行定位和植入物插入。神经导航用于基于术前或术中成像在脑内配准(例如映射)目标。使用这种术前或术中成像，可在手术圆环境中在成像与实际解剖结构之间建立链接和关联，并且这些链接和关联可在手术期间由机器人轨迹系统利用。
32.根据一些实施例，可组合各种软件和硬件元件以创建可用于规划、配准、放置和验证大脑中的器械或植入物的位置的系统。这些系统可整合手术机器人，例如图1a和/或图1b的手术机器人102，并且可使用手术导航系统和规划软件对手术机器人进行编程和控制。另外地或替代地，手术机器人102可被远程地控制，例如通过非无菌人员。
33.机器人102可定位在患者210的附近或旁边，并且应当理解，机器人102可位于患者210附近的任何合适的位置，这取决于患者210正在进行手术的区域。摄像机200可与手术机器人系统100分离并且也以在允许摄像机200对手术区域208具有直接视线的任何合适位置中定位在患者210附近或旁边。在所示的配置中，外科医生120可定位在机器人102的对面，但仍然能够操纵末端执行器112和显示器110。手术助理126可再次与外科医生120对置地定位，并且可触及末端执行器112和显示器110两者。如果需要，外科医生120与助理126的位置可颠倒。麻醉师122和护士或擦洗技术人员124的传统区域可保持不受机器人102和摄像机200的位置阻碍。
34.关于机器人102的其它部件，显示器110可附接到手术机器人102，并且在其它实施例中，显示器110可与手术机器人102分开，不管是在具有手术机器人102的手术室内，还是在远程位置。末端执行器112可联接到机器人臂104并且由至少一个发动机控制。在一些实施例中，末端执行器112可包括导管114，所述导管能够容纳并定向用于对患者210执行手术的手术器械108。如本文所使用，术语“末端执行器”与术语“末端施行器”和“施行器元件”可互换使用。虽然通常用引导管114示出，但应当理解，末端执行器112可用适用于外科手术的任何合适的仪器代替。在一些实施例中，末端执行器112可包括任何已知结构，所述任何已知结构用于以期望方式实现手术器械108的移动。
35.手术机器人102能够控制末端执行器112的平移和定向。机器人102能够例如沿着x轴、y轴和z轴移动末端执行器112。末端执行器112可配置成用于围绕x轴、y轴和z轴中的一
个或多个选择性旋转，使得与末端执行器112相关联的一个或多个欧拉角(例如滚动、倾斜和/或偏航)可被选择性地控制。在一些实施例中，与使用例如仅包括旋转轴的六自由度机器人臂的常规机器人相比，对末端执行器112的平移和定向的选择性控制可准许医疗手术的执行具有显著提高的准确度。例如，手术机器人系统100可用于在患者210上操作，并且机器人臂104可被定位在患者210的身体上方，末端执行器112选择性地相对于z轴朝向患者210身体成角度。
36.在一些实施例中，手术仪器108的位置可动态更新，使得手术机器人102可在手术过程期间始终知道手术器械108的位置。因此，在一些实施例中，手术机器人102可将手术器械108快速移动到期望位置，而无需医师的任何进一步帮助(除非医师需要)。在一些其它实施例中，手术机器人102可配置成在手术器械108偏离选定的预先规划的轨迹的情况下校正手术器械108的路径。在一些实施例中，手术机器人102可配置成准许停止、修改和/或手动控制末端执行器112和/或手术器械108的移动。因此，在使用中，在一些实施例中，医师或其它使用者可操作系统100，并且可选择停止、修改或手动地控制末端执行器112和/或手术器械108的自主移动。包含手术机器人102对手术器械108的控制和移动的手术机器人系统100的进一步细节可查阅第2013/0345718号共同待决美国专利公开，其全部内容以引用的方式并入本文中。
37.如下文将更详细地描述，手术机器人系统100可包括一个或多个跟踪标记，其配置成跟踪机器人臂104、末端执行器112、患者210和/或手术器械108在三维中的移动。在一些实施例中，多个跟踪标记可安装(或以其它方式固定)在机器人102的外表面上，例如但不限于机器人102的基座106上、机器人臂104上，和/或末端执行器112上。在一些实施例中，例如下文的图3的实施例，例如一个或多个跟踪标记可安装或以其它方式固定到末端执行器112。一个或多个跟踪标记可进一步安装(或以其它方式固定)到患者210。在一些实施例中，多个跟踪标记可定位在患者210上与手术视野208间隔开，以减少被外科医生、手术工具或机器人102的其它部分遮挡的可能性。此外，一个或多个跟踪标记可进一步安装(或以其它方式固定)到手术器械108(例如螺丝刀、扩张器、植入物插入器等)。因此，跟踪标记使得被标记对象中的每一个(例如，末端执行器112、患者210和手术器械108)能够被手术机器人系统100跟踪。在一些实施例中，系统100可使用从被标记对象中的每一个收集的跟踪信息以计算例如末端执行器112、手术器械108(例如，定位于末端执行器112的管114中)的定向和位置以及患者210的相对位置。包含手术机器人102和手术器械108的控制、移动和跟踪的手术机器人系统100的其它细节可查阅美国专利公开第2016/0242849号，所述专利公开的全文以引用的方式并入本文中。
38.在一些实施例中，术前成像可用于识别手术中要靶向的解剖结构。如果外科医生需要，则规划包将允许限定重新格式化的坐标系。重新格式化的坐标系将具有锚固到特定解剖学界标的坐标轴，例如神经外科手术的前联合(ac)和后联合(pc)。在一些实施例中，多个术前检查图像(例如，ct或磁共振(mr)图像)可被共同配准，使得可将解剖学上的任何给定点的坐标转换为所有其它术前检查图像上的对应点。
39.如本文所使用的，配准是确定从一个坐标系到另一坐标系的坐标变换的过程。例如，在术前图像的共同配准中，将ct扫描共同配准到mr扫描意味着可将解剖点的坐标从ct扫描转换为mr扫描中的相应解剖位置。也可能有利的是将至少一个检查图像坐标系配准到
共同配准固定装置的坐标系，例如动态参考基座(drb)，其可允许摄像机200实时保持患者位置在摄像机空间中的轨迹，使得在手术室的患者上的解剖点的任何术中移动可由机器人系统100检测和由手术机器人102的补偿移动弥补。
40.图3是示出根据一些实施例的用于确定患者的解剖特征相对于手术机器人的机器人臂的位置和定向的计算机执行的操作300的流程图；操作300可包含在第一时间从术前图像捕获装置接收第一图像体积，例如ct扫描(方框302)。第一图像体积包含患者的解剖特征和相对于患者的解剖特征固定的配准固定装置的至少一部分。配准固定装置包含相对于配准固定装置固定的第一多个基准标记。操作300进一步包含对于第一多个基准标记中的每个基准标记确定基准标记相对于第一图像体积的位置(方框304)。操作300进一步包含，基于所确定的第一多个基准标记的位置，确定配准固定装置上的跟踪标记阵列(基准配准阵列或fra)相对于解剖特征的位置(方框306)。
41.操作300可进一步包括在晚于第一时间的第二时间从包含多个跟踪摄像机的术中跟踪装置接收跟踪数据帧(方框308)。跟踪帧包含相对于配准固定装置(fra)固定的多个跟踪标记和相对于机器人固定的多个跟踪标记的位置。操作300进一步包含基于配准固定装置的跟踪标记的位置，确定解剖特征相对于跟踪摄像机的位置和定向(方框310)。操作300进一步包含基于在机器人上多个跟踪标记的所确定的位置，确定手术机器人的机器人臂相对于跟踪摄像机的位置和定向(方框312)。
42.操作300进一步包含基于所确定的解剖特征相对于跟踪摄像机的位置和定向以及所确定的机器人臂相对于跟踪摄像机的位置和定向，确定解剖特征相对于机器人臂的位置和定向(方框314)。操作300进一步包含基于所确定的解剖特征相对于机器人臂的位置和定向，控制机器人臂相对于解剖特征的移动，例如沿着一个或多个限定的轴线和/或绕一个或多个限定的轴线旋转(方框316)。
43.图4是示出根据一些实施例的能够确定患者的解剖特征相对于手术机器人的机器人臂的位置和定向的多个坐标转换系的数据流程400的图。在该实例中，可转换基于多个检查图像的来自多个检查图像空间402的数据并组合成共同检查图像空间404。来自共同检查图像空间404的数据和来自基于验证图像的验证图像空间406的数据可被转换和组合为配准图像空间408。来自配准图像空间408的数据可被转换成患者基准坐标410，其被转换成用于drb 412的坐标。跟踪摄像机414可检测drb 412(由drb 412
′
表示)的移动，并且还可检测探针跟踪器416的位置以随着时间跟踪drb 412的坐标。机器人臂跟踪器418基于来自机器人规划系统(rps)空间420或类似建模系统的转换数据，和/或来自跟踪摄像机414的转换数据，确定机器人臂的坐标。
44.应当理解，可以不同方式使用和组合这些和其它特征，以实现图像空间(即，来自图像体积的坐标)到跟踪空间(即，供手术机器人实时使用的坐标)的配准。如以下将详细讨论的，这些特征可能包含基于基准的配准，例如带有ct定位器的立体定向框架，使用术中荧光镜检查配准的术前ct或mri，校准的扫描器配准——其中任何获取的扫描的坐标相对于跟踪空间进行了预先校准，和/或使用跟踪探针的表面配准。
45.在一实例中，图5a
‑
5c示出了用于配准患者的解剖特征的系统500。在该实例中，立体定向框架基座530固定于患者例如患者的头部的解剖特征528。如图5a所示，立体定向框架基座530可在配准前使用销夹紧颅骨或其它方法固定到患者头部528。立体定向框架基座
530既可用作固定平台，以将患者的头部528固定在固定位置，也可用作配准和跟踪平台，以交替地固定ct定位器536或fra固定装置534。ct定位器536包含多个基准标记532(例如，n
‑
图案不透射线的杆或其它基准)，其使用图像处理在图像空间中被自动检测。由于ct定位器536到基座530的精确附接机制，这些基准标记532相对于立体定向框架基座530处于已知的空间中。拍摄附接有ct定位器536的患者的3d ct扫描，其具有的图像体积同时包含患者的头部528和ct定位器536的基准标记532。该配准图像可例如在手术室或放射线中术中或术前拍摄。捕获的3d图像数据集被存储到计算机内存中。
46.如图5b所示，在配准图像被捕获之后，将ct定位器536从立体定向框架基座530移除并且将框架参考阵列固定装置534附接到立体定向框架基座530。然而，立体定向框架基座530保持固定到患者的头部528，以及用于在手术过程中固定患者，并且用作框架参考阵列固定装置534的连接点。框架参考阵列固定装置534包含框架参考阵列(fra)，其是三个或更多个被跟踪标记539的刚性阵列，其可是用于光学跟踪的主参考。通过定位fra的被跟踪标记539在相对于立体定向框架基座530的固定的已知位置和定向，患者的头部528的位置和定向可被实时跟踪。在fra固定装置534和立体定向框架基座530上的安装点可被设计为使得fra固定装置534以最小的(即亚毫米级)的变化再现地附接到立体定向框架基座530。立体定向框架基座530上的这些安装点可是ct定位器536所使用的相同的安装点，其在进行扫描后移除。辅助臂(例如图1b的辅助臂107)或其它附接机构也可用来牢固地固定患者到机器人基座，以确保机器人基座不允许相对于患者移动。
47.如图5c所示，动态参考基座(drb)540也可附接至立体定向框架基座530。drb 540在该实例中包含三个或多个被跟踪标记542的刚性阵列。在该实例中，drb 540和/或其它被跟踪的标记可使用辅助安装臂541、销或其它附接机构附接至立体定向框架基座530和/或直接至患者头部528。不同于fra固定装置534——其仅以用于立体定向框架基座530的明确定位的一种方式安装，drb 540一般可根据需要附接，以允许不受阻碍的手术和设备接入。一旦drb 540和fra固定装置534被附接，最初与fra的跟踪标记539相关的配置可任选地转移至或与drb 540的跟踪标记542相关。例如，如果fra固定装置534的任何部分阻碍手术进入，外科医生可仅使用drb 540移除fra固定装置534和导航。但是，如果fra固定装置534不阻碍手术，则外科医生可选择从fra标记539导航，而无需使用drb 540，或者可同时使用fra标记539和drb 540导航。在该实例中，fra固定装置534和/或drb540使用光学标记，其被跟踪的位置在相对于立体定向框架基座530的已知位置，类似于ct定位器536，但应当理解，可使用许多其它附加和/或替代技术。
48.图6a和6b示出了根据一些实施例的用于使用荧光检查(荧光)成像来配准患者的解剖特征的系统600。在本实施例中，使用利用被跟踪的配准固定装置644拍摄的多个术中荧光镜检查(荧光)图像，图像空间被配准到跟踪空间。患者的解剖特征(例如，患者的头部628)被放置并牢固地固定在夹紧设备643中的静止位置，以进行其余的手术。用于刚性患者固定的夹紧设备643可是三销固定系统，如mayfield夹具、附接到手术台的立体定向框架基座、或根据需要的另一种固定方法。夹紧设备643还可用作患者跟踪阵列或drb 640的支撑结构。可使用辅助安装臂641或其它方式将drb附接在夹紧设备上。
49.一旦患者被定位，所述荧光固定装置644附接荧光单元的x射线采集图像增强器(未示出)，并通过拧紧夹紧脚632进行固定。荧光固定装置644包含基准标记(例如，在该实
例中跨两个平面布置的金属球，未示出)，其在由荧光图像捕获装置捕获的2d荧光图像上可见，并且可使用标准针孔摄像机模型用于计算x射线源相对于图像增强器的位置，其通常与患者对侧相距约1米。对由荧光图像捕获装置捕获的荧光图像中的金属球的检测还使得软件能够使荧光图像去扭曲(即，移除针垫形和s形失真)。此外，荧光固定装置644含有3或多个跟踪标记646，用于确定跟踪空间中荧光固定装置644的位置和定向。在一些实施例中，软件可基于先前捕获的ct图像，通过ct图像体积投影矢量，以基于ct图像中的对比度水平生成合成图像，所述合成图像看起来类似于实际的荧光图像(即，数字重建射线照片(drr))。通过迭代通过荧光束的理论位置，直到drr匹配实际荧光拍摄，可在荧光图像和drr之间在两个或更多的视角发现匹配，并基于此匹配，计算患者的头部628相对于x射线源和探测器的位置。因为在荧光固定装置644上的跟踪标记646跟踪图像增强器的位置并且从投影在2d图像上的荧光固定装置644上的金属基准计算x射线源相对于图像增强器的位置，因此x射线源和检测器在跟踪空间中的位置是已知的，并且该系统能够实现图像到跟踪的配准。
50.如图6a和6b所示，两个或更多个拍摄从两个不同的视角由荧光图像捕获装置对患者的头部628进行，同时跟踪drb 640的阵列标记642和荧光固定装置644上的跟踪标记646，所述阵列标记经由安装臂641被固定到配准固定装置630。基于跟踪数据和荧光数据，一种算法计算头部628或其它解剖特征相对于跟踪空间的位置以用于手术过程。通过图像到跟踪的配准，可计算出任何被跟踪工具在图像体积空间中的位置。
51.例如，在一个实施例中，可将从第一荧光视角拍摄的第一荧光图像与从第一视角通过ct图像体积构造的第一drr进行比较，并且可将从第二荧光视角拍摄的第二荧光图像与从第二视角通过相同的ct图像体积构造的第二个drr进行比较。基于比较，可确定相对于解剖特征的投影视图，第一drr基本等效于第一荧光图像，并且相对于解剖特征的投影视图，第二drr基本等效于第二荧光图像。等效性确认在摄像机空间中跟踪的实际荧光机上从发射器到收集器的x射线路径的位置和定向与在ct空间中生成drr时指定的从发射器到收集器的x射线路径的位置和定向相匹配，因此实现了跟踪空间到ct空间的配准。
52.图7示出了根据一些实施例的用于使用术中ct固定装置(ict)和drb来配准患者的解剖特征的系统700。如图7所示，在一个应用中，可利用基于基准的图像到跟踪的配准，其使用术中ct固定装置(ict)750，其具有多个跟踪标记751和不透射线的基准参考标记732，以将ct空间配准到跟踪空间。在使用夹紧装置730例如三销mayfield框架和/或立体定向框架稳定解剖特征728(例如患者头部)后，外科医生将ict 750固定到解剖特征728、drb 740或夹紧设备730，使得其相对于drb 740的跟踪标记742在静止位置，其可由安装臂741或其它刚性手段保持到位。ct扫描被捕获，其包含ict 750的基准参考标记732，同时捕获解剖特征728的相关解剖结构。一旦将ct扫描加载到软件中，系统就会自动(通过图像处理)识别ct体积中ict的基准参考标记732的位置，这些位置相对于ict 750的跟踪标记处于固定位置，提供了图像到跟踪的配准。最初基于ict 750的跟踪标记751的该配准然后涉及或转移到drb 740的跟踪标记742并且然后可移除ict 750。
53.图8a示出了根据一些实施例的用于使用drb和x射线锥束成像装置配准患者的解剖特征的系统800。术中扫描器852，例如x光机或其它扫描装置，可具有安装在其上用于配准的跟踪阵列854，其带有跟踪标记855。基于扫描装置上跟踪阵列854的固定的已知位置，该系统可被校准，以直接映射(配准)跟踪空间到系统获取的任何扫描的图像空间。一旦实
现配准，最初基于扫描器的阵列854的跟踪标记855(例如台架标记)的配准涉及或转移到drb840的跟踪标记842，其可通过安装臂841或其它刚性手段被固定到夹紧固定装置830，从而保持患者的头部828。转移配准后，不再使用扫描器上的标记，并且可根据需要将其移除、停用或覆盖。在一些实施例中，以这种方式将跟踪空间配准到由扫描器获取的任何图像可避免在图像空间中需要基准或其它参考标记。
54.图8b示出了替代性系统800
′
，其使用便携式术中扫描器，在本文中称为c型臂扫描器853。在该实例中，c型臂扫描器853包含c形臂856，其联接到可动基座858以允许c型臂扫描器853被移动到位，并根据需要移除，而不干扰手术的其它方面。臂856在术中被定位在患者头部828的周围，并且臂856相对于患者头部828旋转和/或平移，以捕获x射线或其它类型的扫描以实现配准，该点处c型臂扫描器853可从患者中移除。
55.根据一些实施例，用于患者例如患者头部的解剖特征的另一种配准方法可是使用该解剖特征的表面轮廓图。可使用被导航或跟踪的探针或其它测量或传感装置(例如激光指示器、3d摄像机等)构造表面轮廓图。例如，外科医生可用被导航的探针拖动或依次触摸头部表面上的点，以捕获独特突起(例如颧骨、超睫状弓、鼻梁、眉等)上的表面。然后，系统将所得的表面轮廓与从ct和/或mr图像检测到的轮廓进行比较，以寻找提供最近匹配的轮廓的位置和定向。为了考虑患者的移动并确保相对于同一解剖特征获取所有轮廓点，每个轮廓点都与配准时患者身上drb上的跟踪标记相关。由于轮廓图的位置在跟踪空间中是从被跟踪的探针和被跟踪的drb已知的，因此一旦在图像空间中找到了相应的轮廓，就可获得跟踪与图像的配准。
56.图9示出了根据一些实施例的用于使用被导航霍跟踪的探针和基准来对患者的解剖特征进行配准的系统900，以用于解剖特征928(例如患者头部)的点对点映射。软件将指示使用者使用被跟踪的探针指向可在ct或mr图像中找到的一系列解剖界标点。当使用者指向软件指示的界标时，系统将捕获被跟踪数据的帧以及跟踪标记在探针和drb上的跟踪位置。根据标记在探针上的被跟踪位置，可计算出探针尖端的坐标，并与drb上标记的位置相关。一旦在两个空间中找到3个或更多点，就实现了跟踪与图像的配准。作为指向天然解剖学界标的替代，也可使用基准954(即基准标记)，如贴纸基准或金属基准。外科医生将基准954附接到患者，其由对成像不透明的材料构成，例如，如果与ct一起使用，其包含金属，如果与mr一起使用，其包含维生素e。成像(ct或mr)在放置基准954之后进行。然后，外科医生或使用者将在图像体积中手动找到基准的坐标，或者软件将通过图像处理自动找到它们。将具有跟踪标记942的drb 940与患者通过连接到夹紧设备930或其它刚性装置的安装臂941附接之后，外科医生或使用者也可通过用被跟踪的探针触摸基准954，在物理空间中相对于drb 940定位基准954，同时在探针和drb 940上配准跟踪标记(未示出)。因为在图像空间和跟踪空间中已知相同点的坐标，所以实现了配准。
57.本文描述的实施例的一种用途是规划轨迹并控制机器人移动到期望的轨迹，此后，外科医生将通过机器人保持的导管放置例如电极的植入物。其它功能包含导出与现有的立体定向框架(例如leksell框架)一起使用的坐标，该框架使用五个坐标：x、y、z、圆环角和圆弧角。这五个坐标是使用在规划阶段相对于图像空间确定的目标和轨迹并知道圆环和圆弧相对于立体定向框架基座或其它配准固定装置的位置和定向来建立的。
58.如图10所示，立体定向框架允许解剖特征1028(例如，患者的头部)的目标位置
1058被当作球的中心处理并且所述轨迹可绕目标位置1058旋转。到目标位置1058的轨迹由立体定向框架(例如leksell框架)的圆环和圆弧角度调整。可手动设置这些坐标，并且在机器人发生故障或无法成功跟踪或配准时，可将立体定向框架用作备用或冗余系统。线性x、y、z向中心点(即目标位置1058)偏移经由所述框架的机制调节。锥体1060绕目标位置1058居中，并且示出了可通过改变leksell框架或其它类型框架的圆环和圆弧角度来实现所述调节区。该图示出具有圆环和圆弧调整的立体定向框架非常适合在更改进入颅骨的进入点的同时从一定角度范围到达固定目标位置。
59.图11示出了根据一些实施例的虚拟点旋转机构的二维可视化。在该实施例中，机器人臂能够创建不同类型的点旋转功能，该功能使得能够实现新的移动模式，该移动模式使用5轴机械框架不容易实现，但是可使用本文所述的实施例来实现。通过使用本文所述的配准技术对机器人的轴进行协调控制，此模式允许使用者围绕空间中的任何固定点旋转机器人的导管。例如，机器人可围绕入口点1162旋转到解剖特征1128(例如患者的头部)。此入口点旋转是有利的，因为它允许使用者进行小的钻孔，但不限制其在术中调整目标位置1164的能力。锥体1160表示可通过单个入口孔到达的轨迹范围。此外，入口点枢转是有利的，因为它允许使用者通过相同的小入口钻孔到达两个不同的目标位置1164和1166。替代地，机器人可绕颅骨内的目标点(例如，图10所示的位置1058)枢转以从不同的角度或轨迹到达目标位置，如图10所示出。这种内部机器人式枢转具有与立体定向框架相同的优点，因为它允许使用者从多种途径接近相同的目标位置1058，例如在照射肿瘤时或在调节路径时，使得关键结构例如血管或神经当超过它们到达目标时不会交叉。与依靠固定的圆环形和圆弧形铰接来保持目标/枢轴点固定的立体定向框架不同，机器人通过轴的受控激活来调整枢轴点，因此机器人可动态地调整其枢轴点并根据需要在模式之间进行切换，如图10和11所示出。
60.在使用机器人或圆环形和圆弧形固定装置插入植入物或器械之后，这些和其它实施例可允许使用术中成像来验证植入物的位置。可定性和/或定量地向使用者显示器械或植入物相对于规划轨迹的放置精度。比较规划的位置和放置的位置的一种选择是将术后验证ct图像合并到任何术前图像。一旦合并了术前和术后的图像并显示了规划覆盖，就可将术后ct上的植入物阴影与规划进行比较，以评估放置的准确性。可通过图像处理自动执行术后ct上的阴影伪影的检测，并在以尖端和入口处的毫米偏移和沿路径的角度偏移方面数字地显示偏移。由于基于骨骼解剖轮廓执行图像到图像配准，因此该选项不需要在验证图像中出现任何基准。
61.比较规划的位置和最终放置的第二种选择是使用术中荧光，无论是否附接荧光固定装置。将拍摄两个平面外的荧光图像，并将这些荧光图像与术前ct或mr生成的drr进行匹配，如上所述，以进行配准。但是，与上述某些配准方法不同，跟踪荧光图像可能不太重要，因为关键信息是电极相对于荧光图像中的解剖结构所处的位置。可在荧光图像上找到电极的线性或略微弯曲的阴影，并且一旦找到了与该荧光照片相对应的drr，就可在ct图像体积中复制该阴影作为面向荧光图像的射线方向和drr内或向外定向的平面或片。也就是说，系统可能不知道电极在给定的照片上位于荧光图像平面内或外的深度，但是可计算出可能位置的平面或片，并在3d体积上表示该平面或片。在第二荧光视图中，可确定不同的平面或片并将其覆盖在3d图像上。这两个平面或片在3d图像上相交的位置是检测到的电极路径。系
统可将该检测到的路径表示为3d图像体积上的图形，并允许使用者重新切分图像体积以从任意期望视角显示该路径和规划路径，还允许自动或手动计算与电极的规划路径与放置位置之间的偏差。跟踪荧光固定装置是不必要的，但可这样做以帮助使荧光图像变形并计算x射线发射器的位置以提高drr计算的准确性，迭代查找匹配的drr和荧光镜头时的收敛速度，以及在3d扫描中放置代表电极的片/平面的位置。
62.在该实例和其它实例中，期望保持导航完整性，即，确保在整个过程中配准和跟踪保持准确。建立和维护导航完整性的两种主要方法包含：跟踪监视标记相对于drb上标记的位置，以及检查图像中的界标。在第一种方法中，如果此位置由于例如drb碰撞而发生变化，则系统可能会警告使用者导航完整性可能会损失。在第二种方法中，如果界标检查显示屏幕上显示的切片中表示的解剖结构与探针尖端指向的解剖结构不匹配，则外科医生也将意识到导航完整性的损失。在这两种方法中，如果使用ct定位器和框架参考阵列(fra)的配准方法，则外科医生可选择重新连接fra，该fra仅以一种可能的方式安装到框架基座上，并根据fra跟踪标记和来自ct定位器536的存储基准，恢复跟踪与图像的配准。然后可转移此配准或与重新定位的drb上的跟踪标记相关联。一旦转移配准，就可根据需要移除fra。
63.传统上，为了瞄准到大脑中的直线轨迹，可使用立体定向头部框架装置。立体定向框架的典型工作流程可描述如下：
64.1.将患者颅骨夹紧到框架基座中，所述框架基座也安装到手术台。
65.2.基准定位器暂时地附接到框架基座且围绕患者颅骨。
66.3.对头部进行ct扫描，还在扫描体积内捕获基准。可在术中(例如，用o形臂成像装置)或在ct套件中进行ct。自动检测ct图像体积内的基准位置，从而允许计算从ct图像到框架坐标的转换。
67.4.基准定位器阵列被移除，并且圆环和圆弧机构安装到框架基座。
68.5.基于从ct图像到框架坐标的转换以及圆环
‑
圆弧组件相对于框架基座的经校准位置，框架的圆环、圆弧和xyz偏移的刻度位置被设置以达成期望轨迹。
69.6.针、电极或其它装置通过安装在圆环
‑
圆弧组件上的管或送线器插入。
70.圆环位置、圆弧位置和偏移的设置是基于在ct扫描期间暂时地附接的代替圆环和圆弧的基准定位器阵列的配准而确定。当患者进入ct扫描仪时，可在扫描期间暂时地附接基准定位器的情况下将框架基座安装在患者头部上。
71.参考图5a
‑
5b，使用与本公开的原理一致的机器人系统的示例性工作流程可包含以下步骤。
72.1.如图5a中所示，患者颅骨528夹紧到框架基座530中，所述框架基座也安装到手术台和机器人基座。
73.2.基准定位器阵列536暂时地附接到框架基座530。
74.3.对头部528进行ct扫描，还在扫描体积内捕获基准532。自动检测ct图像体积内的基准位置，从而允许计算从ct图像到框架坐标的转换。
75.4.如图5b中所示，基准定位器阵列536被移除，并且光学基准配准阵列(fra)534安装到框架基座530。
76.5.基于从ct图像到框架坐标的转换以及fra 534相对于框架基座530的经校准位置，机器人自动移动到跟踪空间中的必要位置中以达成期望轨迹。
77.6.针、电极或另一装置可通过安装在机器人末端执行器上的管或送线器插入。
78.如上文所描述使用机器人的一个优点和安全性特征是，如果不能以机器人方式完成过程，则工作流程允许用户恢复到立体定向框架工作流程。也就是说，如果配准步骤已完成，但机器人出现故障或不可用，则系统可简单地计算出圆环和圆弧设置，并且外科医生可在步骤4处进入传统的立体定向框架工作流程。
79.不同的颅骨机器人工作流程可使用不同的配准方法，以将ct或mr图像坐标系配准到跟踪坐标系，并且略过框架坐标系到ct图像坐标系的配准。用于实现ct/mr图像到跟踪配准的示例性方法包含：(1)术中ct(ict)固定装置配准、(2)来自双跟踪荧光束的术前ct或mri配准、(3)点映射，以及(4)轮廓映射。ct/mr图像到跟踪配准可遵循以下工作流程：
80.1.如图12a中所示，患者颅骨528夹紧到框架基座530中，所述框架基座也安装到手术台和机器人基座。
81.2.具有光学跟踪标记1202的动态参考基座(drb)1200附接到患者颅骨528或框架基座530。
82.3.执行ct/mr图像到跟踪配准。
83.4.基于从ct/mr图像到跟踪坐标的转换，机器人自动移动到跟踪空间中的必要位置中以达成期望轨迹。
84.5.针、电极或其它装置通过安装在机器人末端执行器上的管或送线器插入。
85.图12a示出了具有drb 1200的示例性实施例，所述drb具有经由可调整的刚性连杆1204附接到框架基座530的跟踪球1202。图12b示出了drb 1200和附接到框架基座530的ct图像到跟踪配准固定装置(ict)1206。ict 1206可包含由光学跟踪系统跟踪的4个跟踪球1208，以及在ct图像体积内检测到的多个嵌入式不透射线(钛)基准球1210。
86.在上文所描述的工作流程中，由于未确定从ct/mr图像到框架的转换，因此用于圆环
‑
圆弧立体定向装置备的设置可能是未知的。在没有此转换的情况下，则如先前所描述，在机器人出现故障或不可用的情况下，用户将无法恢复到圆环
‑
圆弧系统。
87.为了恢复到圆环
‑
圆弧系统，即使使用了替代性配准方法中的一个，也可执行一个额外步骤以允许根据需要使用圆环
‑
圆弧系统。如图5c中所示，步骤可包含将框架配准阵列(fra)534附接到立体定向框架530，并且用跟踪摄像机检测跟踪空间中的fra 534的位置。由于fra 534的位置相对于圆环
‑
圆弧组件的位置是固定的，因此fra534的跟踪位置给出了圆环
‑
圆弧组件在跟踪空间中的位置。然后，由于从跟踪空间到ct/mr图像空间的转换是已知的，因此将此转换应用于fra 534的跟踪位置允许确定从ct/mr图像到框架基座530的转换。
88.用于从机器人引导的情况转换为立体定向框架引导的情况的工作流程可是如下：
89.1.患者颅骨528夹紧到框架基座530中，所述框架基座也安装到手术台。
90.2.drb 540附接到患者颅骨528或框架基座530，如先前在图5a
‑
5c中所示。
91.3.执行医学图像到跟踪配准。此步骤可涉及用本发明的ict 1206固定装置获取ct扫描、加载术前ct或mri扫描且获取跟踪荧光束、执行点匹配或另一方法。
92.4.fra 534安装到框架基座530。跟踪fra 534的位置，同时跟踪安装到患者528或框架基座530的drb 540的位置。根据此跟踪数据，确定从drb 540到框架基座530的转换。根据此转换和从ct/mr图像到drb 540的已知转换，确定从ct/mr图像到框架基座的转换。
93.5.fra 534被移除，并且立体定向圆环
‑
圆弧组件安装到框架基座530。
94.6.基于从ct/mr图像到框架基座坐标的转换以及圆环
‑
圆弧组件相对于框架基座530的经校准位置，框架的圆环、圆弧和xyz偏移的刻度位置被设置以达成期望轨迹。
95.7.针、电极或其它装置通过安装在圆环
‑
圆弧组件上的管或送线器插入。
96.图5c展示附接到框架基座530的fra 534和drb 540。当两个阵列都对跟踪系统可见时，可完成立体定向圆环
‑
圆弧系统到跟踪系统的配准。
97.综上所述，如果外科医生在意图使用机器人的情况下完成上述颅骨机器人系统工作流程的步骤1
‑
3，但然后发现机器人不可用，则完成步骤4
‑
7，以切换到使用圆环
‑
圆弧组件。替代地，如果从该情况开始就打算使用圆环
‑
圆弧系统，但定位器基准阵列不可用或ct扫描仪不可用，则此整个工作流程可在不暂停的情况下执行。ct扫描仪可能不可用的原因是，如果ct扫描仪的视野太小，并且因此无法捕获ct基准阵列，或如果设施不拥有ct扫描仪。
98.按照本公开的实施例允许在不需要用附接的基准框架获取ct扫描的情况下针对颅骨手术确定立体定向框架的圆环、圆弧和线性偏移值。在无法使用机器人的情况下，具有可用于颅骨手术的圆环、圆弧和偏移值会允许外科医生恢复到传统的立体定向圆环
‑
圆弧框架引导作为回退策略。本公开还提供一种替代方法，其用于将圆环
‑
圆弧系统配准到不具有ct扫描仪或具有视野有限的扫描仪而使得无法使用预期的基准定位器的设施的医学图像体积。
99.在本发明概念的各个实施例的以上描述中，应当理解，本文使用的术语仅出于描述特定实施例的目的，而不旨在是限制本发明概念的。除非另外定义，否则本文使用的所有术语(包含技术和科学术语)具有与本发明概念所属领域的普通技术人员通常理解的含义相同的含义。将进一步理解的是，例如在常用词典中定义的那些术语应被解释为具有与其在本说明书的上下文和相关领域中的含义一致的含义，并且除非本文明确定义，否则不应在理想化或过度正式的意义上解释。
100.当一个元件被称为“连接”、“联接”、“响应”(或其变型)于另一元件时，它可直接连接、耦合或响应于另一元件，或者可存在中间元件。相反，当一个元件被称为与另一个元件“直接地连接”、“直接地联接”、“直接响应于”另一个元件或其变体时，不存在中间元件。贯穿全文以相似的数字指代相似的要素。此外，如本文中使用的“联接”、“连接”、“响应”或其变体可包含无线联接、连接或响应。除非上下文另外清楚地说明，否则如本文所使用的，单数形式“一个/一种(a、an)”和“所述(the)”旨在包含复数形式。为了简洁和/或清楚，可能不会详细描述众所周知的功能或构造。术语“和/或”包含相关联的所列项中的一或多个项的任何和所有组合。
101.应当理解，尽管本文中可使用术语第一、第二、第三等来描述各种元件/操作，但是这些元件/操作不应受这些术语的限制。这些术语仅用于将一个元件/操作与另一个元件/操作区分开。因此，在不脱离本发明概念的教导内容的情况下，在一些实施例中的第一元件/操作可在其它实施例中被称为第二元件/操作。在整个说明书中，相同的附图标记或相同的参考标记表示相同或相似的元件。
102.如本文所使用的，术语“包括(comprise/comprising/comprises)”、“包含(include/including/includes)”、“具有(have/has/having)”或其变体是开放式的，并且
包含一个或多个陈述的特征、整数、元件、步骤、部件或功能，但是不排除一个或多个其它特征、整数、元件、步骤、部件、功能或其组合的存在或添加。此外，如本文所使用的，源自拉丁短语“exempligratia”的通用缩写“例如”可用于介绍或指定先前提及的项目的一个或多个一般示例，并且不旨在限制这种项目。源自拉丁短语“id est”的通用缩写“即”可用于从更一般的陈述中指定特定项目。
103.本文中参考计算机实施的方法、设备(系统和/或装置)和/或计算机程序产品的框图和/或流程展示描述了示例实施例。应当理解的是，可通过由一个或多个计算机电路执行的计算机程序指令来实现框图和/或流程展示的框以及框图和/或流程展示中框的组合。这些计算机程序指令可被提供给通用计算机电路、专用计算机电路和/或其它可编程数据处理电路的处理器电路，以产生机器，使得经由计算机和/或其它可编程数据处理设备的处理器执行的指令转换并控制晶体管、存储在存储器位置中的值以及这种电路系统内的其它硬件部件，以实现框图和/或一个或多个流程图框中指定的功能/动作，并且由此创建用于实现框图和/或一个或多个流程图框中指定的功能/动作的装置(功能)和/或结构。
104.这些有形计算机程序指令也可存储在可指导计算机或其它可编程数据处理设备以特定方式运行的计算机可读介质中，使得存储在计算机可读介质中的指令产生包含实施在框图和/或一个或多个流程图框中指定的功能/动作的指令的制品。因此，本发明概念的实施例可体现在硬件和/或软件(包含固件、常驻软件、微代码等)中，其在如数字信号处理器等处理器上运行，所述数字信号处理器可被统称为“电路系统”、“模块”或其变体。
105.还应该注意的是，在一些替代性实现方案中，框中标注的功能/动作可不按流程图中标注的顺序发生。例如，根据所涉及的功能/动作，连续示出的两个框实际上可基本上同时执行，或者所述框有时可按相反顺序执行。此外，可将流程图和/或框图的给定框的功能分成多个框，和/或流程图和/或框图的两个或更多个框的功能可至少部分地集成。最后，在不脱离本发明概念的范围的情况下，可在所示出的框之间添加/插入其它框，和/或可省略框/操作。此外，尽管一些图包含通信路径上的箭头以示出通信的主要方向，但是应该理解，通信可在与所描绘箭头相反的方向上发生。
106.尽管在前面的说明书中已经公开了本发明概念的若干实施例，但是应当理解，在受益于前述描述和相关附图中呈现的教导内容的情况下，将能够设想出本发明概念所涉及的本发明概念的许多修改和其它实施例。因此应该理解，本发明构思不限于上文公开的特定实施例，并且许多修改和其它实施例旨在包含在所附权利要求书的范围内。进一步设想，来自一个实施例的特征可与来自本文中所描述的不同实施例的特征组合或一起使用。此外，尽管在本文中以及在所附权利要求书中使用了具体术语，但它们仅在一般和描述性意义上被使用，而不是为了限制所描述发明构思或所附权利要求书的目的。本文中所引用的每个专利和专利公开的全部公开内容全文以引用的方式并入本文中，如同每个此类专利或公开个别地以引用的方式并入本文中。本发明构思的各种特征和/或潜在优点在所附权利要求书中阐述。