次表面结构到表面上的计算机辅助注释的制作方法

摘要: 本公开内容总体上涉及医疗系统。具体地,本公开内容涉及使用医疗系统将次表面结构注释到表面上。背景技术:1、在手术期间,外科医生充分地可视化受试者的解剖结构是重要的...
次表面结构到表面上的计算机辅助注释的制作方法

本公开内容总体上涉及医疗系统。具体地,本公开内容涉及使用医疗系统将次表面结构注释到表面上。

背景技术:

1、在手术期间,外科医生充分地可视化受试者的解剖结构是重要的。由于手术目标通常位于次表面中,因此已经研究了一系列可视化技术。这包括神经、血管和肿瘤的可视化。超声已被用于在机器人手术中提供肿瘤的配准可视化,但超声受噪声、差的灵敏度和特异性的困扰,并且主要用于定位深埋于表面下方的大肿瘤,或者将器械引导到所述大肿瘤。因此,即使通过采用具有立体内窥镜的超声,也难以清晰地可视化位于不同深度处的次表面结构。立体内窥镜使用立体摄像装置。立体摄像装置包括两个摄像装置(例如,左摄像装置和右摄像装置)。可以使用来自两个摄像装置的图像执行三角测量技术,以确定视场中不同点的深度,以辅助医疗系统将次表面结构的渲染或注释投影到解剖结构的表面上。然而,次表面结构的渲染或注释通常被投影到解剖结构的表面上的非最佳定位上。

技术实现思路

1、本公开内容描述了一种用于将次表面结构注释到表面结构的表面上的系统和方法。根据实施方式,一种用于将次表面结构注释到表面结构的表面上的系统包括存储器以及通信地耦接至存储器的控制器。系统接收使用第一成像模态的第一成像装置捕获的第一成像数据,第一成像数据示出表面结构的表面,接收使用第二成像模态的第二成像装置捕获的第二成像数据,第二成像数据示出第一次表面结构,至少基于表面上的何处最接近第一次表面结构来确定表面上的第一点,在第一点处生成第一次表面结构到表面上的第一投影,以及将表面结构的表面上的第一点处的第一投影显示在显示装置上。

2、根据另一实施方式,一种用于将次表面结构注释到表面结构的表面上的方法包括:接收使用第一成像模态的第一成像装置捕获的第一成像数据,第一成像数据示出表面结构的表面,接收使用第二成像模态的第二成像装置捕获的第二成像数据,第二成像数据示出第一次表面结构,至少基于表面上的何处最接近第一次表面结构来确定表面上的第一点,在第一点处生成第一次表面结构到表面上的第一投影,以及将表面结构的表面上的第一点处的第一投影显示在显示装置上。

3、前述的一般描述和以下详细描述本质上是示例性和说明性的,并且旨在提供对本公开内容的理解,而不限制本公开内容的范围。在这方面,根据以下详细描述,本公开内容的附加方面、特征和优点对于本领域技术人员来说将是明显的。

1.一种用于将次表面结构注释到表面结构的表面上的系统,所述系统包括:

2.根据权利要求1所述的系统,其中,所述第一成像数据包括可见光成像数据,或者所述第二成像数据包括超声成像数据。

3.根据权利要求1所述的系统,其中,所述控制器还被配置成基于所述第二成像数据生成所述第一次表面结构的三维(3d)模型。

4.根据权利要求3所述的系统,其中,所述控制器还被配置成生成包括所述表面结构的所述表面的坐标的深度图,其中,所述深度图的每个坐标指示所述表面结构的所述表面的一部分的位置和深度。

5.根据权利要求4所述的系统,其中,确定所述表面上的最接近所述第一次表面结构的所述第一点包括将所述深度图与所述3d模型合并。

6.根据权利要求1所述的系统,其中,所述第一次表面结构的所述第一投影在所述表面结构的所述表面上形成零维、一维或二维注释。

7.根据权利要求1所述的系统,其中,所述第一投影的边界与所述第一次表面结构的边界或所述次表面结构的中心线对准。

8.根据权利要求1所述的系统,其中,所述第一投影的颜色、透明度、模糊度、热图或尺寸至少部分地指示所述第一次表面结构距所述表面结构的所述表面的深度。

9.根据权利要求8所述的系统,其中,所述深度表示所述第一次表面结构与所述表面结构的所述表面之间的最近距离。

10.根据权利要求8所述的系统,其中,所述颜色、所述透明度、所述热图或所述模糊度跨所述第一投影变化,以指示所述第一次表面结构占据距所述表面结构的所述表面的多个深度。

11.根据权利要求1所述的系统,其中,所述控制器还被配置成确定器械与所述第一次表面结构之间的距离;并且

12.根据权利要求1所述的系统,其中,所述第一次表面结构与所述表面结构的所述表面上的所述第一点之间的入口路径与所述第一成像装置的观察轴线不对准。

13.根据权利要求12所述的系统,其中,所述第一次表面结构与所述表面结构的所述表面上的所述第一点之间的所述入口路径被进一步确定成避开位于所述第一次表面结构与所述表面上的所述第一点之间的一个或更多个受保护结构。

14.根据权利要求13所述的系统,其中,所述第一次表面结构与所述表面结构的所述表面上的所述第一点之间的所述入口路径基于由用户做出的标记确定。

15.根据权利要求1所述的系统,其中,所述控制器还被配置成:

16.根据权利要求15所述的系统,其中,当所述第一点被确定为隐藏在视野之外或者不被器械可到达时,发生所述第二投影的显示。

17.根据权利要求1所述的系统,其中,所述第一点的确定、所述第一投影的生成以及所述第一投影的显示独立于所述第一成像装置的移动。

18.根据权利要求1所述的系统,其中,所述第一次表面结构与所述第一投影同时显示。

19.根据权利要求1所述的系统,其中,所述第二成像数据还示出第二次表面结构,并且所述控制器还被配置成:

20.根据权利要求19所述的系统,其中,所述第一投影和所述第二投影同时显示在所述表面结构的所述表面上。

21.根据权利要求20所述的系统,其中,在所述表面结构的所述表面上,所述第一投影被表示为第一颜色,并且所述第二投影被表示为第二颜色。

22.一种用于将次表面结构注释到表面结构的表面上的方法,所述方法包括:

23.根据权利要求22所述的方法,其中,所述第一成像数据包括可见光成像数据,或者所述第二成像数据包括超声成像数据。

24.根据权利要求22所述的方法,其中,控制器还被配置成基于所述第二成像数据生成所述第一次表面结构的三维(3d)模型。

25.根据权利要求24所述的方法,其中,控制器还被配置成生成包括所述表面结构的所述表面的坐标的深度图,其中,所述深度图的每个坐标指示所述表面结构的所述表面的一部分的位置和深度。

26.根据权利要求25所述的方法,其中,确定所述表面上的最接近所述第一次表面结构的所述第一点包括将所述深度图与所述3d模型合并。

27.根据权利要求22所述的方法,其中,所述第一次表面结构的所述第一投影在所述表面结构的所述表面上形成零维、一维或二维注释。

28.根据权利要求22所述的方法,其中,所述第一投影的边界与所述第一次表面结构的边界或所述次表面结构的中心线对准。

29.根据权利要求22所述的方法,其中,所述第一投影的颜色、透明度、模糊度、热图或尺寸至少部分地指示所述第一次表面结构距所述表面结构的所述表面的深度。

30.根据权利要求29所述的方法,其中,所述深度表示所述第一次表面结构与所述表面结构的所述表面之间的最近距离。

31.根据权利要求29所述的方法,其中,所述颜色、所述透明度、所述热图或所述模糊度跨所述第一投影变化,以指示所述第一次表面结构占据距所述表面结构的所述表面的多个深度。

32.根据权利要求22所述的方法,其中,控制器还被配置成确定器械与所述第一次表面结构之间的距离;并且

33.根据权利要求22所述的方法,其中,所述第一次表面结构与所述表面结构的所述表面上的所述第一点之间的入口路径与所述第一成像装置的观察轴线不对准。

34.根据权利要求33所述的方法,其中,所述第一次表面结构与所述表面结构的所述表面上的所述第一点之间的所述入口路径被进一步确定成避开位于所述第一次表面结构与所述表面上的所述第一点之间的一个或更多个受保护结构。

35.根据权利要求34所述的方法,其中,所述第一次表面结构与所述表面结构的所述表面上的所述第一点之间的所述入口路径基于由用户做出的标记确定。

36.根据权利要求22所述的方法,其中,控制器还被配置成:

37.根据权利要求36所述的方法,其中,当所述第一点被确定为隐藏在视野之外或者不被器械可到达时,发生所述第二投影的显示。

38.根据权利要求22所述的方法,其中,所述第一点的确定、所述第一投影的生成以及所述第一投影的显示独立于所述第一成像装置的移动。

39.根据权利要求22所述的方法,其中,所述第一次表面结构与所述第一投影同时显示。

40.根据权利要求22所述的方法,其中,所述第二成像数据还示出第二次表面结构,并且所述方法还包括:

41.根据权利要求40所述的方法,其中,所述第一投影和所述第二投影同时显示在所述表面结构的所述表面上。

42.根据权利要求41所述的方法,其中,在所述表面结构的所述表面上,所述第一投影被表示为第一颜色,并且所述第二投影被表示为第二颜色。

43.一种非暂态机器可读介质,其存储指令,所述指令用于将次表面结构注释到表面上,所述指令在由控制器执行时使所述控制器: