具有快速准共焦探测的超分辨率显微镜的制作方法

摘要: 本发明涉及一种显微镜,该显微镜具有照明光路、探测光路和分束器,其中,所述探测光路包括样品空间、显微物镜、管镜、由所述管镜生成的中间像以及具有探测光学单元的二维空...
具有快速准共焦探测的超分辨率显微镜的制作方法

本发明涉及一种显微镜,该显微镜具有照明光路、探测光路和分束器,其中,所述探测光路包括样品空间、显微物镜、管镜、由所述管镜生成的中间像以及具有探测光学单元的二维空间分辨光电传感器,所述探测光学单元用于将所述中间像成像到所述传感器上,并且所述照明光路包括光源和第一可设定光束偏转单元,所述第一可设定光束偏转单元用于使照明光束移动(“扫描”、“光栅扫描”)穿过所述样品空间,并且所述探测光路包括第二可设定光束偏转单元,所述第二可设定光束偏转单元用于使样品光束在所述传感器上移动,其中,所述照明光路和所述探测光路借助所述分束器光学耦合而形成共同光路,使得来自所述光源的照明光经由所述分束器穿过所述显微物镜进入到所述样品空间,并且来自所述样品空间的样品光穿过所述显微物镜、经由所述分束器并随后经由所述第二光束偏转单元到达所述传感器。在这种情况下,所述光束偏转单元分别布置在与所述显微物镜的后焦平面光学共轭的平面中或至少布置在其附近,在远心光路的情况下,该后焦平面对应于所述显微物镜的光瞳平面。

背景技术:

1、共焦荧光成像为生物样品提供高对比度、高分辨率图像。与de 197 02 753 a1中类似,借助激光照明经由光束偏转单元逐点扫描样品,并且所生成的样品光借助同一光束偏转单元进行去扫描,使得来自每个样品位置的静止光束位于光轴上并借助共焦针孔被探测。由于该光阑,传感器基本上被离焦光屏蔽,从而获得高对比度。然而,由于逐点扫描而导致相对较长的采集时间是不利的。这还不可避免地导致由激发光引起的样品的高光毒性负荷。

2、逐点成像的这些缺点可以通过并行化来减小。例如,具有nipkow盘的共焦显微镜和光片显微镜,后者需要附加照明光学单元。在一种替代方案中,可以如ep 1 617 258 a1中那样借助线状照明实现并行化。为了至少在一个维度上(横向于照明线)实现共焦性,此处需要使用狭缝光阑进行线状探测,以抑制离焦光。沿所述线,分辨能力与宽场显微镜的分辨能力相当。

3、为了进一步提高横向于所述线的分辨能力(超过衍射极限的超分辨率),在由照明光束偏转单元进行去扫描之后,可以在探测光路中对样品光进行重扫描,为此使用一个光束偏转单元在共焦光阑下游沿横向使所述样品光在传感器上移动(de luca等人:“re-scanconfocal microscopy: scanning twice for better resolution”,biomedical opticsexpress 2013, vol. 4, no. 11, p. 2644)。样品的超分辨率图像的像素必须通过关联不同时间的不同像素的强度来计算。由于需要穿过大量光学界面,该光学布置具有显著光损失的缺点。

4、为了提高沿照明线的分辨能力,在重扫描方法期间,所述照明线还可以在其纵向方向上在强度方面被结构化(调制)(shen等人:“confocal rescan structuredillumination microscopy for real-time deep tissue imaging withsuperresolution”,advanced photonics nexus 2023, vol. 2 (1), p. 016009-1)。在这种情况下,样品上的每个位置必须在至少三个不同相位(线结构的不同相对位置)下被照明,并在相应数量的相位图像中成像。如宽场中的结构光照明显微术(structuredillumination microscopy,缩写:sim)的情况一样,必须通过关联所有相位图像来计算整体图像(解调)。

5、重扫描方法中使用的光学布置的低光灵敏度在结构化照明的情况下也仍然存在。此外,这些布置受限于特定的扫描显微方法,因此缺乏灵活性。特别是,共焦光阑使系统缺乏灵活性或至少使系统复杂,因为为了实现一定程度的灵活性,所述光阑必须被设计成能够以机械上高度精确的方式调节。此外,这种机械设定往往较慢。

技术实现思路

1、本发明所要解决的问题在于改进开头所述类型的显微镜,使探测光路得以简化,并由此实现更高的光传输效率以及因而更高的光灵敏度。至少在特定实施例中,还旨在实现显微镜的更大灵活性。

2、该问题通过具有权利要求1所述特征的显微镜来解决。

3、本发明的有利构型在从属权利要求中给出。

4、本发明规定,将第一光束偏转单元在光学上布置于光源与分束器之间,使得样品光绕过第一光束偏转单元而到达传感器,并且显微镜包括控制单元,该控制单元被配置为在一种运行模式中借助第二光束偏转单元使样品光束在传感器上移动。原则上,该移动起初独立于第一光束偏转单元的移动。根据运行模式,可以提供与第一光束偏转单元的同步。

5、样品光以绕过第一光束偏转单元的方式到达传感器;这可以称为非去扫描探测。与已知的重扫描显微镜不同,因此第一光束偏转单元的移动不被抵消,甚至也不由第二光束偏转单元抵消。由于扫描照明而依次从样品空间中的不同位置发出的光束(样品光束)因此以相对于光轴相应不同的角度入射到与显微镜的后焦平面共轭的每个平面上(并因此以相对于光轴不同的角度入射到第二光束偏转单元上)。根据本发明,在第二光束偏转单元上游不存在静止光束。令人惊讶地发现,即使在探测光路中恰好仅有一个光束偏转单元,也可以实现对应于重扫描的光束扫描。因此,在第二光束偏转单元下游也不存在静止光束(在第一运行模式中);相反,光束在通过第二光束偏转单元之后相对于光轴的角度随时间变化。

6、为了有利地提高分辨率,来自样品空间的光束的传播方向相对于光轴的角度甚至可以由第二光束偏转单元增大。该方法可以称为附加扫描。为此,控制单元可以被配置为在第一运行模式中借助第二光束偏转单元使样品光束以这样的方式在传感器上移动:使得中间像以放大的方式成像在传感器上。特别地,该移动可以使得以下商的绝对值大于1:第一角度与第二角度之商,其中,所述第一角度是从样品空间中的一个位置发出的样品光的光束的传播方向在紧邻第二光束偏转单元下游处与探测光学单元的光轴形成的角度,所述第二角度是该光束的传播方向在紧邻第二光束偏转单元上游处与显微物镜的光轴形成的角度。

7、在这种情况下,为生成样品在横向于照明线纵向方向上的超分辨率图像,对不同时间的传感器像素强度进行计算评估,对应于对以去扫描和重扫描方式获取的像素强度进行的已知评估(并由此使中间像在横向于照明线纵向方向的一个维度上以放大的方式成像到传感器上,优选放大2倍)。通过附加扫描而仅在一个维度上有效的2倍放大因子实现横向于照明线的分辨率的最大提高。

8、通过至少在第一运行模式中使第二光束偏转单元的移动能够与或已经与第一光束偏转单元的移动同步,例如通过控制单元或任何其他电连接,可以以较小的开销获得所述放大。特别地,控制单元能够以相同或近似相同的角振幅移动第一光束偏转单元和第二光束偏转单元,以通过附加扫描并利用仅在一个维度上有效的2倍机械放大来实现分辨率的最大提高。

9、对于第二光束偏转单元的机械技术要求低于常规重扫描布置中的要求。它只需满足与第一光束偏转单元相同的要求,因为——不同于现有技术——它无需扫描为后者两倍大的角振幅,否则例如对于检流计镜而言,可能导致线性化方面的问题,并且还会限制总体采集速度。

10、照明光路包括用于生成照明光的线状分布(“照明线”)的光束整形器(例如柱面透镜)的实施例是有利的。在这种情况下,所述线状分布可以沿其纵向方向进行强度调制,特别是周期性强度调制。优选地,通过光束整形器(例如为此包括空间光调制器)同时生成至少两个能够彼此干涉且存在于与显微物镜的后焦平面(bfp)光学共轭的平面中的线状光分布,使得这样的分布(“光图案”)出现在样品空间中。通过沿照明线进行结构化,可以通过在调制光分布的多个相位角下采集并评估原始图像来提高沿照明线的分辨率。优选地,光束整形器以如下方式生成照明光的分布:在样品空间中产生(经调制或未经调制的)照明线,该照明线由探测光路以在几何上平行于传感器像素行的方式成像到所述像素行上。

11、优选地,光束整形器可以反复地从照明光路中移除,特别是以电机驱动方式并由控制单元控制。因此,显微镜还可以在替代运行模式中使用宽场照明。可反复电机驱动移除使得能够实现很大的灵活性。作为可移除性的替代或补充,光束整形器可以包括空间光调制器(slm),特别是位于共轭光瞳平面(显微物镜的后焦平面)中的相位调制的slm。特别地,后者可以由控制单元控制,使得不同的照明光分布在样品空间中随时间交替出现。因此,可以选择性地产生未经调制的线状照明,或者借助光瞳平面/bfp中至少两个能够干涉的光分布在样品空间中产生经调制的线状照明。例如以50 hz至100 hz的频率,通过在slm上重写相位图案可以非常快速地进行切换。slm还允许在线状照明与点状照明之间快速切换,例如用于在样品观察与光学操纵之间交替。为此,有利地,第一光束偏转单元可以在二维上设定。

12、在特别有利的实施例中,第一光束偏转单元被设计用于在第一维度和第二维度上对样品空间进行二维扫描,所述第一维度横向于线状照明光分布的纵向方向,所述第二维度平行于该纵向方向。通过在第二维度上的移动,可以以较小的开销并在短时间内使照明光分布处于不同的相位角,以便能够采集提高分辨率所需数量的不同照明的原始图像。优选地,可以由控制单元实现该目的,该控制单元使第一光束偏转单元沿第二维度处于至少三个不同的位姿,其中,在沿第二维度的所述位姿处,照明光分布在样品空间中的所得位置中的两个彼此间隔小于照明光分布在纵向方向上的长度,特别是间隔一个强度调制光分布的周期长度或小于一个周期长度,并且特别地,为每个位姿创建单独的原始图像。

13、作为通过第一光束偏转单元使光图案沿(强度调制的)照明线移位的替代方案,这种移位可以分别借助位于照明光路中的可枢转的透明平行平板或电光相移器来实现。作为移位的替代,照明光路可以包括用于以强度调制照明光分布的不同相位角照明样品空间的光学单元,特别是空间相位调制器(影响相位的空间光调制器)和/或与四分之一波片组合的电光调制器。在该替代方案中,第一光束偏转单元可以有利地被设计为仅在横向于线状照明光分布纵向方向的一个维度上扫描样品空间。仅可在一个维度上设定的光束偏转单元成本较低且尤其更加稳定。

14、与需要13幅甚至15幅原始图像的常规sim图像采集相比,仅使用三幅原始图像即可计算结果图像。在这种情况下,可以借助第一光束偏转单元21的第二维度至少在照明线的纵向方向上选择样品空间的感兴趣区域(roi)。使用照明线可以极快地扫描并采集小的感兴趣区域。

15、在所有实施例中,传感器,特别是cmos传感器、emccd传感器、iccd传感器或spad阵列传感器,可以包括以与中间像共焦的方式布置的可停用线状电子光阑。优选地,电子光阑可以被实现为以适当方式操作的“滚动快门”,例如如wo 2006/008637 a1中那样,特别是在至少第一运行模式中,第一光束偏转单元的设定能够与或已经与光阑的动态位置(移动)同步(使得电子光阑的开口的相对位置与来自样品空间的照明线在传感器上的成像的位置一致)。电子光阑允许抑制离焦样品光,因此与机械共焦光阑一样,允许在轴向和横向两方面提高分辨率。然而,由于借助第二光束偏转单元进行放大成像,即使没有共焦光阑(光控制机构),也可以提高横向分辨率(横向于照明线)。通过根据不同照明相位角下的多个原始图像进行计算,也至少部分地抑制离焦光。轴向分辨能力的提高不受光阑的尺寸影响。然而,可以借助光阑的尺寸在信噪比与成像深度之间进行权衡。

16、使用具有电子光阑的传感器所带来的优点在于,可以在共焦探测与宽场探测之间快速切换,例如在连续的图像之间切换。

17、出于同步目的,优选地,传感器可以具有光片读出模式(hamamatsu的称谓),并具有一个输出端,在该输出端处提供关于光阑的位置和/或移动的信息,特别是指示传感器上的图像(“帧”)开始的信号。市售的具有这种模式和相应输出端的传感器可由hamamatsu获得:https://www.hamamatsu.com/eu/en/product/cameras/cmos-cameras/lightsheet-readout-mode.html。hamamatsu将该输出端称为“外部触发输出(external triggeroutput)”。有利地,控制单元与传感器和光束偏转单元电连接。

18、如下显微镜特别通用:控制单元与传感器和光束偏转单元电连接,并且所述控制单元在第一可选择运行模式中启用电子光阑并使第一光束偏转单元的移动、第二光束偏转单元的移动和电子光阑的移动同步;和/或,所述控制单元在第二可选择运行模式中启用电子光阑,使第一光束偏转单元的移动与电子光阑的移动同步,并使第二光束偏转单元在恒定位姿、特别是在中性位姿中运行;和/或,所述控制单元在第三可选择运行模式中停用电子光阑,并使第二光束偏转单元在恒定位姿中运行;和/或,所述控制单元在第四可选择运行模式中停用电子光阑,并如第一运行模式那样操作第一和第二光束偏转单元。

19、这样的系统可以在常规宽场模式(例如,利用灯作为光源进行非相干照明,该灯的照明光例如绕过第一光束偏转单元,例如通过显微镜的不同输出端,经由显微物镜被引导到样品空间中)中运行,或者在激光宽场模式(第三运行模式)、共焦模式(第二运行模式)和附加扫描模式(第一和第四运行模式)中运行,而无需对系统进行机械改动。此外,传感器还能够在其他运行模式中几乎同时进行相位测量(例如相位衬度、微分干涉衬度、强度传输方程、微分相位衬度)。所需的仅是使一个或两个光束偏转单元保持在其静止位置(中性位姿),并启用电子光阑且可选地相应设定其尺寸,或者将其停用。这可由控制单元例如通过软件容易且快速地实现。这使得能够实现使用常规重扫描系统无法实现的测量任务。尤其在对同一样品进行多模态采集的情况下,共用同一传感器通常是有利的,因为来自各种测量的数据于是已经以像素精度彼此对准。此外,由于各种方法仅需要一个传感器,因此成本更低。

20、因此,一种有利选择可以在于:控制单元在第三运行模式中将光束整形器从照明光路中移除;和/或,照明光的强度调制能够在第二运行模式中停用或已经被停用(使得样品空间中产生未经调制的照明线);和/或,控制单元包括用于从多个运行模式中选择一个运行模式的选择单元,并且控制单元在选择之后以所选择的运行模式操作显微镜,特别是在选择单元中还具有在分别具有不同光源的多个子模式之间的附加选择选项,特别用于第三运行模式。这使得能够以很小的操作开销实现灵活、成本有效的使用。

21、如下显微镜有利地紧凑且光效率高:由管镜生成的中间像与探测光学单元之间的探测光路不具有共焦视场光阑,特别是不具有狭缝光阑,并且特别是不具有与中间像共轭的像平面;和/或,由管镜生成的中间像与探测光学单元之间的探测光路恰好包含一个与显微物镜的后焦平面共轭的平面。

22、通过使共同光路在光学上位于中间像与分束器之间包括用于在第一光束偏转单元上或其附近以及第二光束偏转单元上或其附近生成与显微物镜的后焦平面共轭的平面的光学单元、优选扫描透镜,可以构造特别紧凑且光效率高的显微镜。由此,一方面,分束器布置在准直光中,因此可能的污染仅对其传递质量有较小影响。另一方面,这允许紧凑地耦合照明光路和探测光路,而无需如现有技术中那样进行附加准直。特别地,这可以消除对附加中继光学单元的需要。

23、特别有利地,在这种情况下,共轭平面(光瞳平面)可以由于在分束器处反射而产生,因此第一光束偏转单元位于反射的共轭平面内或附近,特别是共轭光瞳平面经透射而位于探测光路中的第二光束偏转单元上或其附近,使得第二光束偏转单元位于透射的共轭平面中或其附近。以这种方式,在探测光路中不需要附加光学单元;这将光学界面的数量保持为最少,从而使探测的光灵敏度最大化。透射进入探测光路(与反射布置相比)会改善对激发光的消光,因此在探测器处实现测量信号相对于激发信号的更高对比度。

24、优选地,照明光在其通往显微物镜的路径上以及样品光在其通往传感器的路径上均穿过由管镜生成的同一中间像。在该情形下,作为主分束器或主二向色分束器的分束器可以在光学上布置于第一光束偏转单元与由管镜生成的中间像之间。

25、有利地,通过照明与探测共享同一中间像,仅占用显微镜的单个光学端口。可能的其他输出端可用于其他用途,因此显微镜具有更大的灵活性。特别地,快速准共焦显微术可以以多模态方式与需要其自身输出端的其他方法相结合。因此,根据本发明的照明光路和探测光路的布置(分别通向和离开中间像),或者仅从中间像到传感器的探测光路的布置,可以有利地集成到单个模块中,从而降低制造和安装开销并实现更紧凑且更稳定的构造,其中,在具有照明光路和探测光路的组合模块的情况下,实际光源可以布置在模块之外并可光学连接或已经连接到该模块,例如借助光纤或通过自由光束输入耦合进入模块。与光片显微镜相比,此外仅需要以显微物镜形式存在的单个照明光学单元。

26、作为替代,显微镜可以包括生成第二中间像的第二管镜,其中,照明光在其通往显微物镜的路径上穿过第二中间像(例如在显微镜的第二光学端口处)。因此,例如,可以将现有激光扫描模块用于照明。在这种情况下,例如只有作为专用模块的探测光路在显微镜的第一端口处与第一中间像连接。

27、在一种可能的实施例中,分束器与探测光学单元之间的探测光路可以包括次级二向色分束器,该次级二向色分束器将样品光分为两个在光谱上不相交的分量,并将它们引导至传感器上的彼此不相交的区域或分别引导至相应传感器(例如如de 10 2021 134 427a1或de 10 2023 005 252 a1中那样),并且照明光路可以包括具有与第一光源不同的发射波长的第二光源。这样,可以同时采集与所述发射波长相关联的两个光谱范围,特别是两种不同荧光染料的两个光谱范围。第一光源和第二光源可以是同一光源,例如为多线激光器或宽带光源,特别是白光光源。为了精确结构化,两种颜色可以有利地在第一光束偏转单元处彼此叠加,其中样品中的照明图案的光栅常数相同。

28、有利地,第一光束偏转单元包括mems微镜,特别是能够围绕两个正交空间方向连续调节的mems微镜。因此,可以以紧凑、安静且成本有效的方式提供模块(具有分别直至中间像的照明光路和探测光路,或者仅具有从中间像开始的探测光路)。二维可调mems扫描器还具有如下优点:偏转镜始终位于光学光瞳/bfp中,这优化了照明焦点体积的定位精度。特别地,第二轴还可以用于沿照明线的纵向方向移动照明线,以生成结构化照明的不同照明相位角。此外,这允许限定照明区域和/或生成更长的(经调制或未经调制的)线或更均匀的(未经调制的)线。此外,第二轴可以用于产生沿照明线的非常小的移动,并且这些移动使线照明均匀化(无sim模式)。最后,如果借助第一光束偏转单元对样品进行光学操纵,这也保证良好的像场照明。

29、作为二维可调mems微镜的替代,第一光束偏转单元可以常规地由两个分别在一个维度上可调的反射镜形成,特别是检流计镜,优选具有将一个反射镜成像到另一个反射镜上的光学中继。

30、特别优选如下实施例:显微镜包括布置有显微物镜的镜架,特别是显微物镜布置在物镜转换器中,其中,镜架包括第一端口,在该第一端口区域内布置有管镜和中间像,以及具有另一管镜和另一中间像的至少一个另一端口,其中,借助至少一个第二分束器,特别是可反复移除的分束器,或者借助反射镜,可以将样品光同时或依次引导至两个输出端,其中,第一分束器、探测光学单元、传感器、第一和第二光束偏转单元以及扫描透镜布置在与所述端口之一在光学和机械上可拆卸连接的模块内。这允许提供具有高光灵敏度和短采集时间的可灵活使用的显微镜系统。

31、在另一实施例中,本发明还包括具有评估单元的显微镜,该评估单元接收来自样品空间中照明光分布的至少两个、优选三个不同相位角的多个原始图像,并根据所述原始图像计算在至少两个空间方向上分辨率提高的结果图像,特别是通过求解一个方程组,该方程组描述在空间域或频率域中对于各个相位角,未知样品与照明和探测的点扩散函数的卷积。

32、下文基于示例性实施例对本发明进行详细说明。