一种基于收敛式液态透镜阵列的三维重建方法和系统
本发明属于计算成像与半导体微纳检测领域,具体涉及了一种基于收敛式液态透镜阵列的三维重建方法和系统。
背景技术:
1、在微纳级的三维形貌在线检测领域,往往需要面对具有高纵横比、陡峭侧壁以及密集排列的复杂微观结构。这类结构不仅要求检测系统具备亚微米级的轴向分辨率,更对全视角形貌获取的完整性提出了严苛要求。
2、目前的微纳三维形貌检测主要依赖于白光干涉仪、激光共聚焦显微镜以及结构光投影等传统高精度光学技术。然而,在面对日益复杂的微纳检测需求时,现有技术存在以下显著瓶颈:
3、1. 垂直观测的遮挡效应与物理盲区:
4、传统的干涉、共聚焦等高精度显微系统多采用单轴垂直光路观测。针对高纵横比或具有隐蔽底部轮廓的微纳器件,垂直光路存在严重的视角遮挡盲区,无法获取侧壁及底部的完整三维形貌,难以满足复杂工艺的全方位质量把控需求。
5、2. 倾斜观测架构在微观三维重构中的“景深与特征”双重失效:
6、为解决单轴垂直观测的侧壁遮挡问题,目前的自动光学检测设备逐步引入了倾斜多视角成像架构以获取器件侧面信息。然而,现有系统多停留在二维缺陷识别层面。当试图利用多角度图像重构真三维形貌时,遭遇了双重技术鸿沟:一方面,高倍率显微物镜的瞬时景深极浅,导致倾斜视场内不可避免地出现大面积离焦模糊;另一方面,微纳器件表面往往缺乏丰富的纹理特征。面对特征单一且大面积离焦的显微图像序列,传统的计算机视觉匹配算法往往直接崩溃,难以实现密集的空间三维重构。
7、3. 物理调焦先验与多视角视觉匹配的协同不足:
8、在当前的微观计算成像工程实践中,利用焦栈序列的离焦深度恢复(dff)技术与基于多视角立体视觉(mvs)技术通常作为相对独立的技术路线发展。dff技术依赖光轴方向的对焦序列,但单轴观测存在物理盲区;而mvs技术虽具备多视角优势,但在处理微观极浅景深数据时,往往仅依赖纯视觉层面的“光度一致性”假设。目前的常规微观检测系统,较少将底层硬件的“光学焦度先验信息”(焦平面深度先验)作为约束条件直接引入到多视角视觉匹配的计算流程中。这种软硬件协同优化的不足,使得系统在面对陡峭侧壁或严重离焦模糊时,往往需要在重构形貌的完整度与匹配算法的鲁棒性之间进行妥协。
9、4. 缺乏物理约束导致的“虚像”伪影干扰:
10、许多微纳器件表面具有强烈的金属光泽或镜面反射特性。传统视觉重建算法主要基于“光度一致性”假设进行特征寻优。在面对高反光表面时,纯视觉算法极易受到随观测视角游移的反光亮斑欺骗。在缺乏底层物理光学硬约束的情况下,算法会在三维空间中错误交叉并计算出大量悬浮的“虚像”毛刺或伪影,严重降低测量数据的置信度。
11、5. 机械扫描带来的效率与稳定性制约:
12、现有高精度深度测量多依赖精密的机械z轴扫描来获取焦栈序列。在工业在线检测环境中,机械运动不仅受限于伺服系统的加速极限,难以满足高通量检测的极速节拍需求,且极易受现场微小振动影响,降低了系统的光学标定稳定性和检测鲁棒性。
13、因此,有必要提出一种能够突破微观景深限制、在计算流程中深度融合焦度物理先验与立体视觉且无需依赖机械z轴扫描即可实现复杂微观结构高保真、抗反光全视角重构的三维重建方法。
技术实现思路
1、针对现有微观三维形貌检测技术中单轴垂直观测存在物理盲区、多视角视觉匹配在显微浅景深下极易失效以及纯视觉算法极易受金属高反光干扰产生虚像伪影的问题,本发明提供了一种基于收敛式液态透镜阵列的三维重建方法和系统。本发明通过底层物理调焦先验与立体视觉特征匹配进行联合优化,实现无机械振动、抗反光干扰的高保真全视角三维重构,可实现微纳器件的三维重建。
2、为解决上述问题,本发明采用的技术方案如下:
3、第一方面,本发明提出了一种基于收敛式液态透镜阵列的三维重建方法,所述方法包括以下步骤:
4、1) 构建包含收敛式液态透镜阵列的成像系统并标定该成像系统,获得系统标定结果;
5、2) 根据预设的驱动电压序列控制成像系统中的收敛式液态透镜阵列依次变焦,同时成像系统采集待测器件在每个驱动电压下的多视角焦栈图像,从而获得待测器件在驱动电压序列下的多视角焦栈图像序列;
6、3) 根据系统标定结果和预设的驱动电压序列,生成焦平面深度先验序列;
7、4) 根据多视角焦栈图像序列,生成清晰度掩膜;
8、5) 根据系统标定结果、焦平面深度先验序列和清晰度掩膜,对多视角焦栈图像序列进行三维优化重建,获得待测器件的三维重建结果。
9、进一步地,所述收敛式液态透镜阵列包含直射液态透镜和收敛液态透镜,收敛液态透镜设置在直射液态透镜的侧方,收敛液态透镜用于改变光路方向,使得沿收敛式液态透镜阵列到待测器件方向的光束为收敛式结构。
10、进一步地,每个所述收敛液态透镜包含沿光轴间隔布置的液态透镜和棱镜,棱镜用于改变光束方向,使得沿液态透镜到待测器件方向的光束向直射液态透镜的光束靠拢。
11、进一步地,所述系统标定结果包含收敛式液态透镜阵列中各液态透镜的观测视角几何关系和液态透镜驱动电压与物方焦平面深度之间的标定映射关系。
12、进一步地,所述液态透镜驱动电压与物方焦平面深度之间的标定映射关系包括液态透镜的驱动电压与液态透镜的光焦度之间的非线性映射关系以及液态透镜的光焦度与物方焦平面的深度之间的标定关系。
13、进一步地,所述5)中,三维优化重建过程中的代价函数包括立体视觉项与焦度约束项,所述立体视觉项用于表征不同液态透镜对应观测视角之间的图像特征相似度,所述焦度约束项用于表征候选三维点深度与对应焦平面深度先验之间的偏差。
14、进一步地,所述三维优化重建过程中的代价函数为立体视觉项与焦度约束项的加权和。
15、第二方面,本发明提出了一种基于收敛式液态透镜阵列的三维重建系统,所述系统包括:
16、包含收敛式液态透镜阵列的成像系统,用于采集待测器件的多视角图像;
17、标定单元,用于标定成像系统,获得系统标定结果;
18、控制单元,用于根据预设的驱动电压序列控制成像系统中液态透镜的驱动电压;
19、处理单元,用于根据驱动电压序列、多视角焦栈图像序列和系统标定结果进行三维优化重建,获得三维重建结果。
20、进一步地,所述处理单元包含:
21、焦平面深度转换单元,用于根据系统标定结果和预设的驱动电压序列,生成焦平面深度先验序列;
22、清晰度掩膜生成单元,用于根据多视角焦栈图像序列生成清晰度掩膜;
23、三维优化重建单元,用于根据系统标定结果、焦平面深度先验序列和清晰度掩膜,对多视角焦栈图像序列进行三维优化重建,获得待测器件的三维重建结果。
24、本发明的有益效果包括:
25、1)突破空间干涉限制,减少复杂形貌观测盲区:针对单轴观测的盲区痛点,本发明通过棱镜或孔径分割元件配合平齐的液态透镜阵列,在紧凑封装空间内实现多视角收敛光路。该刚性集成结构能够从不同观测视角获取待测器件的顶部、侧壁及隐蔽区域图像,同时保持各视角间的相对位姿稳定,为高精度三维重建提供几何基础。
26、2)深度融合dff与mvs理论架构,破解显微浅景深重建难题:针对传统视觉匹配在显微极浅景深下的大面积失效痛点,本发明打破了离焦深度恢复与多视角立体视觉在底层逻辑上的割裂。本发明通过直接在原始离焦序列上提取高维清晰度掩膜以动态截断三维搜索空间,使多视角匹配算法仅在清晰、锐利的特征带内运行。该机制从根本上克服了高倍率显微离焦模糊导致的匹配崩溃问题,在无需压缩原始光学信息的前提下,实现了超越物理景深极限的高密集度重构。
27、3)引入底层物理约束,抑制高反光虚像干扰:针对半导体金属器件表面强烈的镜面反射特性,本发明在焦度-立体联合代价体积中引入由驱动电压标定得到的焦平面深度先验。当纯视觉光度约束受到游移反光亮斑干扰而生成悬空匹配候选点时,焦度约束项能够根据候选点深度与焦平面深度先验之间的偏差增加惩罚,从而减少高反光产生的虚像毛刺,提高工业量测数据的置信度与鲁棒性。
28、4)实现全固态极速扫描,高度适配高通量工业在线节拍:本发明彻底摒弃了传统高精度三维测量对精密机械z轴扫描的依赖,依靠液态透镜毫秒级的电控变焦特性与精准的同步触发机制,实现了无机械振动、高可靠性的全固态光轴扫描。这不仅规避了机械微震动对标定参数的破坏,更大幅缩短了三维图传数据的采集周期,契合现代半导体产线对自动化检测设备高通量运行的核心诉求。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com