连续可调结构光照明的超分辨显微成像方法与系统与流程

文档序号:15864727发布日期:2018-11-07 20:20阅读:380来源:国知局
连续可调结构光照明的超分辨显微成像方法与系统与流程

本发明涉及一种超分辨显微成像方法与系统,具体涉及一种实时/动态三维形貌和纳米级成像方法与系统,应用于激光共焦显微成像、生物荧光检测、微纳米形貌检测和微纳结构写入标记。



背景技术:

所谓超分辨率显微成像(Super resolution microscopy, SIM)是实现超过衍射光学极限的检测方法。一般地,受衍射光学极限的限制,小于光学系统成像分辨率的结构不能被分辨。如显微光学成像系统的分辨率为R=k1λ/NA,式中,k1为比例系数,λ为波长,NA为数值孔径,通过缩短波长、增大物镜的数值孔径NA等途径可提升的光学系统成像分辨率非常有限,其光学分辨率不会超过λ/2。而随着纳米技术的应用,对具有微纳结构样品的快速检测是分析过程中不可或缺的技术手段,在功能新材料、纳米集成器件、MEMS/NEMS研究中,微纳界面的表征与检测必须是无损方式;在生物工程研究中,需更高分辨率(纳米级)显微成像仪,对更细的结构特性检测与分析;在大尺寸纳米器件样品制备中,快速检测很关键。因此,纳米尺度的检测分析问题,本质上就是如何实现超分辨率显微成像的问题。

目前,在纳米尺度的检测仪器如电子显微(SEM)、原子力显微镜(AFM)、荧光共焦扫描显微成像(CSIM)等,不能完全满足大样品的快速检测分析要求,不能实现样品动态演变的检测。1、电子显微镜(SEM):可达10nm分辨率,需增加导电层才能进行结构检测,不适合无损检测的样品,不能用于活性生物样品的分析。同时,SEM串行工作方式,检测效率低,很难用于大尺寸样品的全场检测。2、原子力扫描探针(AFM probe):近几年来快速发展起来检测方法,运用微探针扫描,获得纳米级结构分布,但是,AFM的检测效率极低,检测时间长,对被检测样品的结构有诸多限制。不能实现快速检测和样品的动态分析。3、共焦扫描显微镜(CSIM):通过聚焦激光点在表面扫描共焦检测,获得样品三维形貌。成像分辨率取决于系统衍射光学极限λ/2。如405nm蓝光,共焦扫描显微极限分辨率为200nm,不能满足更小尺寸的检测要求。同时,采用扫描方式,由于时序的延迟问题,也不能用于样品的动态演变的检测分析。

因此,SEM、AOF、CSIM均是串行读写(扫描)方式的检测仪器,其共性问题是,被检测的结构越小、检测效率越低,不能用于纳米结构与动态演变样品的快速检测分析。

2000 年,美国加州大学的M.G.L.Gustafsson 教授研发的结构光照明显微技术(Structure Illumination Microscopy,SIM),为超分辨的光学显微成像开辟了一条新的路径。这个技术采用横向调制光照明样品,利用调制照明光将高空间频率信号编码到低频图像中。当知道照明光场分布和最终的低频叠加条纹后,原来无法观测的、精细的图像就可以通过后期计算的方式获取。美国专利US6376818 中描述结构光显微成像作为一种具有获得光学断层成像数据的成像技术,基于面扫探测方式使其具有对样本进行快速成像的潜力,该检测方法需要获得至少三种不同空间位相照明下的图像。

目前,有两种方法提供不同位相的结构照明光,一种是采用数字微镜阵列DMD作为空间光调制器 ( 例如中国专利,申请号200810071628.5,201110448980.8,201210402820.4),探测器进行曝光期间,数字微镜驱动版通过产生一系列的脉宽调制信号控制每个微镜开关状态的占空比,产生256 级不同亮度灰度图案,具有方便、输入输出简便等特点。但是,由于以DMD(1024X768,10.68um为例)是一种像素化的空间光调制器件,结构光的改变是数字化的,也存在诸多不足,1、数字微反射镜DMD的调制是靠单元微镜的转动对光线的反射实现的,从而导致结构光的条纹空频是按微镜单元的倍率(数字化)改变的,不能产生连续改变的结构光场。例如,产生(0,pi/2,pi)位相改变, 500 lp/mm的空频DMD最好调制水平。对于非0或90度的结构光场(60度,45度等),DMD对图像的旋转产生较大数字误差,使得结构光照明的位相调制精度显著下降。对检测样品的种类受到很大限制,横向分辨率和检测精度有待提高。2、连续光源照明用于检测,受环境的影响较大。例如,假设环境振动因素使样品(系统)振动速率达2um/s-5um/s,CCD检测时间40ms,那么,在检测期间,样品不稳定的范围达到80nm-200nm,最终检测结果上将叠加一个随机模糊量。考虑到荧光材料需要一定的激发能量,CCD需要一个积分接受时间,检测的时间约需要数十毫秒。因此,任何的系统不稳定,将会导致检测数据不确定性。这要求检测系统具有严格的隔振措施。3、相似地,采用大NA物镜光学系统可获提高结构光场的空频,但是,焦深(k1λ/NA2)也随之迅速减小,例如NA1.49,450nm波长,焦深仅为200nm。这对光学聚焦系统的稳定性提出极其严格要求。任何外界的微小变化将导致聚焦位置的改变,使得检测可靠性变差。必须系统要有严格的自适应控自聚焦措施。同时,由于DMD尺寸和物镜像差的限制,单次检测的视场小于20um。4、通过DMD的开断和调焦方式,对样品进行分幅采样,进行3D结构的合成,在系统稳定性不足的情况下,其3D结构的检测精度不会很高。

另一种是采用格栅作为光源的调制器,将具有单一空间频率的条纹格栅投射到样本,显微镜可以对条纹格栅投影到所在的焦面进行很好的成像,获得标记有锐利的条纹的样本层析图像,采用横向移动或旋转格栅的方式(美国专利US8081378B2,US8160379B2,US6819415B2)改变其相对空间位置,实现对结构照明光的相移,这种方式需要对格栅的位置移动进行严格的控制并与摄像机同步操作,成像速度慢且只能用于观察静态的样本。因此,中国专利201210553557.9利用三个中心波长相近但光谱互不重叠的窄带光或激光组成照明光,三路光通过各自独立的投影路径,把格栅投影到样品上获得照明结构光,再利用分光模块把不同波长的样品反射光投影到成像模块的不同感光区域并同时进行成像,该系统只能形成三种相移的照明结构光,且系统结构复杂;中国专利201210580743.1一种用于实现结构光照明的圆盘,将圆盘均分为九个扇形区域,在每个扇形区域上设有一个格栅,九个格栅依次分为分别包括三个格栅的第一格栅组、第二格栅组以及第三格栅组,第一格栅组中的每一个格栅倾斜角为负120 度,第二格栅组中的每一个格栅倾斜角为0 度,第三格栅组中的每一个格栅倾斜角为正120 度,每组格栅分为三个平行的格栅,且同组内格栅成像时,每个格栅的条纹横向偏移三分之一周期,只需旋转圆盘即可得到不同的格栅满足结构光照明模式需要,该系统可获得三组三种相移的照明结构光,相移量及格栅空频改变量有限、分立。

由于结构光照明是通过检测样品表面结构光场的位相分布,对位相分布“解包裹”,实现小于光学衍射极限的结构检测,即超分辨率成像。这里,从样品表面反射回来的结构光场携带了由样品结构引起的位相改变,结构光场起到“载频”作用,理论上,“载频”越高,位相改变的能力越大;结构条纹的相移越小,构建的图像精度越高。

因此,针对目前结构光照明显微成像存在的问题,获得连续空频改变的、高空频的结构光场,成为提高检测横向分辨率、快速显微成像动态目标的重要途径之一。



技术实现要素:

本发明的目的是提出一种连续可调结构光照明的超分辨显微成像方法与系统,以获得空间超分辨率成像,提升纳米检测可靠性和检测速度,同时实现样品的动态检测分析。

为实现上述发明目的,本发明采用的技术方案是:一种连续可调结构光照明的超分辨显微成像系统,包括计算机、光源、可变标度的傅立叶变换光路、位相分光器件、双远心投影光学系统、大数值孔径物镜、样品平台和面阵相机,所述的傅立叶变换光路包括第一傅立叶变换透镜或透镜组与第二傅立叶变换透镜或透镜组,所述位相分光器件置于第一傅立叶变换透镜或透镜组与第二傅立叶变换透镜或透镜组之间;所述位相分光器件与第二傅立叶变换透镜或透镜组之间的距离连续可调;所述位相分光器件具有绕傅立叶变换光路的光轴旋转的运动自由度。

上述技术方案中,所述光源可以是连续激光光源或脉冲激光光源,所述脉冲光源包括并不局限于纳秒脉冲激光光源、皮秒脉冲激光光源、飞秒脉冲激光光源等。脉冲激光器可提供频闪光源,调制频率可达1kHz,脉冲宽度:5ns-20ns。

所述光源可以是激光二极管光源。

在高功率激光光源下,系统可写入纳米结构;在纳秒激光光源下,纳秒时序的频闪分幅照明,不仅可实现超分辨率显微成像,提升纳米检测可靠性和检测速度,还可进行样品的动态检测分析,实现瞬态纳米结构的检测;本系统可进行样品的荧光显微检测;在采用不同波长的二极管光源照明时,在第二傅立叶变换透镜或透镜组后焦面产生的干涉条纹空频不同。

所述面阵相机可以是电荷耦合元件CCD 相机、互补金属氧化物半导体CMOS 相机或其它相机。

计算机控制光源、位相分光器件、双远心投影光学系统和样品平台的运动。

上述技术方案中,所述位相分光器件为一维光栅结构。或者,所述位相分光器件为二元光学结构。

上述技术方案中,位相分光器件在第二傅立叶变换透镜或透镜组的后焦面上形成纳米干涉条纹。

上述技术方案中,通过设置位相分光器件,其正负1级衍射光点分立傅立叶变换光轴两侧,并消零级光,当位相分光器件位于焦平面时,两衍射光点合二为一。

通过沿光轴连续改变位相分光器件的位置,可在第二傅立叶变换透镜或透镜组后焦面产生连续可变空频的干涉条纹。

通过绕光轴旋转位相分光器件,可在第二傅立叶变换透镜或透镜组后焦面产生不同取向的干涉条纹。

通过同时平移、旋转位相分光器件,可在第二傅立叶变换透镜或透镜组后焦面产生不同空频、不同取向的干涉条纹。

进一步的技术方案,所述系统中包括空间光调制器,所述空间光调制器位于光源与傅立叶变换光路之间。

上述技术方案中,第二傅立叶变换透镜或透镜组后焦面上的纳米干涉条纹、平台上样品以及CCD三者共焦。

上述技术方案中,根据需要,可以在光路中设置视场光阑、可变光阑。

一种连续可调结构光照明的超分辨显微成像方法,采用上述系统实现,激光束在扩束后,照射在第一傅立叶变换透镜或透镜组上后,由位相分光器件产生正负一级衍射光点,经过第二傅立叶变换透镜或透镜组,在后焦面形成干涉光场,再经过双远心投影光学系统和大数值孔径物镜的合束,在样品平台上形成纳米级细分光场;对物镜进行Z向调节,实现纳米精度聚焦,对样品形成具有纳米尺度的结构光照明,实现样品结构检测。与此同时,红光像散光路与反射的绿色荧光分别进行自动聚焦光学检测(纵向)和对准照明(横向)与检测,CCD与样品处于共轭共焦位置,可直接检测到反射的结构光场的位相分布,偏振分束和双色分束镜保证各波长互不干扰。

进一步的技术方案,所述激光束在扩束后,经过空间光调制器(数字微反射镜,digital micro-mirror,DMD)再照射到第一傅立叶变换透镜或透镜组上。

上述技术方案中,位相光学元件可以采用位相光栅。位相光栅是一种消除零级光的光栅,其正负一级衍射光点处于第一傅立叶变换透镜(组)焦平面上,分立光轴两侧,两光点的距离与位相光栅到焦平面的距离成正比,位相光栅距焦平面的距离越大,光点分开的距离越大,当位相光栅位于焦平面时,两衍射光点合二为一。因此,移动位相光栅,光点距离实现了连续变化。这样,在第二傅立叶变换透镜(组)的后焦面上形的干涉条纹(光场)空频将连续改变。

上述技术方案中,含有干涉条纹的光场,经过后继的投影微缩光学系统,空频被进一步提高。设投影光学系统缩微倍数为M,f为傅里叶变换透镜焦距,F为位相光栅grating空频,则在样品上的结构光场的干涉条纹的空频为Fn=M/PN=2(f-dz)FM/f,位相光栅grating平移带来的样品上的结构光场的位相变化率为ΔFn=|2ΔzFM/f|。这里,Δz为位相光栅grating到焦平面距离的改变量。

上述技术方案中,设在系统中的tube lens焦距f=200mm,物镜(NA0.95)的焦距1mm,F=120 lp/mm,取dz=0则样品上的结构光场的干涉条纹空频可达5000 lp/mm(200nm周期)。设光栅位移精度为Δz=5μm,则本系统可支持0.05pi位相改变,能够实现200nm×0.05 = 10nm位相结构变化与相应的位相分辨的检测,从而获得超过衍射极限的分辨率(~10nm)的显微成像。

上述技术方案中,结构光照明不仅可用一维的干涉条纹(光栅结构),也可用二元位相元件替代位相光栅,产生的二维结构光场,用于结构光照明,获得二维空频可调的结构光场。

由于上述技术方案运用,本发明与现有技术相比具有下列优点:

1,纳米级的结构光照明,可获更高分辨率。

基于位相光学元件的结构光照明,其干涉条纹具有200nm*0.05 = 10nm位相结构变化能力,比已报道的其他方法至少提高一个量级,不但无数字误差,且可连续地改变结构光场中条纹空频和取向,从而,能够获更精细的位相结构变化,实现超分辨率3D显微成像,适应更高精度、更复杂形貌的快速检测。

2,纳秒激光频闪照明,保证更高的检测可靠性。

在连续变空频干涉条纹结构照明的基础上,本方案采用脉冲激光光源,用纳秒时序照明,每帧照明时间5纳秒-20纳秒。假设,样品振幅达5mm/s,在20纳秒照明内,检测结果受振动影响的模糊量小于0.4nm。从而,纳秒时序照明方法,克服了环境振动的影响,消除了连续光源调制带来的检测不可靠性,保证了更精细的位相变化信息的检测精度。

以纳秒脉冲宽度20nm,用位置触发方式,可确保定位精度±1脉冲,理论上,在激光干涉定位下,具有±1nm重复定位精度,RMS精度可达亚纳米水平。

3,分频照明,可获更高精度3D数据检测。

重复频率的频闪照明,如每幅照明时间20ns,光场尺寸80um,在检测期内,可进行数百帧以上的检测图像。这样,不仅可通过空频变化来检测和校验3D样品的检测,还可进行对样品的动态演变的检测,获得结构更精细的3D形貌。

4,更强的环境适应性,可实现更高的检测效率。

作为对比,NA0.95显微物镜,焦深一般在200nm-300nm,检测受环境振动影响很大,可靠性很难保障。利用连续空频照明的干涉光路,位相光栅的尺寸可以做到20mmx200mm,因此,结构光场的尺寸(视场)可达80um以上,这样,结构照明的条纹箱深度(景深)达10um,通过对连续样品的采样与合成,实现大视场3D形貌检测。

5,在低功率照明下,本方法可进行样品的荧光显微检测。在高功率照明下,系统可写入纳米结构。

附图说明

图1 连续可变空频结构光照明的光路系统;

图2 连续可调结构光照明超分辨显微成像系统;

图3 位相元件靠近第一傅立叶变换透镜时的傅立叶变换系统;

图4 位相元件远离第一傅立叶变换透镜时的傅立叶变换系统;

图5 位相元件绕光轴旋转时的傅立叶变换系统;

图6 空间调制的连续可调结构光照明超分辨显微成像系统;

图7 连续分频结构光照明进行动态检测的步骤;

图8 空间调制的大幅面连续可调结构光照明超分辨显微成像系统;

图9 不同波长下变频光路系统;

图10 位相元件为二维正交光栅时的傅立叶变换系统。

具体实施方式

下面结合附图及实施例对本发明作进一步描述:

实施例一:可连续可调结构光照明光路系统

本实施例中可连续可调结构光照明光路系统两条光线的传播示意图如附图1所示,其中主光线经过位相光栅grating后产生的一级衍射光与光轴夹角为α,然后,经过透镜准直后,与光轴的夹角为β,其中位相光栅grating周期为P,消除零级光后,正负一级衍射光在输出平面的光场内,相互干涉后得到的条纹(光栅)周期为PN。4f光学系统的焦距为f,位相光栅grating与前透镜距离为dz,主光线与焦平面的夹角为O,由O点发出的平行光与光轴的距离为h,由O点发出的平行光经过后透镜后的光线与主光线经过后透镜后的光线平行。在可变标度的傅立叶变换系统上,位相光栅grating在透镜后的会聚光上的连续平移,将使得正负一级衍射光焦点间距连续改变,在输出光场内干涉条纹实现了结构光空频的连续改变,这样,就有下列关系:

,所以,,,

由于最后用正负一级光干涉,所以。

如果用近轴近似:。

含有干涉条纹的光场,经过后继的投影微缩光学系统,空频被进一步提高。设投影光学系统缩微倍数为M,f为傅里叶变换透镜焦距,F为位相光栅grating空频,则在样品上的结构光场的干涉条纹的空频为Fn=M /PN=2(f-dz)FM/f,通过改变dz取得的干涉条纹的空频为[0,2FM]lp/mm。

位相光栅grating平移带来的样品上的结构光场的位相变化率为,ΔFn=|2ΔzFM/f|。

这里,Δz为位相光栅grating到焦平面距离的改变量。

本实施例中,位相光栅F=120 lp/mm,在系统中的tube lens焦距f=200mm,物镜(NA0.95)的焦距1mm,样品上的结构光场的干涉条纹空频[0,5000]lp/mm,其中最大值5000 lp/mm(200nm周期)在dz=0时取得。图2中的光栅位移精度为Δz=5μm,本方法可支持0.05pi位相改变。因此,能够实现200nm*0.05 = 10nm位相结构变化与相应的位相分辨的检测。理论上,可获超过衍射极限的分辨率(~10nm)的显微成像。

本实施例中所述结构照明不仅可用一维的干涉条纹(光栅结构),也可用二元位相元件替代位相光栅,产生的二维结构光场,用于结构光照明,获得二维空频可调的结构光场。

本实施例中所述傅立叶变换系统包括任意形式或组合的傅立叶变换光学系统。

实施例二:大幅面连续可调结构光照明超分辨显微成像系统。

如附图2所示,本实施例中的连续可调结构光照明超分辨显微成像系统包含纳秒脉冲激光12,空间滤波器13,第一傅立叶变换透镜8,衍射光栅9,第二傅立叶变换透镜10,视场光阑16,实时检测光路17,半透半反镜18,tubelens19,微缩物镜30,自动聚焦光路31,二维精密平移台32,运动控制器33,控制计算机34,检测样品35。

实施例中纳秒脉冲激光12发出的激光经空间滤波器13扩束准直后形成平行光进入由第一傅立叶变换透镜8,衍射光栅9,第二傅立叶变换透镜10构成的光栅空频和角度连续调制光路,在第二傅立叶变换透镜10后的区域形成指定空频和取向的光栅条纹信息,在第二傅立叶变换透镜后焦面上设置有视场光阑16用于限制干涉条纹的成像区域,透过视场光阑的光栅条纹经过半透半反镜18,tubelens19和微缩物镜30在检测样品35表面上形成具有高频结构的细分条纹。自动聚焦光路31监控并实时调整聚焦物镜与检测样品35表面的距离,保证高频光栅条纹在感光材料表面精确成像,实现纳米精度聚焦,对样品形成了具有纳米尺度的结构光照明,用于样品结构检测。实时检测光路17对样品35表面条纹的位相变化实时成像,这里CCD与样品处于共轭共焦位置,可直接检测到反射的结构光场的位相分布,偏振分束和双色分束镜保证各波长互不干扰。通过对这种位相变化解包裹,实现对样品表面形貌的横向检测,结合自动聚焦光路实现对样品表面形貌的纵向检测,实现样品35的三维形貌检测。运动控制器33在控制计算机34设定的程序下控制衍射光栅9的移动或转动或同时移动和转动,实现光栅条纹的空频或取向或空频和取向的连续变化,获得一种以上的反射结构光场的位相分布,实现样品35的超分辨率三维形貌检测。

若检测样品35的幅面大于检测系统的照明光场尺寸,运动控制器33在控制计算机34设定的程序控制下协调纳秒脉冲激光12的脉冲时序、衍射光栅9的移动和转动以及二维精密平移台32的二维移动,通过样品表面不同区域的三维形貌检测,实现大幅面样品的三维形貌检测。

实施例三:分幅结构光场照明检测方式

本实施例中采用附图2所示的系统,可采用不同空频的分幅结构光场照明检测方式。在同一个傅立叶变换光路系统中,衍射光栅9在计算机的控制下,沿光路系统的光轴平移,从而使得衍射光栅离第一傅立叶变换透镜8的位置不同,产生的结构光照明的空频也不同,如附图3、附图4所示。

在本实施例中,衍射光栅F=120 lp/mm,在系统中的tube lens焦距f=200mm,物镜(NA0.95)的焦距1mm,当衍射光栅9与第一傅立叶变换透镜8距离dz为20mm时,如附图3所示,其产生的结构光照明空频为4500lp/mm;当衍射光栅9与第一傅立叶变换透镜8距离dz为80mm时,如附图4所示,其产生的结构光照明空频为3000lp/mm。这样系统投射在样品表面的结构光的空频不同。

本实施例中采用附图2所示的系统,还可采用不同取向的分幅照明检测方式。在同一个傅立叶变换光路系统中,衍射光栅9的在计算机的控制下绕光轴旋转,自P1方向旋转θ角后至P2方向,如附图5所示,当衍射光栅9在P1位置时,照明光栅在xy平面内,其光栅条纹与P1方向垂直,当衍射光栅在P2位置时,照明光栅在xy平面内,其光栅条纹与P2方向垂直,两种光栅条纹之间的夹角为θ,即当衍射光栅绕光轴旋转时,其在傅立叶变换透镜后焦面形成的光栅取向不同,从而通过旋转衍射光栅可实现不同取向的结构光照明。

在本实施例中,衍射光栅9在x1y1平面内,当衍射光栅在P1位置(即y1方向)时,其在后焦面形成的光栅在xy平面内,光栅条纹垂直于P1方向(即与y1平行的y方向);当衍射光栅在P2位置(即与y1方向夹20度角)时,其在后焦面形成的光栅在xy平面内,光栅条纹垂直于P2方向(即与y方向夹60度角)。

本实施例中采用附图2所示的系统,还可采用特定空频和特定取向的分幅照明检测方式。在同一个傅立叶变换光路系统中,衍射光栅9的在计算机的控制下沿光轴平移或绕光轴旋转,在傅立叶变换透镜后焦面形成的光栅不同的空频和取向,从而通过平移、旋转衍射光栅可实现不同取向的结构光照明。

本实施例中,按照附图3、附图4与附图5所示的原理,当衍射光栅F=120 lp/mm,在系统中的tube lens焦距f=200mm,物镜(NA0.95)的焦距1mm,当需要产生结构光照明的空频为2500lp/mm时,根据公式Fn =2(f-dz)FM/f,解得dz=f(1-Fn/(2FM)),则衍射光栅9与第一傅立叶变换透镜8距离dz为100mm;当需要产生结构光照明的空频为1500lp/mm时,根据公式dz=f(1-Fn/(2FM)),衍射光栅9与第一傅立叶变换透镜8距离dz为140mm;当需要产生结构光照明的空频为500lp/mm时,根据公式dz=f(1-Fn/(2FM)),衍射光栅9与第一傅立叶变换透镜8距离dz为180mm。当希望取得结构光照明的条纹取向与P1方向顺时针方向夹60度角时,则将衍射光栅9顺时针沿绕光轴方向旋转60度角;当希望取得结构光照明的条纹取向与P1方向顺时针方向夹90度角时,则将衍射光栅9顺时针沿绕光轴方向旋转90度角;当希望取得结构光照明的条纹取向与P1方向逆时针方向夹30度角时,则将衍射光栅9逆时针沿绕光轴方向旋转30度角。

如本实施例所示,本系统可采用不同空频的结构光分幅照明方式;采用相同空频、不同取向的结构光分幅照明方式和采用特定变空频和取向的结构光分幅照明方式。

实施例四:采用DMD与连续变空频的相互调制的结构光照明

本实施例中采用DMD与连续变空频的相互调制的结构光照明系统,如附图6所示,包含纳秒脉冲激光12,空间滤波器13,反射镜14,DMD空间光调制器15,第一傅立叶变换透镜8,衍射光栅9,第二傅立叶变换透镜10,视场光阑16,实时检测光路17,半透半反镜18,tubelens19,微缩物镜30,自动聚焦光路31,二维精密平移台32,运动控制器33,控制计算机34,检测样品35。

本实施例中纳秒脉冲激光12发出的激光经空间滤波器13扩束准直后形成平行光入射到DMD空间光调制器15上,DMD空间光调制器作为可变光阑用于控制平行光束的光斑尺寸和形状,经过DMD空间光调制器反射的光线进入由第一傅立叶变换透镜8,衍射光栅9,第二傅立叶变换透镜10构成的光栅空频和角度连续调制光路,在第二傅立叶变换透镜10的后焦面上形成指定空频和取向的光栅条纹,后焦面上设置有视场光阑16,透过视场光阑的光栅条纹经过半透半反镜18,tubelens19和微缩物镜30在样品35上形成高频光栅条纹。通过对这种位相变化解包裹,实现对样品表面形貌的横向检测,结合自动聚焦光路实现对样品表面形貌的纵向检测,实现样品35的三维形貌检测。运动控制器33在控制计算机34设定的程序下控制衍射光栅9的移动或转动或同时移动和转动,实现光栅条纹的空频或取向或空频和取向的连续变化,获得一种以上的反射结构光场的位相分布,实现样品35的超分辨率三维形貌检测。

实施例五:采用连续分频的结构光照明,用于动态样品检测的时序。

本实施例中,无论是如附图2还是附图6所示的检测系统,其连续分频结构光照明进行动态检测的步骤如附图7所示,首先,样品平台预扫描,通过位置传感器标定纵向位置,建立标准数据库;其次,将需检测物品置于检测平台;第三,预扫描检测样品,通过与标准库快速比对获得采集点的纵向自动聚焦位置;第四,电机驱动平台x,y方向平移,位置传感器z方向自动聚焦;第五,分幅照明,获得多帧不同空频或取向结构光照明下的检测图像;第六,判断是否扫描完毕,如未完毕,则移动到下一位置继续检测,如完毕则进行相应算法处理,构建检测物品的3D形貌。

本实施例中,数值孔径为NA0.95的显微物镜,焦深一般在200nm-300nm,检测受环境振动影响很大,可靠性很难保障。利用连续空频照明的干涉光路,衍射光栅的尺寸可以做到20mmx200mm,因此,结构光场的尺寸(视场)可达80um以上,结构照明的条纹箱深度(景深)达10um。

本实施例中分幅照明即重复频率的频闪照明,如每幅照明时间20ns,光场尺寸80um,在检测期内,可进行数百帧以上的检测图像。这样,不仅可通过空频变化来检测和校验3D样品的检测,还可进行对样品的动态演变的检测,获得结构更精细的3D形貌;此外,通过对连续样品的采样与合成,实现大视场3D形貌检测。

实施例六:大幅面分幅结构光场照明检测方式

本实施例中,基于实施例五中采用连续分频的结构光照明,用于动态样品检测,若实现高精度大幅面分幅结构光场照明检测方式,其检测系统也可以如附图8所示。其中,自动光路31采用两种不同波长的照明光源311和312,其中311与18、30和313单元构成自动聚焦检测光路,实现垂直于运动平台的自动对焦功能;312与18、30和313单元构成自动定位光路,实现平行于运动平台方向的检测光场的无缝拼接。结合分幅结构光场照明方式,实现高精度的大幅面动态检测。本实施例中的自动光路31可应用于如附图2或附图6所示的检测系统中。

实施例七:采用按照傅里叶级数展开的结构光场照明的3D结构检测

本实施例中,任何表面形貌样品展开的傅立叶级数中,低频部分反映表面形貌的低梯度部分特点,即形貌轮廓或形状;高频部分反映表面形貌的高梯度特点,即细节或突变;频率越高则反映的细节程度越高。因此连续变频的结构光照明,可实现物体的高分辨率3D结构检测。

本实施例中根据上述检测系统原理,样品上的结构光场的干涉条纹的空频为Fn=M /PN=2(f-dz)FM/f,通过改变dz取得的干涉条纹的空频为[0,2FM]lp/mm;当衍射光栅9平移带来的样品上的结构光场的位相变化率为ΔFn=|2ΔzFM/f|,则Δz=ΔFnf/(2FM),其中Δz为衍射光栅9到焦平面距离的改变量,正负符号表示衍射光栅9沿光轴平移的方向。

本实施例中,当衍射光栅F=120 lp/mm,在系统中的tube lens焦距f=200mm,物镜(NA0.95)的焦距1mm,产生结构光照明的空频为[0,5000]lp/mm,当运动控制系统改变衍射光栅9的位移量为0.5um时,引起的条纹空频改变为0.0125lp/mm;如需以1lp/mm的步长改变系统产生的结构光照明的空频,则衍射光栅9的位移量为0.04mm。

因此,本系统可实现按照傅里叶级数展开的结构光场照明的3D结构检测。

实施例八:采用不同波长

本实施例中,附图2、附图6和附图8所示的系统中,可采用连续激光光源、脉冲激光光源和激光二极管光源等各种类型的光源,也可采用各种波长或不同波长的光源。

本实施例中分别采用三种波长(λ1>λ2>λ3)作为光源,由于透镜对不同波长入射光的折射能力不同,在相同的光路系统中,如附图9所示,不同波长的入射光经过第一傅立叶变换透镜后,照射在衍射光栅上位置及入射角度不同(θ1<θ2<θ3),根据光栅方程,其正负一级衍射角为arcsin((d*sinθ-λ)/d)(d=1/F,光栅周期),因此θ1<θ2<θ3;而与光轴重合的入射光相应的正负一级衍射光随着入射波长的减小而减小(θ1’’>θ2’’>θ3’’),从而在同一光路系统中,不同的入射光正负一级衍射光在焦平面的距离不同,波长越短,其在焦平面的距离越小,最终在第二傅立叶变换透镜后焦面形成的干涉条纹空频也越小。

本实施例中也可采用不同的波长,结合衍射光栅的平移和旋转,根据检测需要,实现不同空频变化范围的结构光照明检测。

实施例九:采用二维位相调制元件,形成二维结构光照明

本实施例中,一种光栅空频和取向连续可变的二维结构光照明方法,包括焦距为f1的第一傅立叶变换透镜8与焦距为f2的第二傅立叶变换透镜10透镜构成的4F光学系统和衍射光栅9。所述衍射光栅9位于第一傅立叶变换透镜与第一傅立叶变换透镜的焦距之间,所述衍射光栅为各种形状的二维光栅结构。衍射光栅可以沿着光轴11移动,也可以绕着光轴11转动。通过移动衍射光栅9改变衍射光栅与第一傅立叶变换透镜之间的距离dz,实现所述光栅空频Λ参数的连续调制。通过旋转衍射光栅9,实现所述光栅取向角θ参数的连续调制。如附图1所示。

本实施例中,所述衍射光栅9可以是各种形式的二维光栅结构,当衍射光栅9为矩形正交二维光栅时,如附图10所示,其在傅立叶变换透镜的后焦面形成正交二维点阵。

本实施例中,所述衍射光栅9为正交光栅,位于在x1y1平面内,x1方向F1=200lp/mm,y1方向F2=250lp/mm,当tube lens焦距f=200mm,dz=100mm时,在xy平面内实现二维点阵结构光照明,若微缩倍数M=25,产生结构光照明的二维点阵在对应方向上的空频分别为Fn1=5000lp/mm,Fn2=6250lp/mm,当衍射光栅9沿光轴平移时,其在两个方向上的空频变化范围为[0,10000]lp/mm和[0,12500]lp/mm;衍射光栅9可绕光轴转动,改变结构光照明的光栅取向。

本发明的连续变空频脉冲频闪结构光照明与已有方法的性能对比表:

总体上,在连续空频调制的干涉条纹(光栅)形成方法,位相变化更精细,更高,纳秒时序照明与位相采样、可检测动态演变过程和3D结构。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1