一种基于超构透镜阵列的超紧凑型光谱光场相机系统的制作方法

本发明属于光学成像的技术领域，涉及到一种基于超构透镜阵列的光谱光场相机系统及斜入射的离轴聚焦的相位设计方法。

背景技术：

自然界的生物具有很多高度特殊的视觉系统，比如皮皮虾的眼睛可以感知到从紫外到红外的12种波长通道的电磁波，且视网膜具有16种光学接受器，既可以感知光谱信息还可以感知到深度信息。受到自然界生物的启发，如今已经研究出能够记录更多信息的成像系统，如光场相机、光谱相机。光场相机除了记录场景二维平面上的强度信息，还包含场景的深度信息。光谱相机除了记录二维空间信息，还记录了场景的一维光谱曲线。为了实现完整的全光函数，计算光学领域利用一些传统的光学元件如光栅、棱镜、掩模板、微透镜阵列等添加到成像光路中来获取光谱和光场信息。但是，基于这些传统的光学元件组成的系统很难实现小型化的轻量成像系统；同时限于微加工水平，在微小尺度下加工复杂的曲面微透镜阵列具有很大的难度。目前为止，提出的光谱光场成像系统在实际使用中受到非常多的限制，如结构复杂，光谱分辨率和通光量不高。

超构表面在系统的小型化设计上显示出极大的优势。超构表面由密集的亚波长超构单元排列组成，具有精确控制相位、强度、极化、轨道角动量和入射光频率的能力。超构透镜是超构表面的最主要的光学应用。通过调制亚波长超构单元的几何尺寸和转角，设计的超构透镜可以实现与商用透镜相当甚至更好的成像效果。

技术实现要素：

本发明目的是，基于超构透镜阵列设计实现可见光波段的光谱光场相机系统。通过引入超构表面的设计原理，在可将光波段实现斜入射情况下波长相关的侧向离轴聚焦。利用波长相关的侧向离轴聚焦，实现了超薄的色散透镜。将该色散透镜贴在cmos相机的镜头上，可以获得色散模糊的图像，从色散模糊的图像能够重现出3d空间信息和光谱信息，从而实现光谱光场成像的功能。所述的光谱光场相机系统获得的光谱信息与光谱仪获得的光谱信息基本吻合，可应用于材质鉴别上。

本发明的技术方案是，一种基于超构透镜阵列的超紧凑型光谱光场相机系统，同时获取场景的三维位置信息和光谱信息。该相机系统包括(1)平行光源镜头，(2)线偏振片，(3)四分之一波片、(4)物镜，(5)超消色差超构透镜阵列，(6)单色相机；所述的超消色差超构透镜阵(5)列置于两个依次排列的线偏振片(2)、四分之一波片(3)和物镜(4)组成结构之间，相机(6)置于像面上用于接受图像，实现相机单次曝光可同时记录场景的三维位置信息和光谱信息，并且具有很高的光通量。

超消色差超构透镜阵是由超消色差超构透镜在平面上按一定规律排列而成的二维透镜阵列平面。所述的超构透镜是利用相位拆分原理，即将相位分解为波长无关的基础相位和随波长变化的补偿相位，分别称为几何相位和共振相位。利用超构表面的特殊设计，实现不同波长对应于焦平面上不同聚焦位置的消色差平面透镜；

根据超构透镜离轴聚焦的功能要求，波长为λ的平面波，斜入射角θ(角度定义从x轴右下方入射为正)，，聚焦在任意位置(x',y',f)，平面透镜上某一位置(x,y,0)需要补偿的相位为如式(1)所示：

设红光聚焦在(xr,0,f)，蓝光聚焦在(xb,0,f)，其余波长的焦点分布在这两点之间。根据式(1)可以得到红光和蓝光的相位差如式(2)所示，f是单个超构透镜的焦距：

上式中由共振的纳米结构提供，来实现蓝光到红光的正值相位补偿。将所述的任意波长下产生的相位利用相位拆分原理得到式(3)所示的两部分：

式(3)中第一项利用超构表面单元的几何相位实现，第二项利用共振相位实现。是增加的相位差。

基于超构透镜阵列的光谱光场相机系统的设计原理：环境光经过所述的线偏振片、四分之一波片调节形成圆偏振光，物镜对圆偏振光聚焦形成虚像，超构透镜阵列将包含不同入射方向、不同波长、不同位置的光谱信息和光场信息以色散模糊的分块子图像同时记录在相机中。每个子图像对应于一个超构透镜。通过对每个子图像进行光谱重建，获取不同波长下的子图像，再对不同波长的子图像进行光场重构，获得不同波长下的场景图像。最后，将不同波长下的场景图像按照光谱信息组合成彩色图像。

设计具有离轴聚焦性质的超消色差超构透镜，利用不同波长下超构透镜聚焦位置的变化，实现光谱的色散。通过应用超消色差超构透镜阵列，实现相机单次曝光可同时记录场景的三维位置信息和光谱信息，并且具有很高的光通量。本发明采用超构表面的波前设计原理结合计算成像和深度学习算法，能够实现三维成像以及材料鉴别。

超构透镜阵列是由单个波长相关的侧向离轴聚焦超构透镜按一定规律排列而成。侧向离轴聚焦的超构透镜是根据超构表面的相位拆分的设计原理实现的。

超构透镜阵列：实验上利用电子束光刻与反应离子刻蚀相结合制备的按照一定规律排列的大约48×48个二氧化钛(tio2)超构透镜阵列。采用自上而下的蚀刻工艺来实现tio2超构透镜的批量制造，提高产量，同时减少了时间消耗。

白光照射的不同波长光经过超构透镜聚焦在轴向距离固定的成像平面的不同位置，且波长引起的聚焦位置变化能够被cmos相机分辨。由相机捕获的色散图像可以进一步利用计算成像和深度学习算法，重建出具有空间信息和光谱信息的四维图像。

单个超构透镜能够实现二维成像，而超构透镜阵列能够实现三维空间成像。每个超构透镜记录了一个视角的场景子图像，每个子图像包括了多个像素。

本发明所述的侧向离轴聚焦超构透镜实现的是不同波长下光在同一焦平面上的侧向离轴聚焦，离轴聚焦的目的是将不同波长的光色散开。

本发明所述的超构透镜阵列将包含不同入射方向、不同波长、不同位置的光谱信息和光场信息以色散模糊的分块子图像同时记录在相机中。从相机获得的图像是色散模糊的，因此需要进行光谱重建。

利用超色差超构透镜阵列，实现光场多光轴成像特性的光谱重建算法如下。首先，根据色散模型解开色散混叠，从而获得对齐的多波长图像，如式(4)所示：

式(4)中s是待求解的清晰图像，d是相机捕获的色散图像，φ是色散矩阵。式(4)中第一项是成像模型的数据残差项，第二项是约束图像数据分块平滑项，第三项是光谱平滑约束项。

利用式(4)求解出无色散的清晰图像后，使用此图像信息来重建高光谱图像，如式(5)所示：

式(5)中第一项依然是成像模型的数据残差项，第二项是模糊差分约束项，第三项是光谱先验约束项。m是子图像的边缘掩模板。⊙是逻辑运算符，表示同或运算，即两边输入变量值相同时结果为1。

由此得到光谱图像后，利用深度学习进一步提高光谱的分辨率。利用深度神经网络提出了数据驱动的光谱超分辨率算法。将配对的低分辨率(8nm)光谱数据和高分辨率(4nm)的光谱数据作为输入和输出来训练光谱超分辨网络。配对的光谱数据的空间信息是一个像素对应一个像素。

根据上述的计算成像算法和深度学习的图像处理，可以获得本发明的所述的场景的3d空间位置信息和光谱信息。

超构透镜由40-200*40-200个超构透镜排列形成；每个超构透镜由六角形柱状或者凹槽状结构按照相位要求排列构成，六角形柱状或者凹槽状结构的周期是330nm，高度是800nm；每个超构透镜的焦距是165±100um，直径是30±10um，数值孔径na值为0.09；此处超构透镜的设计针对的是斜入射光，入射角度为16°左右，实现可见光范围内不同波长在焦平面上色散的最大距离为25um；对可见光波段选择二氧化钛、氮化镓、氮化硅材料；对于近红外波段，选择硅作为材料；上述材料在对应波段都具有透过率高，损耗低的特点。

综上所述，上述成像方法的设计及附图仅为本发明的较佳实施例而已，并不用以限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，皆应包含在本发明的保护范围内。

有益效果

本发明基于超构透镜阵列设计实现可见光波段的光谱光场相机系统。采用超构表面器件的相位设计原理，利用亚波长结构实现侧向离轴聚焦透镜的功能，从而获得具有光谱信息和光场信息的色散模糊图像，结合计算成像和深度学习算法，能够实现三维成像以及材料鉴别等应用。所述的光谱光场相机系统在小型化的集成成像上具有极大的优势。本发明的相机系统光路设计简单，易于集成。本发明使用的超构透镜属于平板透镜，工艺复杂度低，工序简单，适合大规模生产，成本也相较更为低廉。通过设计具有离轴聚焦性质的超消色差超构透镜，利用不同波长下超构透镜聚焦位置的变化，实现光谱的色散。通过应用超消色差超构透镜阵列，实现相机单次曝光可同时记录场景的三维位置信息和光谱信息，并且具有很高的光通量。

附图说明

图1为本发明的成像光路实施例示意图；

图2为本发明的超构透镜阵列的sem图、单个超构透镜sem图、两处局部放大图；

图3为本发明的超构透镜对不同波长的离轴聚焦示意图；

图4为本发明的光谱光场相机系统获得的具有3d空间信息和光谱信息的图像。

图5为图1的抽象光路图。

具体实施方式

下面结合附图对本发明作更进一步的说明。

如图1、5中所示分别为本发明的实施例示意图和光路实施图，1是商用相机的镜头、2是线偏振片、3是四分之一波片、4是物镜、5是超构透镜阵列、6是单色相机、7是具有深度的目标场景。超消色差超构透镜阵列在光路中的依次排列的结构：线偏振片2、四分之一波片3和物镜4、超消色差超构透镜阵列5、第二线偏振片7、第二四分之一波片8和第二物镜9的结构；所述具有深度的场景指的就是实例中深度不同、横向位置错开的图1中的atem字母，白光照射后不同颜色的字母反射不同波长的光进入成像系统。因此，这里说明了既有光场成像，也有光谱成像。最终成像在单色相机上，相机得到的图像见图4(a)。图4(a)虽然是色散模糊的，但是包含了光谱信息、深度信息和位置信息，即3d空间信息和光谱信息。

白色led灯用作宽带光源以照亮目标场景。从场景反射进入商用相机的镜头的光，经过偏振片2和四分之一波片3后变成圆偏振光，物镜(5倍放大倍率，na＝0.14，mitutoyo)用于将光收集到超构透镜阵列上，另一个物镜(1x放大倍率，na＝0.28，mitutoyo)，用于将超构透镜阵列上的像重新成像在相机(flirbfs-u3-200s6)上。聚焦光场的超构透镜阵列的位置遵循高斯透镜公式：f是单个超构透镜的焦距，a和b分别是从主透镜像平面到超构透镜阵列的距离和从超构透镜阵列到再成像平面的距离。

如图2所示，(d)图是整个超构透镜阵列的平面图，一共由48*48个超构透镜排列形成。(e)图是单个超构透镜的sem图像。每个超构透镜的焦距是165um，直径是30um，数值孔径na值为0.09。对可见光波段可以选择二氧化钛、氮化镓、氮化硅材料；对于近红外波段，可以选择硅作为材料；上述材料在对应波段都具有透过率高，损耗低的特点。

如图3所示，分别是频率为4.5thz、5.0thz、5.5thz、6.0thz、6.5thz、7.0thz、7.5thz的入射光以-16°角度入射到超构透镜上产生的离轴聚焦图；且不同频率的光的焦平面相同，与超构透镜阵列平面的距离都为165um。

表1：组成本发明的超构透镜的亚波长共振单元的尺寸和补偿相位。

如图4所示，(a)是基于超构透镜阵列相机拍摄到的原始光场图像，(b)是图(a)的局部放大图像。(c)是从原始图像数据经过计算成像处理得到的全聚焦彩色图像。(d)(e)(f)(g)分别是对场景中不同深度进行聚焦的图像。(h)(i)(j)(k)分别是不同深度的字母在可见光波段的光谱图。