相关申请的交叉引用
本申请是于2012年3月5日提交的第13/394,261号美国申请的部分继续申请且要求该美国申请的优先权，第13/394,261号美国申请要求于2010年9月7日提交的pct/us2010/047949以及于2009年9月4日提交的第61/239,947号美国临时申请的优先权及权益，这些申请的全部内容通过引用全部并入本文中。
背景技术：
激光斑点(ls)成像是一种众所周知的技术。通过对从目标散射的相干光线进行成像获得激光斑点图像。如果目标包括处于各种不同深度的散射体，则散射将依据来自各种散射体的各种路径长度而引起原先相干光线相长地或相消地相加，导致图像具有亮点和暗点，即斑点。如果散射体移动，则斑点图案将改变。因此，激光斑点反差图像将容易在散射体移动且抹去斑点图案的区域中具有较低的反差度。激光斑点反差图像可基于一个或多个原始激光斑点图像来如此计算：
其中，i指示图像的行，j指示图像的列，n是原始激光斑点图像被组合的数量，i表示获得的原始激光斑点图像的强度，s表示在时间上的若干图像中的单个像素(i,j)或在单个图像中的原始图像附近的限制区域(i,j)，诸如[5像素×5像素]窗口，表示在单个图像内的s上或在n个图像上的单个像素处计算的亮度i的标准偏差，μ表示在单个帧内的s上或在n个图像上的单个像素上计算的强度i的平均值，以及k(x,y)是ls图像的像素(x,y)处计算出的激光斑点反差。
ls图像可使用以下公式来用于计算血液流量：
其中，k是ls反差，t是图像所需的曝光时间，以及l/τc是血流速度的指标。
技术实现要素：
以下内容展示了简化发明内容，以便提供本发明的一些方面的基本理解。该发明内容不是本发明的宽范围概述。该发明内容不旨在确定本发明的关键/主要元素或描绘本发明的范围。其唯一目的在于以简化形式展示本发明的一些概念，作为稍后展示的更详细描述的前奏。
用于多模激光斑点成像的系统可包括第一光源、第二光源、相机和处理器，其中第一光源放置成朝向目标发射激光，第二光源放置成朝向目标发射光，相机放置成接收从目标散射的光。处理器可编程为从至少一个相机接收由激光照明的目标的至少一个图像、从由激光照明的目标的至少一个图像获得目标的激光斑点反差图像、从至少一个相机接收由第二光源照明的目标的至少一个图像、将激光斑点反差图像分割成子部分、以及将由第二光源照明的目标的至少一个图像分割成相同的子部分、通过将激光斑点反差图像的每个子部分与由第二光源照明的目标的至少一个图像组合并将该组合与一个或多个标准进行比较确定每个子部分是否包括某一类型的特征，以及将图像的子部分中检测的特征的类型和位置输出。
附图说明
为了更全面地理解本发明的本质和期望目的，参考结合附图进行的以下详细描述，在附图中相同的参考标号在整个若干视图中指示相对应的部分。
图1至图3示出了进行本文所描述的技术的示例性系统。
图4示出了用于从微静脉区分微动脉的过程。
图5示出了使用多重曝光的改进的血液流量估计的过程。
图6示出了用于定量地描述脉管系统内的血液流量的过程。
图7示出了用于发现脉管边缘的过程。
具体实施方式
用于多模激光斑点成像的系统可包括第一光源、第二光源、相机和处理器，其中第一光源放置成朝向目标发射激光，第二光源放置成朝向目标发射光，相机放置成接收从目标散射的光。处理器可编程为从至少一个相机接收由激光照明的目标的至少一个图像、从由激光照明的目标的至少一个图像获得目标的激光斑点反差图像(例如，根据公式1)、从至少一个相机接收由第二光源照明的目标的至少一个图像、将激光斑点反差图像分割成子部分、以及将由第二光源照明的目标的至少一个图像分割成相同的子部分、通过将激光斑点反差图像的每个子部分与由第二光源照明的目标的至少一个图像组合并将该组合与一个或多个标准进行比较确定每个子部分是否包括某一类型的特征，以及将图像的子部分中检测的特征的类型和位置输出。
目标可包括体内脉管系统，包括但不限于脑部、眼部或皮肤脉管系统。在可替换的实施方式中，目标可包括位于人或动物身体的任何组织内的脉管系统、单独脉管或连接的脉管网络。目标还可包括封闭管的系统，其中微粒材料流经封闭管。例如，目标可以是人造血流经其的塑料管、或者目标可以是细胞或微胶珠流经其的微流通道。
处理器还可被编程为：基于目标的激光斑点反差图像或者由第二光源照明的目标的至少一个图像中的一个或二者，获得特征遮蔽(mask)；以及在将激光斑点反差图像分割成子部分之前，遮蔽激光斑点反差图像和由第二光源照明的目标的至少一个图像。获得特征遮蔽可包括将目标的激光斑点反差图像和由第二光源照明的目标的至少一个图像与对应于脉管特征而预先选择的标准进行比较。
可预先确定与组合进行比较的一个或多个标准以将动脉脉管和其中的血液流量与静脉脉管和其中的血液流量区分开。将激光斑点反差图像以及由第二光源照明的目标的图像进行组合可包括数字减法，数字减法包括从由第二光源照明的目标的至少一个图像中的值的数学函数的结果减去激光斑点反差图像中的值的数学函数的结果。数学函数可以是多项式函数，其中图像值均被乘以常数并升到指数次幂。
处理器还可被编程为：确定被遮蔽的激光斑点反差图像中的特定位置处的血流速度；以及输出血流速度和相应位置。
处理器还可被编程为：从相机接收在多个不同曝光时间处由激光照明的目标的多个图像；以及通过由激光器照明的目标的多个图像获取多个激光斑点反差图像，每个激光斑点反差图像对应于不同的曝光时间。
第二光源可发射激光或非相干光，激光或非相干光可以具有与第一光源发射的激光不同的波长。
处理器还可被编程为：基于激光斑点反差图像中的特征分析，计算和输出在检测的特征中的血液流量。
处理器还可被编程为计算和输出该检测的特征中的血液流量作为检测的特征内的位置的函数。
系统可通过组合具有多个曝光时间的目标的多个激光斑点反差图像来获得目标的激光斑点反差图像。
系统可包括相机，相机具有使用互补金属氧化物半导体(cmos)技术或电荷耦合装置(ccd)技术制成的光检测器或任何其它电子或非电子检测器。系统可包括激光发光二极管、hene激光器、或任何其它程度的相干光光源。系统还可包括白光或彩色非相干光光源。
此外，系统可包括显示模块，该显示模块的功能在于所获得的且处理的数据可供系统的用户查看。显示模块的实施例包括但不限于计算机、打印机、电话或平板电脑装置的屏幕。可使用一个或多个类似或不同的显示模块。
此外，系统可包括存储模块，该存储模块的功能在于存储所获得的且处理的数据供短期或长期使用。存储模块的实施例包括但不限于硬盘、固态盘和闪存。存储模块可通过诸如usb(通用串行总线)、火线、串行或并行ata以及以太网的有线接口或通过诸如蓝牙、近场通讯(nfc)或互联网协议的无线接口连接至系统。因此，存储模块可放置成物理靠近于系统的剩余部分或远程地放置，例如在云存储装置和服务的情况下。可使用一个或多个类似的或不同的存储模块和服务。
处理器可被编程为利用边缘检测算法来计算目标中的动脉或静脉血液流量的可显示图。处理器还可被编程以概略化(skeletonize)计算出的图。概略化脉管图通常涉及将一个像素厚的特征描绘与每个特征相关联。
本文中描述的系统和方法可用于从微静脉区分微动脉。由于通过微动脉的血液速度更高，所以在ls反差图像中微动脉看起来比微静脉更暗。因为微动脉携带氧化血液(给予它们亮红色的外观)，所以微动脉在白光(wl)反射图像中也看起来比微静脉更亮。因此，在一个实施方式中，在ls反差图像中具有低于阈值的亮度并同时在wl反射图像中具有高于另一阈值的亮度的脉管，可被识别为微动脉。在为了从背景分割(即，区分)脉管而进行比较之前，可进行涉及平滑和反差增强的图像预处理。这种预处理可涉及许多不同可能的方法，包括高斯平滑、中值滤波、直方图均衡化、凸纹(ridge)检测、凸纹追踪或区域生长方法。在微静脉和微动脉之间的辨别可对于所有尺寸的血管来进行，这些血管是在人类或动物体的任何器官中从较大的动脉和静脉到最小的微动脉和微静脉。
本文中描述的系统和方法可用于确定在分支网络内的单独微脉管中的流量分布，潜在地在宽视场上。这可针对在视场中的任何脉管或任何分支点来进行，由此提供了在例如双光子显微术的较高分辨率扫描技术上的优势。可在所有尺寸的脉管(从较大的微动脉和微静脉到最小尺寸的毛细管)中获得流量分布。脉管内的流量分布的阐明提供了在区域血液流量成像技术上的优势。
本文中描述的系统和方法可改善激光斑点成像的准确性和动态范围，以能够使用多重曝光lsi来在纵向评估和不同主体上进行一致测量。在脉管改变(例如，超过几天)的纵向评估中的lsi的使用受到损害，因为该技术由于实验准备不同而容易受到误差的影响。这种问题转化为不能一致和可靠地将在不同患者中或在不同时间的相同患者中所观察的流量联系起来。在实验室中，尽管有最佳标准化成果，诸如照明条件和动物准备的变量仍可能改变，即，在动物模型中对于脑脉管成像的准备经受逐日的变化。这不利地影响着监测同一动物多天的纵向流量研究。这里描述的修改的激光斑点成像方法基于多曝光记录，该多曝光记录对逐日的环境改变是鲁棒的并且改善了在血液流量值的较宽范围上流量测量的灵敏度。该方法涉及在多重曝光下的原始激光斑点成像的采集，并对它们一起如此处理以从一个曝光到另一个曝光提取斑点改变。这种度量对于逐日的改变是更为鲁棒的，由此提供了更好的流量估计。
本文中描述的系统和方法可用于通过使用lsi的入射光的多重波长来区分表面下脉管。例如，当前，在例如偏头痛的许多神经系统科学研究中，在对脑膜脉管和皮层脉管的作用的理解中存在分歧。而且，待被成像的脉管的深度对使用任何光学形态产生的图像都具有影响。因此，图像仅能被精确到点。多重波长可用在当前方法中对深度的混淆效果去卷积。例如，有可能在绿色和红色激光照明下顺序地使用lsi来区分(脑部的)硬脑膜脉管和皮软膜脉管。比较在不同波长下获得的相对亮度，有可能将深度校正结合到该技术中。
本文中描述的系统和方法可实现在便携式设备中，并且它们可在不约束主体的情况下使用。例如，激光斑点和关联的计算可实现在使用超大规模集成(vlsi)或现场可编程门阵列(fpga)技术的电子芯片上。传统的激光斑点成像需要快速计算机的处理能力。当前的处理方法论可实现在vlsi或fpga芯片上或二者的组合上。成像系统的所有部件-照明、光学、图像采集和图像处理-可在集成设备中执行。小型化和集成电路技术的发展有助于使这成为可能。光发射二极管(led)和激光二极管可用于在波长、稳定性和功率输出上具有卓越控制的小占位面积(footprint)封装中。固态图像传感器被广泛地应用于医学和生物医学领域中以用于诊断和研究成像。互补金属氧化半导体(cmos)电路技术也已发展到有可能在硅上的图像平面上实现图像处理算法的阶段点。
在图1中所示的一个实施方式中，系统包括照明关注区域的至少一个激光光源和具有光学组件的白色或彩色光源、成像相同区域的相机采集系统和光学组件、数据处理系统和对用户示出提取信息的可能的显示系统。
使用一个或两个激光光源照明关注区域(例如，老鼠皮层上的变薄的头骨区域)。所使用的典型激光为632nm波长的红色hene气体激光和532nm波长的绿色二极管泵浦固态(dpss)激光。白光源，例如dc供电的卤素，被用于通过白光照明同一区域。通过包括透镜、镜、分束器、射束衰减器/扩散器和孔径控制元件的布置的光学器件阵列，来自所有照明源的射束被引导到关注区域。图1示出了一个这种布置。每个照明源由接通/关断开关独立地控制，该接通/关断开关被用于选择性地使每个源以任何希望的顺序接通或关断。
在这个实施方式中，使用相机系统来进行图像采集。该优选的实施方式使用具有6.7μm×6.7μm的像素尺寸(用于1：1放大)和快门控制的12位冷却svgaccd相机。可使用光学器件组件来近似地放大关注区域并控制由相机系统收集的光所通过的有效孔径。这种光学器件组件可包括具有孔径控制、镜和分束器的透镜系统。因此，关注区域的图像可通过可调定时快门被投影在相机传感器上。在该优选实施方式中，在每个类型的照明下按时间顺序地采集同一区域的80个图像的堆栈。在时间堆栈(time-stack)中的图像数量是根据经验的，并且该优选实施方式使用经验证明的最佳的80个图像。在wl照明下满足采集仅5个图像的时间堆栈。
在这个实施方式中，使用计算机或微控制器或微处理器或等效电子电路来进行数据处理。采集的80个图像的时间堆栈被存储，并且可使用公式(1)来计算时间激光斑点(tls)图像。将wl图像一起求平均以获得基本wl图像。例如，可接着以本文中描述的任何数量的方式将这两个图像组合或协同处理，以对微动脉和微静脉进行分类、按深度分类脉管、作出定量的流量测量等。例如，可电子地或以打印方式显示该结果。在一些实施方式中，整个系统可集成到如图2中所示的单个便携式单元中。在一些实施方式中，整个系统可与如图3中所示的外科显微镜相集成以用于临床中的手术中使用。在一些实施方式中，该系统可被链接到数据传送系统以能够传送和共享图像和结果。该系统可使用波导或光纤光缆以允许重新布置照明或图像采集系统。
一般地，当前系统和方法在成像脉管系统时扩展了lsi技术的能力。其将ls成像与另一种成像模态相组合，另一种成像模态例如是白色/彩色光反射成像或具有不同颜色激光的ls成像。
微动脉和微静脉分类
如图4中所示，当前系统和方法可用于区分动脉和静脉(同样微静脉和微动脉)。通过对激光斑点反差图像和第二光学模态中血管的相对亮度进行比较，在脉管系统之中识别微动脉。微动脉在ls图像中显得比其它脉管相对更暗，而在wl图像中显得比其它脉管相对更亮。该亮度差异根据的是在ls图像上与背景组织相比较的脉管的亮度反差表示该脉管中的血液流量。因此，微动脉准许比微静脉更高的通过微动脉的血液流量，微动脉显得更加反差(或更暗)。然而，当用白光照明时，由于去氧化血液和氧化血液各自的光学属性，所以微静脉显得更暗红，而微动脉看起来更亮红。可捕获白光图像作为实际血管的灰度图像，并因此，静脉显得更暗而微动脉显得更微弱。图4示出了区分微动脉和微静脉的方法。使用从像素数字减法到更复杂的滤光器范围的许多数学运算之一来增强在激光斑点和血管的白光图像上对应亮度中的这种差异。因此，该系统和方法使用ls反差图像和在来自第二光源的光下获得的图像中的脉管的相对外观以确定脉管的类型就是微动脉或微静脉，该第二光源包括氧化血液和去氧化血液具有不同的光学属性所处的一个或多个波长。
深度分类
当前系统和方法可用于区分表面脉管和表面下脉管(例如，脑部中的硬脑膜脉管相对皮软膜脉管)。为实现此，可使用多光谱激光斑点成像。对在通过例如红色(632nm)和绿色(532nm)的两个不同波长的顺序照明下采集的相同关注区域的ls图像进行比较来识别表面脉管。绿色激光是较小穿透性的并且在得到的lsgreen图像中仅显露出硬脑膜脉管。红色激光是较大穿透性的，并因此lsred图像展现硬脑膜和皮软膜脉管两者。在不同波长下的这两种ls图像接下来一起被处理以获得必要的划分。对从硬脑膜下的脉管中区分硬脑膜脉管(或更一般地从表面下脉管中区分表面脉管)的详细处理可以是从简单的数字减法到训练方法论的任何方法；在亮度域中识别函数，其在众多图像中识别了在lsgreen图像中比其它脉管更暗的像素以及在lsred图像中与其它脉管亮度近似相同的相同像素。这些像素对应于硬脑膜脉管。这种细化是基于需求的并且将取决于手头的问题。当前的方法论是通用的-即在两个或更多波长下使用激光斑点成像并比较如此获得的图像以从表面下脉管区分表面脉管。例如，在眼部，这将准许从脉络膜脉管中区分视网膜脉管。可为不同的应用选择不同的特定波长；红色和绿色波长的穿透度对从皮软膜脉管中提取硬脑膜脉管起着良好作用。因此，该系统和方法使用ls反差图像和在来自第二光源的相干光线下获得的第二ls方差图像中的脉管的相对外观，以确定基于位置类型的脉管处于同一组织或相邻组织中两个不同深度水平，其中该第二光源包括与来自第一源的光的波长不同的波长。
多重曝光激光斑点成像
如图5中所示，在多重曝光下的图像采集可用于产生改进的通过血管的流量估计。在每个曝光下的反差值携带关于曝光时通过血管的流量的信息。可采集不同的曝光，并且可使用从一个曝光到另一曝光的反差变化的测量来阐明在像素处的流量值。该值对于逐日的和准备相关的改变是鲁棒的，并因此对流量的纵向评估是有用的。这还有助于增加该技术能够成像的流量的动态范围。较低流量在较长曝光下用较高灵敏度成像。然而，在较长曝光中损失对较高流量的灵敏度，如亮度饱和。使用多重曝光可给予用户长曝光和短曝光的益处。在该处理技术中使用的曝光次数的数量可以是多达2到10，超过这些数量边际效用是低的。使用多曝光激光斑点成像还改善了在成像微脉管(直径小于30μm的脉管)时的反差与噪声比率，并因此可在成像这种微脉管时使用。血管生成是由脉管的重塑和生长特征化的一个条件，并因此是用于通过多曝光方案来成像的期望目标。
定量流量测量
当前系统和方法可用于使用图6中所示的方法论在血管分支点处(即血液流量分布或组合的汇合处)推断各种血管分支中的血液流量分布。可沿血管横截面来为激光斑点反差值探查血管，按照公式2转换为等价的1/τc值，并被分析和/或绘制为横截面剖面。该所得的横截面剖面指示脉管内的血液流速并可用于估计经过它的血液流量。次剖面可通过拟合通过1/τc值的横截面剖面的多项式曲线来产生。血液流量可估计为主剖面或次剖面或主剖面和次剖面的组合下的面积。类似地，血液流量也可估计为通过绕脉管的轴线旋转主剖面或次剖面或这两个剖面的组合所获得的旋转表面下的体积。一旦对在汇合处的所有脉管估计流量，可将百分比分布或贡献推断为每个血液流量与在汇合处的最大血液流量的比率。例如，在一个父脉管分叉为两个更小的子脉管的汇合处，每个子脉管中的流量可表示成父脉管中的流量的百分比。可在多个汇合处进行流量的估计以推断在相连接的脉管分支的整个网络或子网络中的流量分布。流量计算和百分比流量估计的任何中间或最终结果可被输出值显示模块，或存储以用于通过存储模块的随后使用。
可采用边缘检测方案来加亮如图7中所示的如此确定的边缘。亮度梯度被评估为一阶导数并且这是用于识别微动脉的阈值。当从背景转到微动脉时遇到陡峭的负边缘，而当从微动脉转到背景时遇到陡峭的正边缘。虽然在从微静脉转到背景时可检测到边缘或反之亦然，设置适当的阈值来摆脱这种假阳性。值得注意的是，阈值的相同值应用于在其上已使用该方法的所有图像，但用户可保留改变这些阈值的灵活性。有时，甚至在微动脉(沿横截面)内像素间的梯度是陡峭的，并且导致内部边缘。通过考虑像素在两侧上不能具有绝对暗的像素来移除这种假阳性。
通过组合以上特征的一些，可从微静脉的血液流量和口径中区分(并由此单独地评估)微动脉的血液流量和口径，该比较有极大的希望早期诊断脉管或器官脉管(例如，脑脉管)紊乱。为实现此，一个或多个关注脉管可使用本发明中公开的系统和方法分类为动脉或静脉(或者在脉管口径较小的情况下等同地微动脉或微静脉)；并且相同的一个或多个关注脉管中的流量也可使用本发明中公开的系统和方法来估计。因此，在一个或多个关注脉管中，可从静脉流量区分动脉流量。类似地，通过使用本发明中公开的系统和方法的深度分类特征和流量估计特征二者，可区分不同深度处脉管中的血液流量。例如，可从脑皮层(其位于硬脑膜下方)的血液供给中区分硬脑膜(表面组织)的血液供给，由此在偏头痛和其它神经脉管研究中阐明更加精确的信息。另一实施例是视网膜和脉络膜的脉管系统中的流量辨别。
该系统可并入小占位面积二极管、可选择波长光发射二极管或激光二极管以用于照明。创新的光学设计减少了光学组件的数量和光学路径的长度。可使用互补金属氧化半导体(cmos)图像传感器，或传统的电荷耦合器件(ccd)来用于图像采集。cmos成像器在对于高灵敏度、低噪声成像的品质上接近传统应用的基于ccd的传感器。除了紧凑和低功率，cmos成像器还提供了在相同晶片上并入集成电路作为图像传感器的能力。这对于系统在其自身的像面处添加了图像处理功能。
这种系统在临床和研究领域均具有优势。在临床情况中，它可用于具有几乎没有或没有建立的基本设施的场合。在研究情况中，当前系统和方法将使从醒着的和行动的动物模型中的长期成像实验范围成为可能。当今的成像技术由于它们要求麻痹或约束动物而受到限制，由此削减了可执行的行为或纵向实验的范围。
当前系统和方法在长期友好、最低限度侵入和成本效率中享有光学成像的优势。因为由移动的红色血液细胞提供激光斑点成像的反差，所以不需要外部染色。
以上描述的特征可在众多生物医学应用中单独或组合采用。这些应用包括诊断以及手术中或手术后监测。研究平台和动物模型也可以从当前系统和方法中受益。微动脉到微静脉的直径以及流率在例如糖尿病或高血压视网膜病的情况中是有价值的诊断和/或预测线索。当前系统和方法可产生这种信息，并可能在这些情况中指定早期风险或晚期状态或病人进展时是有用的。当前系统和方法还可有助于外科医生识别和量化例如微动脉、动脉瘤和动静脉畸形的脉管结构的流量和直径。进一步，这可在手术前、手术中和手术后进行以评估风险和功效。当前系统和方法可应用在改变的脉管直径或流量的任何情形中，该改变的脉管直径或流量可能在动脉或静脉之间或表面和表面下脉管系统之间不同。成像技术的目标是血管并且这些成像的血管可以是任何组织/器官的一部分，包括但不限于脑部、眼部和皮肤。成像的血管可以是正常(健康)或不正常(如在疾病或紊乱的情况中)。不正常的脉管发生在包括但不限于中风、糖尿病或高血压视网膜病、动脉瘤、动静脉畸形、脉络膜、视网膜和角膜血管再生以及一些皮肤疾病的情况中。该成像的血管也可是新长出的脉管，例如在肿瘤或伤口治愈的情况中。该成像的血管也可以是外科上改变的，例如剪除的动脉瘤或在治疗脑基底异常血管网(moyamoya)疾病的情况中的外科移植。
各种实施方式的特征可加以必要的变更而相互组合和交换。应认为本发明的方法和系统将通过上文描述来理解，并且将显而易见的是可在不偏离本发明的精神和范围或牺牲其材料优势的全部的情况下对形式或其制造进行各种改变，该形式在上文中仅作为本发明的优选或示例性实施方式来描述。