使用伪彩色的诸如显微镜或内窥镜的医疗检查装置的制作方法

本发明涉及一种诸如显微镜或内窥镜的医疗检查装置，以及一种诸如显微镜术或内窥镜术的医疗检查方法。

背景技术：

使用荧光团的荧光来更好地辨别某些类型的组织的显微镜和内窥镜是已知的。与现有的显微镜或内窥镜相比，本发明旨在改善向外科医生显示的图像的质量。

技术实现要素：

对于诸如显微镜或内窥镜的医疗检查装置，此目的是这样实现的：显微镜或内窥镜包括图像处理单元，所述图像处理单元包括：第一输入部分(section)，其被配置用于接收表示物体的可见光图像的可见图像数据；第二输入部分，其被配置用于接收表示所述物体的荧光图像的荧光图像数据；以及输出部分，其被配置用于输出表示所述物体的伪彩色图像的伪彩色图像数据，其中所述图像处理单元适于根据至少一个伪彩色、所述可见光图像中的第一输入像素的颜色和所述荧光图像中的第二输入像素的强度来计算所述伪彩色图像中的输出像素的颜色。

根据本发明的医疗检查方法包括步骤：获取表示物体的可见光图像的可见图像数据，获取表示所述物体的荧光图像的荧光图像数据，对所述可见图像数据、所述荧光图像数据和至少一个伪彩色进行组合以获得表示伪彩色图像的输出数据，其中所述伪彩色图像中的输出像素的颜色取决于至少一个伪彩色、所述可见光图像中的第一输入像素的颜色以及荧光图像中的第二输入像素的强度。

此外，该目的由储存程序的非暂时性计算机可读介质予以解决，所述程序促使医疗可视化装置执行上文引用的方法。

根据本发明的解决方案产生伪彩色图像，在其中，以自然的外观的方式将至少一个伪彩色混合到可见光图像中。因此，以更自然的方式呈现由荧光颜色着色的物体的部分。不是简单地将荧光图像覆盖在可见光图像上，而是使用至少一个伪彩色与可见光图像合并以显示物体的荧光部分。

可以通过以下方面进一步改善本发明，这些方面各自自身都是有利的，并且可以任意组合。

在下文中提及术语“图像”和“数据”或对图像或数据的操作方面，应当理解，术语“图像”和“数据”可以被同义地使用，这是因为图像表示构成图像的数据的总和。图像的数据也可以被归组(group)成像素。因此，“像素”对应于有序的“数据”归组。图像和数据被数字地处理和/或储存并且它们本身是数字的(digital)。

至少一个伪彩色不需要对应于荧光团(fluorophore)的荧光的颜色，但是可以由显微镜或内窥镜的用户选择。优选地，伪彩色是待观察物体中非自然地出现的可见光范围内的颜色。

根据本发明的另一方面，医疗可视化装置是立体的(stereoscopic，立体镜的)。在立体显微镜或内窥镜中，向观察者的每只眼睛呈现从稍微不同的视点记录的单独的伪彩色图像。因此，在立体显微镜或内窥镜中，根据两个不同的可见光图像和两个荧光图像来计算两个单独的伪彩色图像。对于这两个立体通道中的每一个，可以使用与单目显微镜的单通道相同的设备和处理。

荧光图像可以由数字nir相机采样，可见光图像由标准相机采样。图像处理单元可以包括在其中储存图像数据的存储器。图像处理单元可以是通用计算机的一部分，其例如通过软件而适于提供用于显微镜或内窥镜的控制和处理系统。图像处理单元也可以是仅仅可以用在显微镜或内窥镜中的特别设计的电子设备。

根据本发明的另一方面，显微镜或内窥镜可以包括一个以上的荧光通道。例如，可以使用两个或更多个荧光团，它们各自在不同的激发波长下被激发，并且它们各自发射处于不同发射波长的荧光。可以使用两个或更多个荧光团来识别所研究的物体的不同方面。例如，可以使用一种类型的荧光团来标记血管，而可以使用另一荧光团来标记肿瘤细胞。另一荧光团可以用来标记例如神经细胞。

根据本发明的一个方面，荧光图像数据可以包含至少两个不同的荧光发射颜色，并且处理单元可以被配置用于向每一个不同的荧光发射颜色分配不同的伪彩色。因此，在伪彩色图像中，由不同类型的荧光团所标记的不同类型的组织可以通过不同的伪彩色而得以辨别。根据本发明，由于考虑了第一输入像素的颜色和荧光图像中的第二输入像素的强度，因此不同的伪彩色全部被自然地混合到可见光图像中。

为了计算输出像素的颜色，第一输入像素和第二输入像素应当对应于物体的相同特征。例如，荧光图像、可见光图像和伪彩色图像可以具有相同的大小，即包括相同数目的像素行和像素列。如果可见光图像和荧光图像彼此一致(congruent，叠合)，即，在这两个图像中物体的大小、朝向和位置是相同的，则第一输入像素和第二输入像素位于它们各自图像中的相同行和列中。

为了使混合改善，输出像素的颜色在颜色空间(colorspace)中可以线性地位于第一输入像素的颜色与至少一个伪彩色之间，输出像素的颜色与第一输入像素的颜色之间的距离与第二输入像素的强度成比例。典型的颜色空间是hsv、hsi、rgb和ymck，但不限于这些颜色空间。在颜色空间中，每个颜色可以由位置向量来表示。因此，可以通过向量算法计算有效地完成计算输出像素的颜色。

使用rgb颜色空间作为示例，图像处理单元可以被配置用于根据第二输入像素的强度而将可见光中的第一输入像素的rgb值线性内插到所选择的伪彩色值，以获得输出像素的颜色。假设第一输入像素具有rgb值(ri，gi，bi)，并且荧光强度为f，则可以选择内插因子(h＝f/fmax，其中fmax是最大预期荧光强度)。如果用户针对特定荧光团已经选择的伪彩色具有rgb值(rp，gp，bp)，则输出像素的颜色(ro，go，bo)可以为如下：

ro＝ri+h·(rp-ri)

go＝gi+h·(gp-gi)

bo＝bi+h·(bp-bi)。

因此，如果荧光强度是f＝0，则h＝0，并且输出像素的颜色将对应于可见光图像的颜色。荧光图像中的像素越强，输出像素的颜色将越接近伪彩色。

在上述等式中，因子h可以用因子k＝a·h代替，其中a是确定伪彩色图像中伪彩色不透明程度的伪彩色不透明因子。伪彩色不透明因子a可以由用户选择。在伪彩色图像中，例如将不透明度因子设置为小于1的非常小的值将导致伪彩色非常弱，即使在f＝fmax的情况下亦如此。

为了提高伪彩色图像的质量并避免噪声伪影，处理单元可以包括阈值调整模块，所述阈值调整模块被配置用于：如果荧光图像中的像素具有低于阈值的强度，则对该像素进行消隐(blank)。所述阈值可以由用户调整并且储存在图像处理单元的存储器部分中。在医疗可视化装置的操作中，具有低于fmin的强度的荧光图像中的像素被设置为零。阈值滤波器(filter，过滤器)消除了暗噪声和串扰。使用阈值滤波器或阈值调整模块分别修改因子h，该因子h变为

对于f<fmin，h＝0，并且

对于f>fmin，h＝f。

此外，图像处理单元可以包括伽马(gamma)校正模块，所述伽马校正模块适于对荧光图像数据和可见图像数据中的至少一个应用伽马校正。具体而言，对荧光数据应用伽马校正，以便使荧光图像似乎是黑白荧光图像。

根据本发明的另一方面，处理单元可以包括均匀化模块，所述均匀化模块被配置用于补偿可见图像数据和荧光图像数据中的至少一个中的渐晕(vignetting，晕影)和不均匀照明中的至少一个。例如，均匀化模块可以对可见图像数据和/或荧光图像数据应用平场滤波器。

成像光学器件的照明的不均匀性和渐晕导致横跨视场的不均匀亮度。通常，在显微镜或内窥镜中视场的边缘明显比中心更暗，并且因此只有视场的中心部分通常可用于显微镜术或内窥镜术中的数字成像。然而，外科医生仍然可以经由显微镜或内窥镜的目镜来可视地观察整个视场。因此，如一方面伪彩色图像中所使用的视场与如另一方面外科医生所观察到的视场可以存在不匹配。为了避免这种不匹配，可以对可见图像数据和/或荧光图像数据应用数字均匀化滤波器。均匀化滤波器适于通过成像光学器件来校正照明中的不均匀性和/或渐晕。在应用均匀化滤波器之后，由此得到的中间图像在整个视场上具有相同的亮度。在均匀化滤波器中，工作距离、显微镜或内窥镜光学器件的焦距、聚焦和照明强度设置可以全部予以考虑。

具体而言，均匀化滤波器可以通过校准来获得，例如通过使用从其获得校准图像的均一着色(例如灰色或白色)的目标作为物体。均一白色目标揭示了渐晕和照明不均匀性二者。

可以通过优选地沿着可见光图像和/或荧光图像中的空间轮廓单独地测量rgb值，而从校准图像确定均匀化滤波器。空间轮廓例如可以是穿过校准图像的中心的对角线或任何其它直线。空间轮廓可以用多项式来拟合，并且可以围绕图像的中心旋转以创建二维不均匀性图，二维不均匀性图通过反转得到均匀化滤波器。

可以将均匀化滤波器储存在图像处理单元的存储器部分中。均匀化模块可以包括用于可见图像数据以及用于荧光图像数据的不同的均匀化滤波器，以便一方面导致(accountfor)可见光图像中的不同光学器件和照明，以及另一方面导致荧光图像的不同光学器件和照明。

如果可见光图像由与荧光图像不同的相机记录，则对于可见光图像和荧光图像而言可能出现两个不同的视角或对准误差。因此，荧光图像和可见光图像可能彼此不完全一致。例如，可见光图像可能相对于荧光图像稍微旋转。此外，荧光图像可能相对于可见光图像偏移。最后，可见光图像和荧光图像可能相对于彼此失真。

因此，为了将可见光图像和荧光图像自然地彼此混合，如果处理单元包括空间调整模块则是有利的，该空间调整模块适于使可见光图像和荧光图像彼此一致。空间调整模块确保第一输入像素和第二输入像素映射(map，比对)物体上的相同点。具体而言，空间调整模块可以适于对可见光图像和荧光图像中的至少一个进行裁剪、旋转、偏移和拉伸中的至少一个。

如果使用一个以上的荧光通道，则针对每个荧光发射颜色可以使用单独的相机。如果使用用于记录包括一个以上的荧光发射颜色的荧光图像的单个相机，则优选的是使用色敏相机或记录方法以便能够区分彼此不同的荧光带。可以使用带通滤波器，该带通滤波器仅让不同荧光团的发射波长通过。

虽然以上已经参考图像处理单元的模块描述了显微镜或内窥镜的若干方面，但是这些模块至少部分地是并入由图像处理单元执行的软件中的功能单元也是可行的。附加地或替代地，模块也可以至少部分地用硬件表示。

附图说明

在下文中，参考附图描述本发明的示例性实施方式。如上所解释，这些实施方式中所示出的特征的组合可以根据具体应用的需要而改变。例如，如果在特定应用中不需要所示实施方式的特定特征的技术效果，则可以省略该特征。相反，如果对于特定实施方式，需要上述特征中的一个特征的技术效果，则可以将该特征添加到所示实施方式。

遍及所有附图，相同的附图标记被用于在其结构和功能中的至少一个中彼此对应的元素。

在附图中：

图1示出了根据本发明的医疗可视化装置的示意图；

图2示出了根据本发明的医疗可视化装置的图像处理单元的示意图；

图3a示出了用于校准均匀化滤波器的均匀着色的物体的示意图；

图3b示出了均匀化滤波器的示意图；

图4a示出了对图像数据进行图像处理的效果的示意图；

图4b示出了对输入图像数据执行的图像处理步骤的示意概览；

图5示出了由使用一个以上的荧光团所产生的伪彩色图像的示意图。

具体实施方式

首先，参考图1描述根据本发明的医疗检查装置1的一般结构。在图1中，将医疗检查装置1示为显微镜仅仅出于阐释的目的。

例如，为了准备手术或者在手术期间，使用显微镜1来可视地检查诸如人或动物的身体组织之类的物体2。为此，物体2由包括至少一个光源4的光照子系统3来照明。来自光源4的光5可以透射穿过物体2或者被物体2反射。在物体2中可存在荧光团6，即荧光流体、固体或悬浮液。光源可以发射包含能量的在一种波长带中的光5，该光5激发至少一个荧光团6的荧光。

光照子系统3可以包括一个或多个照明滤波器7，通过该照明滤波器7引导来自至少一个光源4的光5。例如，照明滤波器7可以包括带通滤波器，该带通滤波器允许仅处于至少一个荧光团的激发带中的和处于可见光范围中的光通过。具体而言，至少一个照明滤波器7可以阻挡来自光源4的处于那些波长的任何光，至少一个荧光团发射处于那些波长的荧光。

附加地或替代地，照明滤波器还可以用来使照明均匀化，并且可以包括光阑(aperture)。

从物体2反射和/或发射的光8被诸如放大变焦透镜之类的光学子系统9接收。

来自光学子系统9的光被传递到成像子系统10，该成像子系统10适于从由物体2以及在物体2处或在物体2中的任何荧光材料反射和/或发射的光8，以电信号形式提取可见图像数据11和荧光图像数据12。

可见图像数据11表示物体2的可见光图像，即与人类观察者的眼睛能够看到的图像相对应的数字图像。荧光图像数据12表示荧光图像。荧光图像对应于物体的在物体2中的至少一个荧光团6的发射波长下的数字图像。

为了能够在可见图像数据11中使用全光谱的可见光，优选的是：对于至少一个荧光团而言激发带和发射带二者都不在可见光范围内。例如，发射带和激发带二者可以处于近红外(nir)中。合适的荧光团可以是5-氨基乙酰丙酸，其在代谢中产生原卟啉ix(其为荧光性的)和靛青绿。

成像子系统10包括二向色或多向色分束器13，分束器13将入射光8分离成可见光14和nir光15，后者包含由物体2反射的激发波长和来自物体2中的至少一个荧光团的发射波长二者。成像子系统10包含可见光成像组件16和荧光成像组件17，其中在光学上和在信号电平上不同地对待可见光14和nir光15，直到可见图像数据11和荧光图像数据12在显微镜1的图像处理单元18中被组合成伪彩色图像，该伪彩色图像由可在图像处理单元18处获得的输出数据19表示。

在可见光成像组件16中，可以布置阻挡除可见光之外的所有光的一个或多个可见观察滤波器20。此外，可见观察滤波器20可以包括用于使光学子系统8所观察的视场21中的强度更均匀的光学均匀化滤波器。可见光14由可见光相机22记录并被转换为可见图像数据11。

为了获得荧光图像数据12，由荧光观察滤波器23对nir光15进行过滤，继而将其引导到荧光相机24，荧光相机24可以是nir相机。荧光观察滤波器23可以被配置为带通滤波器，其阻挡除了至少一个荧光团6的发射波长中的光之外的所有光。因此，nir相机24记录包含仅发射波长中的信息的图像。nir相机可以是黑白相机或者可以是色敏的。后者在一个以上的荧光团(其被用作各个荧光团的激发波长)可以通过它们在荧光图像中的不同颜色而得以辨别的情况下是特别有用的。在这种情况下，荧光观察滤波器可以是用于允许不同的荧光波长通过的多带通滤波器。

成像子系统10可以包括数据接口25，数据接口25使得显微镜1的其他子系统可获得来自可见光相机22的可见图像数据11和来自荧光相机24的荧光图像数据12。

成像子系统10通过提供与由光学子系统9接收的光学图像相比没有延迟或几乎没有延迟的可见图像数据11和荧光图像数据12来实时地进行操作。

成像子系统10的数据接口25可以以用于视频流的标准数据格式来提供可见图像数据11和荧光图像数据12。此外，荧光成像子系统10的数据接口25可以被配置用于接收控制信号26，例如以便控制相机设置。而且，如果可见观察滤波器20和荧光观察滤波器23中的至少一个是可调整的，则成像子系统可以被配置用于改变可见观察滤波器20和荧光观察滤波器23中的至少一个的设置。

显微镜1可以是立体显微镜。在这种情况下，成像子系统10可以针对每个立体通道而存在。

在图1的实施方式中，为了单向或双向数据传送，将控制和处理子系统27连接到荧光成像子系统10，例如以便在操作中接收可见图像数据11和荧光图像数据12并且交换控制信号26。

此外，控制和处理子系统27可以被配置用于经由控制信号26来控制光学子系统9以及/或者也经由控制信号26来控制光照子系统3。如果照明滤波器是可调整的，则控制和处理子系统27可以被配置用于也控制照明滤波器7。

控制和处理子系统27可以是诸如个人计算机之类的通用计算机，或者是专门适于显微镜1的要求的专用电子系统。如果使用数字通信总线，则可以促进显微镜1的各个子系统、组件和其它设备之间的数据传送。

控制和处理子系统27可以包括可以用硬件和/或软件实现的若干单元。

例如，控制器单元30可以被用来储存、改变和控制显微镜1的操作参数的设置。操作参数可以包括但不限于：光学子系统9的诸如光阑、焦点和焦距之类的参数，光照子系统3的诸如照明滤波器设置、光源的亮度之类的参数，荧光成像子系统10的诸如相机设置和观察滤波器的设置之类的参数，以及图像处理单元18的参数。控制器单元30可以包括在操作时改变操作参数的用于用户交互的元件。这样的元件可以包括屏幕或触摸屏上的图形用户界面，以及/或者诸如滑块、按钮、开关和/或旋钮之类的机械元件。

图像处理单元18包括被配置用于接收可见图像数据11的第一输入部分31。图像处理单元18的第二输入部分32被配置用于接收荧光图像数据12。在图像处理单元18的输出部分33处提供输出数据19。

在输出部分33处，可获得以伪彩色图像数据的形式的输出数据19，伪彩色图像数据表示物体2的伪彩色图像。

在伪彩色图像中，可见光图像与荧光图像合并，从而提供从可见光图像到荧光图像的平滑颜色转变，由此以伪彩色来分配并显示荧光图像。伪彩色图像中的输出像素的颜色由图像处理单元18根据至少一个伪彩色、可见光图像中的第一输入像素的颜色和荧光图像中的第二输入像素的强度来计算。如果使用一个以上的荧光团，则优选地由用户向每个荧光团或其荧光发射波段分配不同的伪彩色，或者自动地执行。

如可以在图1中进一步看出，显微镜1可以配备有文档子系统35或者与其连接，文档子系统35用于储存全部图像数据或选择的图像数据，优选地连同显微镜设置一起储存。此外，显微镜1可以包括监视子系统36，该监视子系统36优选地包括若干显示器，比如目镜显示器37和显微镜监视器38。显微镜1还可以配备有显示接口39，显示接口39被配置用于将视频数据提供给外部监视器(未示出)。

图2示意性地示出了图像处理单元18的结构。图像处理单元18包括多个模块，所述多个模块实时地对图像数据11、12执行不同的图像处理功能。可以采用硬件和/或软件来实现图像处理单元18的各模块。例如可以将执行相同功能的不同模块实现为被馈送有不同数据的同样的软件程序。倘若在顺序执行中，输出仍然是可实时获得的，则这些模块可以并行地或顺序地执行。

图像处理单元18可以包括均匀化模块41，该均匀化模块41被配置用于补偿可见图像数据11和荧光图像数据12中的至少一个中的渐晕和不均匀照明中的至少一个。均匀化模块可以被进一步配置用于进行图像数据12的直方图均一化和优化，以便充分利用图像的对比度范围。

均匀化模块41可以包括数字均匀化滤波器42，数字均匀化滤波器42对于可见图像数据11和荧光图像数据12而言可以是不同的，这是因为照明的分布对于可见光和在至少一个荧光团的激发带中的光而言可以是不同的。此外，相机可以展现出不同的渐晕和畸变(distortion，变形)特性，这使得单独补偿成为必要。

例如可以使用对诸如白色、灰色或者以其他方式均一着色的板之类的均匀着色的校准物体的校准来确定均匀化滤波器43，并且将其电子地储存在图像处理单元18或附接的存储器中。图3a示出了这样的均匀着色的校准物体44的图像。在该校准物体的图像中清楚可见不均匀的照明和渐晕，这是因为视场21的边缘明显比中心更暗。在均匀化模块41中，将如图3b中所示的均匀化滤波器42实时地应用于可见光图像和荧光图像中的至少一个。均匀化滤波器42由沿着来自校准物体的图像的空间轮廓44的rgb值而产生：对于颜色空间中的每个坐标，获得单独的轮廓。可以用多项式来拟合不同的轮廓。围绕图像中心旋转多项式曲线创建物体2与相应相机22、24中的传感器之间的相应光路径中的不均匀性的二维图。均匀化滤波器42由使均匀性图反转而产生。

此外，图像处理单元18可以包括空间调整模块45，空间调整模块45优选地仅仅作用于荧光图像数据12和可见图像数据11中的一个，优选地仅仅作用于荧光数据12，这是因为荧光图像数据12由于颜色深度较低可能小于可见图像数据11。空间调整模块47适于对可见光图像和荧光图像中的至少一个进行裁剪、旋转、偏移和拉伸中的至少一个。空间调整模块45的目的是使可见光图像和荧光图像彼此一致，使得可见图像中的一定位置处的像素对应于物体2上与荧光图像中相同位置处的像素相同的点。在空间对准模块45中，可以执行相关算法和模式检测算法，以匹配可见光图像和荧光图像中的对应结构，并且计算将两个图像彼此对准所必需的裁剪、偏移、拉伸和/或旋转的量。

此外，图像处理单元18可以包括伽马校正模块46，伽马校正模块46被配置用于作用于可见图像数据11和荧光图像数据12中的至少一个。通过使用伽马校正，可以使图像适于人类视觉。

图像处理单元18可以进一步包括阈值调整模块47，阈值调整模块47优选地被配置用于仅仅作用于荧光图像数据12。阈值调整模块47被配置用于：如果荧光图像数据12中的像素具有低于阈值fmin的强度f，则将该像素消隐：如果f>fmin，则f＝f，并且如果f<fmin，则f＝0。控制器单元30(图1)可以被配置用于允许由用户调整阈值。

对像素进行消隐包括以下操作之一：将像素的颜色设置为诸如黑色之类的预定颜色，将其设置为零并使该像素透明。

最后，图像处理单元18可以包括伪彩色图像生成器48，伪彩色图像生成器48适于合并可见光图像和荧光图像以生成可在输出部分33处获得的伪彩色图像。

在下文中，参考颜色空间(例如rgb颜色空间)来描述伪彩色图像生成器48的功能。在rgb颜色空间中，通过三个分量颜色：红色(r)，绿色(g)和蓝色(b)来形成笛卡尔坐标系。可以可替换地使用的其他颜色空间可以是cmyk颜色空间或者hsl或hsv颜色空间。

在rgb颜色空间中，任何颜色由其三个分量(r，g，b)来表示，并且因此对应于3维颜色空间中的一定位置。这一位置对应于从颜色空间的原点指向特定颜色的位置向量。

伪彩色图像生成器48被配置用于根据第二输入像素的强度，将来自伪彩色的伪彩色图像中的输出像素的颜色线性内插到可见光图像中的第一输入像素的颜色。因此，在颜色空间中，输出像素的颜色(ro，go，bo)线性地位于可见光图像中的第一输入像素的颜色(ri，gi，bi)与至少一个伪颜色(rp，gp，bp)之间，即位于从(ri，gi，bi)指向(rp，gp，bp)的向量上。输出像素的颜色(ro，go，bo)与第一输入像素的颜色(ri，gi，bi)之间的距离被计算为与荧光图像中的第二输入像素的强度f成比例。从而，第一输入像素和第二输入像素二者都对应于物体2上的同一点(图1)。使用颜色空间允许使用计算高效的向量算法来进行线性插值。

具体地，在伪彩色图像生成器48中可以如下计算输出像素的颜色(ro，go，bo)：

ro＝ri+h·(rp-ri)

go＝gi+h·(gp-gi)

bo＝bi+h·(bp-bi)，

其中，因子h＝f/fmax，fmax是最大预期荧光强度。

因此，第二输入像素中的荧光的强度确定了针对任何给定颜色分量的输出颜色与输入颜色之间的距离。如果荧光强度f＝0，即没有荧光，则输出像素的颜色将对应于可见光图像中的第一输入像素的颜色。如果第二输出像素中的荧光最大，f＝fmax，则输出像素的颜色将对应于伪彩色(rp，gp，bp)。

在另一变体中，不透明因子a可以与因子f/fmax组合使用以形成替代因子h＝a·(f/fmax)。可以由用户在与控制和处理子系统27的交互时调整不透明因子a，以增加或减少伪彩色的透明度。如果因子a接近于零，则在伪彩色图像中，甚至荧光图像的高荧光部分也几乎不可见。增加因子a将增加伪彩色的可见性。

在图4中示例性地示出了基于荧光图像数据中的强度和可见图像数据中的对应像素的颜色(ri，gi，bi)而在输出数据中分配颜色(ro，go，bo)的过程，其中例如将绿色用作伪彩色(rp，gp，bp)＝(0，256，0)。上面的正方形表示具有4×4个第一输入像素50的(示意性)可见光图像49。仅为了阐释的目的，样本可见光图像49仅包含四个颜色，这四个颜色在可见光图像中的每一列中是同样的。

在左手侧的下面的正方形示意性地示出了样本4×4荧光图像51中的强度。该荧光图像由4×4个第二输入像素52组成。仅仅为了阐释的目的，荧光图像51的每一行中的强度是恒定的。第二输入像素52的最上面一行的强度为零，而荧光图像51中的第二输入像素52的最下面一行的强度最大。

使用上文线性rgb插值方案，得到4×4伪彩色图像53。再次可以看出：如果第二输入像素52的强度为零，则可见光图像49中的原始颜色被再现在伪彩色图像53的对应输出像素54中。如果第二输入像素52的强度最大，则伪彩色图像53中的颜色取决于如上文所述的不透明因子a。

在图4中，示出了用于合并可见光图像49和荧光图像51以获得伪彩色图像53的不同步骤。

在第一步骤60中，可见光图像49和荧光图像51分别由可见光相机22和荧光相机24采样。在第二步骤61中，使用均匀化模块对相应的图像49、51进行均匀化。

在第三步骤62中，使均匀化的荧光图像51与可见光图像一致，使得两个图像49、51中的物理结构在尺寸和位置上彼此对应。优选地在由阈值调整模块47处理荧光图像51之前进行空间调整，使得用于空间调整的算法具有更多的可用于模式匹配的数据。

在第四步骤63中，进行对荧光图像51的阈值过滤，以将荧光图像51中低于强度阈值fmin的所有第二输入像素52进行消隐。

在第五步骤64中，使用伪彩色图像生成器48，利用上述线性颜色插值来计算伪彩色图像53。

图5示出了包含两个伪彩色70、71的伪彩色图像53的生成。这两个伪彩色由物体2中两个荧光团的使用所产生，这两个荧光团发射处于两个不同的发射带中的光，并且因此具有两个不同的荧光颜色72、72。在这种情况下，在已经基于第二输入像素52的荧光颜色72、73将伪彩色70、71分配给荧光图像51中的第二输入像素52之后进行线性插值。在这一分配之后，在颜色空间中在分配给特定像素50、52、54的伪彩色与第一输入像素50的颜色之间进行线性插值，如上所述。

虽然上文已经参考显微镜描述了本发明，但是本发明也可以应用于内窥镜，唯一的区别在于：与显微镜1相比，在内窥镜的情况下光学子系统8包括光纤。

附图标记

1显微镜

2物体

3光照子系统

4光源

5来自光照子系统的光

6荧光团

7照明滤波器

8来自物体的反射或发射光

9光学子系统

10成像子系统

11可见图像数据

12荧光图像数据

13分束器

14可见光

15nir灯

16可见光成像组件

17荧光成像组件

18图像处理单元

19图像处理单元的输出数据

20可见观察滤波器

21视场

22可见光相机

23荧光观察滤波器

24荧光相机

25荧光成像子系统的数据接口

26控制信号

27控制和处理子系统

30控制器单元

31第一输入部分

32第二输入部分

33输出部分

35文档子系统

36监视子系统

37目镜显示器

38显微镜监视器

39显示界面

41均匀化模块

42均匀化滤波器

43用于获得均匀化滤波器的校准物体

44空间轮廓

45空间调整模块

46伽马校正模块

47阈值调整模块

48伪彩色图像生成器

49可见光图像

50第一输入像素

51荧光图像

52第二输入像素

53伪彩色图像

54输出像素

60第一步骤

61第二步骤

62第三步骤

63第四步骤

64第五步骤

70第一伪彩色

71第二伪彩色

72第一荧光颜色

73第二荧光颜色