专利名称：电子内视镜系统的制作方法
技术领域：
本发明涉及电子内视镜系统。
背景技术：
常规上，在医疗诊断和治疗中广泛使用电子内视镜系统。电子内视镜系统由以下各项构成具有插入部的电子内视镜、处理器设备以及连接到电子内视镜的光源设备等。电子内视镜具有被引入患者体腔内的插入部以及用于操作插入部的操作部。在插入部的远端中，形成照明窗和成像窗，通过该照明窗在患者身体中施加照明光，且通过该成像窗对身体内部成像。在电子内视镜中，图像传感器通过成像窗来捕捉位于通过照明窗所施加的照明光之下的待检查的体内部分的图像。处理器设备对从图像传感器输出的图像信号应用各种类型的处理，并产生用于诊断的观察图像。在连接到处理器设备的监视器上显示观察图像。光源设备具有可调整强度的白色光源，以向电子内视镜供应照明光。将照明光通过穿过电子内视镜的光导(light guide)导向远端部，并通过照明光学系统从照明窗向体内部分施加。要求插入部具有小的直径，其目的是减少患者的物理负担。为此，远端部一般包含单个图像传感器，但是在远端部中包含多个图像传感器以增强图像清晰度的电子内视镜系统是已知的(参见日本专利待审公开No. 2004-40480和2008-79823)。例如，日本专利待审公开No. 2004-40480公开了以下技术半反射镜将光学路径分为两个方向，且两条路径上布置的两个图像传感器以不同的曝光时间来捕捉图像。两个图像的合成图像方便了扩展动态范围。日本专利待审公开No. 2008-79823公开了以下技术分色棱镜(dichroic prism)将入射光分为绿光(G光)、红光(R光)和蓝光(B光)。将G光的图像与R和B光的图像合并，以提高分辨率。近些年来，通过施加特定波长的光(下文中称为特殊光)对体内部分进行成像，以强调特定组织(比如，肿瘤和粘膜表层中的毛细血管)的方法是已知的。例如，在窄带成像中，对体内部分施加具有窄波长频段的蓝光，且捕捉其反射光。在自体荧光成像中，对响应于激发光的施加而从人体内的特定组织发射的自体荧光进行捕捉。在药剂荧光成像中，提前让患者服用荧光标记药剂，且对响应于激发光的施加而从标记药剂发射的药剂荧光进行捕捉。在红外成像中，对体内部分施加红外光，且捕捉其反射光。在上述要捕捉的光中，自体突光、药剂突光、或红外光产生弱的信号。为了对这种弱光成像，在与日本专利待审公开No. 2007-50106相对应的美国专利No. 8，007, 433中提供了特定图像传感器。在美国专利No. 8，007, 433中，棱镜将从体内部分入射的光相对于波长500nm—分为二。然后，分别捕捉两种类型的图像，即具有小于等于500nm波长的光的图像以及具有大于500nm波长的光的图像，以获得高质量的特殊光图像。在捕捉从体内部分发射的弱荧光时，由于荧光本身过弱，即使将特殊光(比如从光源发射的激发光)滤掉，且仅捕捉荧光，也不一定获得适用于诊断的清晰图像。从而，在例如日本待审专利公开No. 2008-79823中，对从两个图像传感器之一获得的信号放大，以产生自体荧光图像。然而通过图像处理对信号放大的方法还具有成比例地放大噪声分量的缺点。因此，当捕捉弱光(比如自体荧光和药剂荧光)时，除了滤掉特殊光之外，还需要对要捕捉的光的信号本身进行放大，以获得清晰的图像。
发明内容
本发明的目标是增强特殊图像的质量，该特殊图像捕捉了响应于特殊光的施加而从体内部分反射或发射的弱光。为了实现上述和其他目标，根据本发明的一种电子内视镜系统包括要引入人体内的插入部；普通光发射装置，用于向体内部分发射白光；特殊光发射装置，用于向所述体内部分发射特殊光；第一成像装置；第二成像装置；分光装置；以及监视装置。所述第一成像装置在所述插入部的远端部中提供，并捕捉用所述白光辐照的所述体内部分的第一图像。所述第二成像装置在所述插入部的所述远端部中提供，并捕捉用所述特殊光辐照的所述体内部分的第二图像。所述第二成像装置具有电子倍增装置，用于将从所述体内部分入射的弱光进行光电转换而得到的信号电荷倍增。所述分光装置对从所述体内部分入射的光 进行分光，并将所述光定向到所述第一成像装置和所述第二成像装置。所述监视装置显示所述体内部分的所述第一图像和所述第二图像。所述弱光可以是荧光，且所述特殊光可以是用于产生所述荧光的激发光。所述第二成像装置可以包括激发光滤光装置，用于滤掉从所述体内部分反射的激发光。所述监视装置可以用平铺方式来显示由所述第一成像装置捕捉的所述第一图像和由所述第二成像装置捕捉的所述第二图像。所述电子内视镜系统还可以包括图像合成装置，用于通过将由所述第二成像装置捕捉的所述第二图像与由所述第一成像装置捕捉的所述第一图像相叠加，来产生合成图像。优选地在所述监视装置上显示所述合成图像。优选地将所述第一成像装置和所述第二成像装置布置为相对于所述分光装置，具有彼此相等的视野。所述电子内视镜系统还可以包括用于冷却所述第二成像装置的冷却装置。所述冷却装置可以包括Peltier设备或散热器。所述分光装置可以包括分束器(beam splitter)或半反射镜(half mirror)。所述第一成像装置可以包括CXD图像传感器，且所述第二成像装置可以包括EMCXD图像传感器。所述EMCXD(电子倍增(XD)图像传感器通过使用其电荷转移部中的雪崩倍增效应来倍增弱图像信号，并输出已倍增的图像信号。优选地，与开始读出所述第一成像装置的任何帧同步地开始从所述第二成像装置中读出信号电荷。所述荧光可以是响应于所述激发光的辐照而从所述人体内特定组织本身发射的自体突光。所述激发光可以是具有波长400nm到420nm的蓝紫(violet)光。在另一,清况下，所述荧光是在由所述激发光激励时从被服用到所述体内部分的荧光标记药剂发射的。所述第二成像装置可以捕捉红外荧光图像，且可以与所述第一成像装置捕捉的所述第一图像一起，在所述监视装置上显示所述红外荧光图像，用于比较。当将所述第一成像装置蓄积信号电荷或读出所述信号电荷所需的时间定义为一个帧周期时，所述第二成像装置可以蓄积两个帧周期的信号电荷，且在下一个单个帧周期中读出所蓄积的信号电荷。在另一情况下，所述第一成像装置可以以一个帧周期的循环，来交替执行所述信号电荷的蓄积和读出，且所述第二成像装置可以以一个帧周期的循环，来交替执行所述信号电荷的蓄积和读出。在该情况下，当所述第一成像装置和所述第二成像装置之一执行所述信号电荷的蓄积时，另一个优选地执行所述信号电荷的读出。根据本发明，有可能获得清晰的特殊图像。
为了更完整地理解本发明及其优点，现在结合附图对以下描述进行参考，在附图中图I是电子内视镜系统的示意图；图2是示出了电子内视镜系统的电子结构的框图；图3是相机头装置的示意图；图4是(XD的示意图；图5是EMCXD的示意图；图6是示出了根据本发明的一个实施例的CCD和EMCCD的操作的定时图；图7是示出了根据另一实施例的CXD和EMCXD的操作的定时图；图8是示出了根据又一实施例的CXD和EMCXD的操作的定时图；图9是示出了根据又一实施例的CXD和EMCXD的操作的定时图；图10是监视器的前视图，其上以平铺方式显示了普通图像和特殊图像；以及图11是监视器的前视图，其上显示了合成图像。
具体实施例方式如图I所示，电子内视镜系统10由电子内视镜11、处理器设备12以及光源设备13构成。电子内视镜11包括要引入患者体腔内的柔性插入部14、耦合到插入部14的基端的操作部16、连接到处理器设备12和光源设备13的连接器17、以及用于将操作部16连接到连接器17的通用线缆18。插入部14在其远端部19包含两种类型的图像传感器，即用于捕捉白光下的图像的CCD 43(参见图2)和用于捕捉特殊光下的图像的EMCCD(电子倍增CCD) 46 (参见图 2)。在操作部16上，提供了包括以下各项的操作元件角度旋钮，用于使远端部19在所需方向上柔软地弯曲；供气/供水按钮，用于从远端部19喷射空气或水；释放按钮，用于捕捉并存储静态观察图像；以及缩放按钮，用于放大或缩小在监视器21上显示的观察图像。操作部16在其远端侧具有医疗仪器插入端口，可以将诸如电烙器等的医疗仪器插入该医疗仪器插入该端口。医疗仪器插入端口通过在插入部14中提供的通道耦合到在远端部19中提供的医疗仪器出口。处理器设备12电连接到电子内视镜11和光源设备13。处理器设备12执行对电子内视镜系统10的中心控制。处理器设备12通过通用线缆18和在插入部14中提供的电缆，向电子内视镜11供电，并控制CXD 43和EMCXD 46的操作。此外，处理器设备12通过电缆接收从CXD 43和EMCXD 46输出的图像信号，并产生各种类型的图像数据。将处理器、设备12产生的图像数据在通过电缆连接到处理器设备12的监视器21上显示为观察图像。如图2所示，电子内视镜11在成像窗26的凹入处具有目标光学系统27和相机头装置(CHA) 31，以及在照明窗32和33的凹入处分别具有光投影单元36和37。在远端部19的端表面中提供由透明材料制成的成像窗26。来自体内部分的光入射在成像窗26上，并通过目标光学系统27引导至CHA 31。包括透镜在内的目标光学系统27通过在CHA 31中提供的分束器42，在CXD 43和EMCXD 46的成像平面上形成体内部分的图像。CHA 31是用于在CPU 41的控制下对体内部分成像的装置。CHA 31包括分束器 42、(XD 43、EM(XD 46、(XD 控制器 44、EMCXD 控制器 47 等等。分束器 42、(XD 43 以及 EMCXD46包含在远端部19中。CPU 41、(XD控制器44以及EMCXD控制器47包含在操作部16、通用线缆18的连接器17或类似部件中。分束器42将从目标光学系统27入射的光分为朝向CXD 43和EMCXD 46的两个方向。如图3所示，分束器42采用立方体的形状，其由倾斜表面相邻的具有三角柱形状的两个棱镜构成。在棱镜之间的界面中提供半透明层51。半透明层51透射一部分入射光，并反射其余的入射光。半透明层51的分光并不依赖于入射光的波长，而是半透明层51以实质上相同的比率对每个波长的光进行透射和反射。例如，半透明层51透射30%到70%的入射光，并反射其余70%到30%的入射光。注意到半透明层51的透射率和反射率可以是其他值，且可以根据CXD 43和EMCXD 46的灵敏度等来任意确定。使用半透明层51，分束器42可以让从体内部分入射的光的30%到70%进入EMCXD 46，而让从体内部分入射的光的70%到30%进入CXD 43。在分束器42和EMCXD 46之间布置特殊光过滤滤光器95，以滤掉特殊光，即，激发光。特殊光过滤滤光器95避免EMCCD 46接收被反射的激发光。特殊光过滤滤光器95优选地具有针对激发光的O. 1%或更少的透射率。可以将特殊光过滤滤光器95集成到分束器42的EMCXD —侧的光出射面。CXD 43是拍摄白光(下文中称为普通光)下的体内部分的图像的图像传感器。CXD 43被布置为使得其成像平面面向分束器42的光出射面。由CXD控制器44来控制CXD43的操作。CPU 41通过CXD控制器44来控制CXD 43的操作定时。CXD控制器44获得从CXD 43输出的图像信号，并让图像信号经历A/D转换。然后，CXD控制器44向处理器设备12的DSP 62输出图像信号。在拍摄运动图像中，一般将CXD 43的帧速率设置为30fps或60fps，但是也可以设置为从I至200fps中的任意速率。除了运动图像之外，电子内视镜系统10可以记录静态图像。EMCXD 46是对从体内部分的活体组织发射的弱自体荧光进行成像的图像传感器。在EMCCD 46中，通过光电转换将自体荧光转换为信号电荷。EMCCD 46对信号电荷进行倍增，并输出倍增过的信号电荷作为图像信号，稍后将描述细节。由EMCCD控制器47来控制EMCXD 46的操作。CPU 41通过EMCXD控制器47来控制EMCXD 46的操作定时。EMC⑶控制器47获得从EMCXD 46输出的图像信号，并让图像信号经历A/D转换。然后，EMCXD控制器47向处理器设备12的DSP 63输出图像信号。在远端部19的端表面中提供由透明材料制成的照明窗32和33，以照明人体的内部。通过照明窗32施加普通光。通过照明窗33施加引起活体组织发射自体荧光的激发光(下文中称为特殊光)。如稍后所述，将照明窗32和33分别与光投影单元36和37集成。为了简单起见，图2示出了用于普通光的照明窗32和光投影单元36的一个集合，以及用于特殊光的照明窗33和光投影单元37的一个集合。然而在实际中，提供照明窗和光投影单元的多个集合，使得用普通光和激发光来均匀辐照电子内视镜11的视野(成像区域)。光投影单元36和37将通过光纤52和53从光源设备13导入的光通过照明窗32和33分别投影到体内部分。用防护玻璃来密封光投影单元36和37的尖端。防护玻璃在远端部19的端表面上是暴露的，且作为照明窗32和33。为了让光投影单元36将普通光投影到体内部分，将蓝色激光通过光纤52从光源设备13导入。光投影单元36具有在其尖端处的荧光体54的板。荧光体54由例如YAG或BAM(BaMgAl 10017)构成，吸收从光纤52射出的蓝色激光的一部分，并射出绿色到黄色光。将透过荧光体54而扩散的其余蓝光与从荧光体54发射的泵浦绿色到黄色光合并，使得光投影单元36投影作为人造白光的普通光。光投影单元37将特殊光投影到体内部分。将特殊光通过光纤53从光源设备13导入光投影单元37。光投影单元37具有在其尖端处的光扩散元件56。光扩散元件56将 从光纤53射出的特殊光进行扩散。从而，从光投影单元37投影到体内部分的特殊光具有特定的照射范围，并覆盖电子内视镜11的整个成像区域。处理器设备12具有CPU 61、数字信号处理器(DSP)62和63、数字图像处理器(DIP) 64、显示控制器65、操作单元66、ROM 67、RAM 68等等。将CPU 61通过数据总线、地址总线和控制线(未示出它们)连接到每个部分，并执行对整个处理器设备12的中心控制。ROM 67存储包括用于控制处理器设备12的各种程序(OS、应用程序等等)在内的各种类型的数据、图形数据等等。CPU 61从ROM 67中读出所需程序或数据，并将程序或数据加载到作为工作存储器的RAM 68，接着处理读取的程序。此外，CPU 61从操作单元66或通过网络(比如LAN)来检索包括检查日期、患者姓名、医生信息等在内的文本数据，并将文本数据写到RAM 68中。此外，CPU 61向电子内视镜11的CPU 41输入控制信号。基于控制信号，CXD 43和EMCCD 46在根据成像模式(其确定了要向体内部分施加的光的类型、光施加定时等等)而调整的开始/结束定时处蓄积特定周期的信号电荷。电子内视镜11的CPU 41通过根据从CPU 61输入的控制信号对CXD驱动器98和EMCXD驱动器99进行致动，来控制CXD 43和EMCXD 46的操作。当交替执行CXD 43的普通成像和EMCXD 46的特殊成像时，CPU 41向CXD控制器44和EMCXD控制器47输入用于命令该操作的定时调整信号。可以在CXD 43和EMCXD 46之间用不同电荷蓄积周期来交替执行普通成像和特殊成像。此外，可以不以1:1的频率来交替执行普通成像和特殊成像，而是以2:1、4:1、8:1或16:1的频率，使得较少次数地执行特殊成像。响应于对每个普通和特殊图像的更新，可以更新所显示的静态图像。不需要每次都更新普通和特殊图像二者。CPU 61向光源设备13的CPU 71输入与输入到电子内视镜11的CPU 41相同的控制信号。从而，光源设备13根据成像模式，与CCD 43和EMCCD 46的成像定时同步地对体内部分施加普通光和特殊光。DSP 62对从CXD 43输入的图像信号应用各种类型的信号处理，比如色彩分离、色彩内插、增益校正、白平衡调节以及ga_a校正，并产生普通光下的图像(下文中称为普通图像)。将DSP 62产生的普通图像写入DIP 64的工作存储器中。DSP 62还产生例如包括平均亮度值在内的第一 ALC数据，平均亮度值是所产生的普通图像中的每个像素的亮度的平均值，并向CPU 61输入第一 ALC数据。第一 ALC数据用于对照明光量的自动控制。CPU61将从DSP 62输入的第一 ALC数据传输到光源设备13的CPU 71。DSP 63对从EMCXD 46输入的图像信号应用各种类型的信号处理，比如增益校正和gamma校正,并产生响应于特殊光的施加而从体内部分发射的自体突光的图像(下文中称为特殊图像)。将DSP 63产生的特殊图像写入DIP 64的工作存储器中。DSP 63还基于特殊图像的对比度和锐度来产生第二 ALC数据，并向CPU 61输入第二 ALC数据。CPU 61向光源设备13的CPU 71传输第二 ALC数据。 DIP 64对DSP 62产生的普通图像和DSP 63产生的特殊图像应用各种类型的图像处理，比如电子倍增、色彩增强处理以及边缘强化处理。DIP 64还根据与监视器21相关的显示设置，通过将普通图像和特殊图像的叠加来产生合成图像。将经过DIP 64的图像处理之后的普通和特殊图像以及DIP 64产生的合成图像临时写入VRAM(未示出)作为观察图像，然后输入到显示控制器65。显示控制器65从VRAM中获得观察图像，并在监视器21上显示观察图像。显示控制器65从CPU 61接收在ROM 67和RAM 68中存储的图形数据。图形数据包括用于覆盖除了关注区域之外的观察图像的掩模(mask)、文本数据(比如检查日期、患者姓名以及医生信息)、⑶I等等。显示控制器65应用图像覆盖过程，通过该过程，将图形数据覆盖在从VRAM中获得的观察图像上。然后，显示控制器65将处理过的图像转换为与监视器21的显示格式兼容的视频信号(分量信号、合成信号等等)，并向监视器21输出视频信号。从而，在监视器21上正确地显示观察图像。操作单元66是包括在处理器设备12中提供的操作面板、鼠标和键盘在内的输入设备。响应于从操作单元66和电子内视镜11的操作部16输入的操作信号，CPU 61操作电子内视镜系统10的每个部分。除了上述之外，处理器设备12包括用于以预定格式(例如，JPEG格式)来压缩各种图像的压缩电路、用于响应于释放按钮的操作而将压缩图像写入可拆卸式介质的介质接口(I/F)、用于控制通过网络(比如，LAN)发送各种类型数据的网络接口(I/F)等等。这些电路通过数据总线等连接到CPU 61。光源设备13具有用于普通光发射的LD 81和用于特殊光发射的LD 82。用于普通光发射的LD 81发射具有中心波长445nm的蓝色激光。将蓝色激光通过透镜86等导入光纤83。光纤83经由连接器17连接到电子内视镜11的光纤52。从而，将从LD 81发射的蓝色激光导入光投影单元36。通过荧光体54透射，让蓝色激光变为要施加到体内部分的普通光。LD 81的光发射量是可变的，且通过LD驱动器89受到CPU 71的控制。CPU 71基于从处理器设备12的CPU 61输入的第一和第二 ALC数据，自动调节LD 81的光发射量，以调节施加到体内部分的普通光的量。例如，在单独捕捉普通图像中，CPU 71基于第一ALC数据，自动控制用于普通成像的最优的LD 81的光发射量。在同时捕捉普通图像和特殊图像中，CPU 71通过除了考虑第一 ALC数据之外还考虑第二 ALC数据，自动控制普通光的量，使得在EMCXD 46上入射的反射普通光不使得特殊图像的锐度和对比度劣化。用于特殊光发射的LD 82发射具有中心波长405nm的蓝紫色激光。将蓝紫色激光通过透镜87等导入光纤84。光纤84经由连接器17连接到电子内视镜11的光纤53。从而，将从LD 82发射的蓝紫色激光从光投影单元37施加到体内部分。响应于特殊光的施加，从体内部分发射少量的弱自体荧光。因此，在捕捉特殊图像中，始终将LD 82的光发射量设置在其最大水平上，以最大化自体荧光的量。CPU 71基于来自处理器设备12的控制信号，通过LD驱动器89来控制每个单体LD 81或82的开/关定时。如图3 所示，CHA 31 包括分束器 42、CCD 43、EMCCD 46、Peltier 设备 91 和 92、散热器93和94以及特殊光过滤滤光器95。 如上所述，CXD 43被布置为使其成像平面面向分束器42。在CXD 43的后表面上，提供Peltier设备91和散热器93。当由直流电驱动时，Peltier设备91吸收与CCD 43接触的表面上的热量，并从与散热器93接触的表面上释放热量。散热器93有效地释放了在CXD 43上发生的热量，并对CXD 43进行冷却。以类似方式，EMCXD 46被布置为使其成像平面面向分束器42。在EMCXD 46的后表面上，提供Peltier设备92和散热器94。散热器94有效地释放了在EMCXD 46上发生的热量，并对EMCXD 46进行冷却。特殊光过滤滤光器95置于分束器42和EMCXD 46之间。在从分束器42入射的光中，特殊光过滤滤光器95滤掉特殊光，并仅允许自体荧光进入EMCCD 46。从而，EMCCD 46仅捕捉响应于特殊光的施加而从体内部分发射的自体突光。注意到，自体突光的量远小于特殊光的量。自体荧光一般具有约500nm的峰值波长和在从450nm到700nm上延伸的宽的波长频段，尽管其取决于发射自体荧光的活体组织的类型。从而，形成特殊光过滤滤光器95，以例如使得将具有中心波长405nm的蓝色特殊光减弱到O. I %或更少，并将绿色至红色光以近似100%加以透射。CXD控制器44包括定时产生器(TG) 96、CXD驱动器98以及模拟前端电路(AFE) 101。TG 96基于从CPU 41输入的控制信号向CXD驱动器98输入时钟信号。CXD驱动器98将从TG 96输入的时钟信号转换为控制脉冲，并将控制脉冲输入CCD 43，以控制CCD43的操作。AFE 101对从CCD 43输出的图像信号进行采样，移除噪声，并对图像信号进行放大。AFE 101对图像信号进行数字化，并向DSP 62输入数字图像信号。基于在CPU 41控制下的从TG 96输入的时钟信号来操作AFE 101。CPU 41基于例如从处理器设备12的CPU61输入的控制信号来调节图像信号的放大因子。与CCD控制器44 一样，EMCCD控制器47包括TG 97、EMCCD驱动器99和AFE 102。EMCXD控制器47的组件的操作与上述CXD控制器44的组件的操作一样，除了 EMCXD控制器47控制EMCXD 46的操作。如图4所示，CCD 43具有光电二极管(PD) 105、VCCD区域106、HCCD区域107以及输出部108。将ro 105排列为矩阵。每个ro 105通过光电转换将入射光转换为信号电荷，并蓄积信号电荷。成像平面指将ro 105排列于其中的区域。CCD 43具有色彩滤光器，该色彩滤光器具有多个色彩段，其形成为具有与ro 105相同的图案。色彩滤光器是例如RGB原色滤光器、CMY补色滤光器、或具有拜耳阵列(Bayer array)的CMYG补色滤光器。针对在垂直方向(Y方向)上排列的H) 105的每一列，提供一个VCXD 106。每个PD 105通过读出栅极109连接到VCXD 106。通过读出栅极109将信号电荷从每个H) 105读出到VCXD 106。VCXD 106传输在垂直方向上从H) 105读出的信号电荷，并向HCXD 107
输入信号电荷。由从CXD驱动器98的VCXD驱动器111输入的垂直传输脉冲Φ Vl至Φ V4，在4个相位上驱动具有多个垂直传输电极的VCCD 106。在这些垂直传输电极中,施加了第一和第三垂直传输脉冲Φν 和Φν3的垂直传输电极还作为读出栅极109的栅电极。HCXD 107在水平方向(X方向)上传输一行的信号电荷,该一行的信号电荷是从每个VCXD 106相继传输来的。由水平传输脉冲ΦΗ1和ΦΗ2在2个相位上驱动具有多个水 平传输电极的HCCD 107。对于HCXD 107的输出端，提供浮动扩散放大器作为输出部108。输出部108将HCXD 107传输的信号电荷逐个像素(TO105)地转换为电压信号，并输出图像信号Vout。CXD驱动器98包括V(XD驱动器111、HCXD驱动器112和重置驱动器113。VCXD驱动器111通过转换时钟信号的电平来产生用于垂直传输的垂直传输脉冲φν 至Φν4。VCXD驱动器111向用于控制VCXD 106的垂直传输电极输入垂直传输脉冲Φν 至Φν4，以控制每个像素的电荷蓄积周期以及垂直方向上的信号电荷的传输。HCXD驱动器112通过转换时钟信号的电平来产生用于水平传输的水平传输脉冲ΦΗ1和ΦΗ2。HCXD驱动器112向用于控制HCXD 107的水平传输电极输入水平传输脉冲ΦΗ1和ΦΗ2，以控制水平方向上的信号电荷的传输。重置驱动器113通过转换时钟信号的电平来产生用于电荷重置的重置脉冲c^RST。重置驱动器113向输出部108输入重置脉冲c^RST，以在将每个像素的信号电荷转换为电压并输出作为图像信号Vout之后放弃每个像素的信号电荷。AFE 101包括相关双采样电路(OTS) 114、自动增益控制器(AGC) 115和A/D转换器(A/D)116。⑶S 114对从CXD 43输出的图像信号应用相关双采样处理，以移除由于CXD43的驱动所产生的噪声。AGC 115对⑶S 114移除噪声之后的图像信号进行放大。A/D 116将AGC 115放大的图像信号转换为具有预定比特数目的数字图像信号。如图5 所示，EMCCD 46 包括 PD 121,VCCD 122,HCCD 123、输出部 124 等等，与 CCD43 一样。EMCXD 46的操作与CXD 43的操作相同。VCXD驱动器131、H(XD驱动器132、重置驱动器 133、CDS 134、AGC 135 和 A/D 136 也一样。然而，EMCCD 46 具有在 HCCD 123 和输出部124之间的电子倍增器125。注意到，EMCCD 46指代对弱图像信号进行倍增的电子倍增CCD，同时利用了在其电荷传输部中的雪崩倍增效应，并输出倍增图像信号。电子倍增器125组成由比HCXD 123的电荷传输部用更高的电压来驱动的电荷传输部，且由从EM驱动器137输入的EM脉冲来驱动。EM驱动器137包含在EMCXD驱动器99中，并根据从TG 97输入的时钟信号来产生EM脉冲。在通过电子倍增器125传输来自HCXD123的信号电荷的同时，由与驱动电压相对应的高电场来加速信号电荷。加速的信号电荷与晶格碰撞，并产生新的电荷(负电极和正空穴对)。由碰撞电离效应产生的该新电荷也由高电场来加速，且还通过雪崩倍增效应产生其他新的信号电荷。从而，电子倍增器125对从HCCD 123传输的信号电荷进行倍增。将电子倍增器125倍增的信号电荷输入到输出部124。如上所述，EMCXD 46使用电子倍增器125对信号电荷进行倍增。与对图像信号进行倍增的情况不同，电子倍增器125可以仅对信号电荷倍增，而抑制噪声，且导致S/N比率的增加。因此，EMCXD 46可以产生弱自体荧光的清晰图像。在具有上述结构的电子内视镜系统10中，分束器42分离光学路径，且CCD 43和EMCCD 46始终同时形成体内部分的图像。从而，有可能实质上同时获得普通图像和特殊图像。图6示出了在实质上同时捕捉普通图像和特殊图像的情况下的CXD 43和EMCXD46的示例。单帧周期表示从CPU 41向TG 96和97输入作为控制信号的垂直同步信号VD的间隔。当输入垂直同步信号VD时，TG 96向VCXD驱动器111输入与垂直同步信号VD相对应的时钟信号。VCXD驱动器111根据垂直同步信号产生垂直传输脉冲，并向CXD 43的PD 105输入垂直传输脉冲，使得将在ro 105中蓄积的信号电荷读出到VCXD 106中。类似地，TG 97向VCXD驱动器131输入时钟信号，且VCXD驱动器131产生并向EMCXD 46的I3D121输入垂直传输脉冲，使得将在121中蓄积的信号电荷读出到VCXD 122。CCD 43蓄积单帧周期的信号电荷，并在下一个帧周期中输出蓄积的信号电荷作为 图像信号。更具体地，电荷蓄积周期(曝光周期)开始于向CCD 43输入电子快门脉冲，并结束于下一个垂直同步信号VD的输入。将CCD 43中蓄积的信号电荷读出的读出周期开始于完成电荷蓄积周期，并持续到输入下一个垂直同步信号VD。因此，CXD 43每两个帧周期捕捉单一普通图像。注意到，与CCD 43的电荷蓄积周期同步地，对体内部分施加普通光，且在CCD 43的读出周期和EMCCD 46的电荷蓄积周期期间不施加普通光。电子快门脉冲的输入定时在直到输入下一个垂直同步信号VD的周期中是可变的，且可以根据入射光的量来确定。与EMCCD 46的电荷蓄积周期同步地对体内部分施加特殊光，且在其他周期中不施加特殊光。与CCD 43—样，EMCCD 46蓄积单一巾贞周期的信号电荷,并在下一个巾贞周期中输出蓄积的信号电荷作为图像信号。因此，EMCCD 46每两个帧周期捕捉单一特殊图像。EMCXD 46的操作与CXD 43的操作相同。EMCXD 46的电荷蓄积周期开始于向EMCXD 46输入电子快门脉冲，并结束于下一个垂直同步信号VD的输入。EMCCD 46的读出周期开始于EMCXD 46的电荷蓄积周期的完成，并持续到下一个垂直同步信号VD的输入。然而，CXD 43与EMCXD 46不同相(out of phase)操作,而是相差一个巾贞周期,使得以一个巾贞周期的循环来交替执行CCD 43的普通成像和EMCCD 46的特殊成像。注意到，电子快门脉冲的输入定时在直到输入下一个垂直同步信号VD的周期中是可变的，且可以根据入射光的量来确定。通过如上所述以一个帧周期为循环交替捕捉普通图像和特殊图像，有可能实质上同时观察普通图像和特殊图像。这消除了对切换图像模式的需求，并简化了医生的操作。此夕卜，在实质上同时捕捉的普通图像和特殊图像之间的比较可以增强诊断的准确性。在上述实施例中，以一个帧周期为循环交替执行CXD 43的普通成像和EMCXD 46的特殊成像，将该一个帧周期定义为垂直同步信号的输入间隔。然而，由于自体荧光较弱，优选地延长EMCCD 46的电荷蓄积周期。例如，如图7所示，EMCCD 46可以蓄积两个帧周期的信号电荷。在该情况下，读出信号电荷所需的时间依然是一个帧周期，且CCD 43与EMCCD46的读出周期同步地蓄积信号电荷，以捕捉普通图像。此外，还可以进一步延长EMCXD 46的电荷蓄积周期至一个帧周期的整数倍，例如，延长至如图8所示的三个帧周期。在上述实施例中，在相同定时向CXD 43和EMCXD 46输入垂直同步信号VD，且以一个或多个帧周期为循环来交替捕捉普通图像和特殊图像，将该一个或多个帧周期定义为垂直同步信号VD的上升沿的间隔。然而，例如如图9所示，可以向CCD 43和EMCCD 46输入不同的垂直同步信号。将向CXD 43输入电子快门脉冲与EMCXD 46的垂直同步信号VD进行同步，同时将向EMCCD 46输入电子快门脉冲与CCD 43的垂直同步信号VD进行同步。然后,将CCD 43的电荷蓄积周期设置为短于一个巾贞周期，同时将EMCCD 46的电荷蓄积周期设置为长于一个帧周期。注意到，从CCD 43或EMCCD 46读出信号电荷所需的时间是一个帧周期。通过缩短CXD 43的电荷蓄积周期并延长EMCXD 46的电荷蓄积周期，减少了 EMCXD46的电荷蓄积周期之间的间隔。因此，有可能增强特殊成像的效率，换言之，增加EMCCD 46的特殊成像的帧速率。在电子内视镜系统10中，可以如图10所示，以平铺方式在监视器21上显示普通图像141和特殊图像142，或可以如图11所示，在监视器21上显示将特殊图像142叠加到普通图像141之上的合成图像143。注意到，优选地将CXD 43和EMCXD 46均等地布置，以具有相同的视角。CXD 43和EMCXD 46优选地具有相同大小的成像平面、相同大小和数目的像素(PD 105和121)，但是 可以具有不同的条件。当CCD 43和EMCCD 46具有不同大小的成像平面和不同大小和数目的像素时，DIP 64对普通和特殊图像141和142应用图像处理，以在监视器21上以相同大小显示普通和特殊图像141和142。对于合成图像143的产生也是一样。在上述实施例中，可以使用CXD 43作为用于捕捉普通图像的图像传感器，但是可以取代CCD 43而使用CMOS图像传感器。然而，在CMOS图像传感器中，难以在放大图像信号的同时抑制噪声。从而，优选地与上述实施例一样，使用CCD 43。在上述实施例中，EMCCD46捕捉自体荧光的特殊图像，但是对于捕捉在服用荧光标记药剂之后的药剂荧光的情况下，也是一样。在上述实施例中，CXD 43和EMCXD 46都由四个相位的垂直传输脉冲0 Vl至小V4和两个相位的水平传输脉冲0H1和0H2来驱动。然而，可以使用二至四个相位中任意一个驱动的已知C⑶或虚拟相位C⑶作为VCXD 106、122或HCXD 107、123。在上述实施例中，EMCXD 46捕捉特殊图像，但是EMCXD 46可以捕捉用红外光辐照的体内部分的图像。此外，可以通过捕捉被反射的红外光，对红外光的吸收进行成像。在该情况下，必须根据作为特殊光使用的红外光的属性来改变特殊光过滤滤光器95的属性。这对于捕捉弱光(比如响应于特殊光的施加而从体内部分反射或发射的药剂荧光)的情况也是一样的。在上述实施例中，分束器42将来自体内部分的光分离，并让光进入CXD 43和EMCXD 46。然而,可以使用半反射镜,而不是分束器42。在上述实施例中，不仅在CXD 43中，还在EMCXD 46中使用了色彩滤光器，但是EMCCD 46可以是不具有色彩滤光器的单色传感器。在使用单色传感器作为EMCCD 46的情况下，可以在EMCCD 46的前表面(成像平面)中提供用于选择性透射自体荧光的波长选择滤光器。在使用如具有波长选择滤光器的EMCCD 46—样的单色传感器来捕捉特殊图像中，所有像素可以接收自体荧光，且因此有可能获得具有高分辨率的特殊图像。尽管已参照附图，通过本发明的优选实施例来完全描述了本发明，各种改变和修改对于本领域技术人员而言是显而易见的。因此，除非这些改变和修改脱离本发明的范围，否则应将它们理解为被包括在本发明的范围中。
权利要求
1.一种电子内视镜系统,包括 要引入人体内的插入部； 普通光发射装置，用于向体内部分发射白光； 特殊光发射装置，用于向所述体内部分发射特殊光； 第一成像装置，在所述插入部的远端部中提供，用于捕捉用所述白光辐照的所述体内部分的第一图像； 第二成像装置，在所述插入部的所述远端部中提供，用于捕捉用所述特殊光辐照的所述体内部分的第二图像，所述第二成像装置具有电子倍增装置，用于将从所述体内部分入射的弱光进行光电转换而得到的信号电荷倍增； 分光装置，用于对从所述体内部分入射的光进行分光，并将所述光定向到所述第一成像装置和所述第二成像装置；以及 监视装置，用于显示所述体内部分的所述第一图像和所述第二图像。
2.根据权利要求I所述的电子内视镜系统，其中， 所述弱光是荧光；以及 所述特殊光是用于产生所述荧光的激发光。
3.根据权利要求2所述的电子内视镜系统，其中，所述第二成像装置包括激发光滤光装置，用于滤掉从所述体内部分反射的所述激发光。
4.根据权利要求I所述的电子内视镜系统，其中，所述监视装置用平铺方式来显示由所述第一成像装置捕捉的所述第一图像和由所述第二成像装置捕捉的所述第二图像。
5.根据权利要求I所述的电子内视镜系统，还包括 图像合成装置，用于通过将由所述第二成像装置捕捉的所述第二图像与由所述第一成像装置捕捉的所述第一图像相叠加，来产生合成图像，所述合成图像在所述监视装置上显示。
6.根据权利要求I所述的电子内视镜系统，其中，将所述第一成像装置和所述第二成像装置布置为相对于所述分光装置，具有彼此相等的视野。
7.根据权利要求I所述的电子内视镜系统，还包括 冷却装置，用于冷却所述第二成像装置。
8.根据权利要求7所述的电子内视镜系统，其中，所述冷却装置包括Peltier设备。
9.根据权利要求7所述的电子内视镜系统，其中，所述冷却装置包括散热器。
10.根据权利要求I所述的电子内视镜系统，其中，所述分光装置包括分束器。
11.根据权利要求I所述的电子内视镜系统，其中，所述分光装置包括半反射镜。
12.根据权利要求I所述的电子内视镜系统，其中，所述第一成像装置包括CXD图像传感器。
13.根据权利要求I所述的电子内视镜系统，其中，与开始读出所述第一成像装置的任何帧同步地开始从所述第二成像装置中读出所述信号电荷。
14.根据权利要求2所述的电子内视镜系统，其中，所述荧光是响应于所述激发光的辐照而从所述人体内特定组织本身发射的自体荧光。
15.根据权利要求14所述的电子内视镜系统，其中，所述激发光是具有波长400nm到.420nm的蓝紫光。
16.根据权利要求2所述的电子内视镜系统，其中，所述荧光是在由所述激发光激励时从被服用到所述体内部分的荧光标记药剂发射的。
17.根据权利要求16所述的电子内视镜系统，其中， 所述第二成像装置捕捉红外荧光图像；以及 与所述第一成像装置捕捉的所述第一图像一起，在所述监视装置上显示所述红外荧光图像，用于比较。
18.根据权利要求I所述的电子内视镜系统，其中，当将所述第一成像装置蓄积信号电荷或读出所述信号电荷所需的时间定 义为一个帧周期时，所述第二成像装置蓄积两个帧周期的所述信号电荷，以及在下一个单个帧周期中读出蓄积的所述信号电荷。
19.根据权利要求I所述的电子内视镜系统，其中，当将所述第一成像装置蓄积信号电荷或读出所述信号电荷所需的时间定义为一个帧周期时，所述第一成像装置以所述一个帧周期的循环，来交替执行所述信号电荷的蓄积和读出，以及所述第二成像装置以所述一个帧周期的循环，来交替执行所述信号电荷的蓄积和读出。
20.根据权利要求19所述的电子内视镜系统，其中，当所述第一成像装置和所述第二成像装置之一执行所述信号电荷的所述蓄积时，另一个执行所述信号电荷的所述读出。
全文摘要
本发明提供了一种电子内视镜系统。在电子内视镜中，插入部具有在其远端部处的分束器、CCD和EMCCD。当对体内部分施加作为普通光的白光时，反射的白光通过分束器入射到CCD上，并产生普通图像。当用作为激发光的特殊光来辐照体内部分时，从体内部分的特定组织发射弱的自体荧光。弱的自体荧光通过分束器入射到EMCCD上。EMCCD在其电子倍增器中使用雪崩倍增效应。EMCCD通过电子倍增器对根据弱的自体荧光产生的信号电荷进行倍增，并输出高电平信号。
文档编号A61B1/06GK102626302SQ20121001899
公开日2012年8月8日 申请日期2012年1月20日 优先权日2011年2月1日
发明者村山任 申请人:富士胶片株式会社