专利名称：用于内窥镜手术的基于图像整合的配准和导航的制作方法
用于内窥镜手术的基于图像整合的配准和导航本发明总体涉及相对于手术前规划和手术中图像对身体的解剖区域内的手木工具进行实时跟踪。本发明尤其涉及手术前扫描图像、手术中荧光透视图像和手术中内窥镜图像的整合，以实现对手术工具的实时跟踪和定位。微创内窥镜手术是ー种手术流程，在该流程中，通过自然孔ロ或皮肤上的小切ロ(即，端ロ)将刚性或柔性内窥镜引入到患者的身体内。将额外的手木工具通过类似的端ロ引入到患者的身体内，其中，采用内窥镜就手术部位向手木工具的外科医生提供视觉反馈。例如，图I图示了膝盖10的前十字韧带(“ACL”)关节内窥镜手术的示意性表示，如图所示，膝盖具有ACL 11、软骨12和膝盖骨13。关节内窥镜手术涉及手术前阶段和手术中阶段。手术前阶段涉及对膝盖10的三维(“3D”)扫描成像(例如，CT图像、MRI图像、超声图像、X射线图像等)，从而对膝盖10进行诊断性评估，以及对膝盖10的ACL关节内窥镜手术进行规划。 手术中阶段涉及通过膝盖10的前面区域中的端ロ引入关节内窥镜20(8卩，针对关节的内窥镜)，由此可以使关节内窥镜20发生移动和/或枢轴转动，以采集膝盖10的各个区域的实时图像，尤其是ACL 11以及软骨12的损伤区的实时图像。此外，通过膝盖10的后面区域中的端ロ引入冲洗仪器22，并通过膝盖10的前面区域中的端ロ以垂直于关节内窥镜20的视角的角度引入如修整仪器21的各种手术仪器，以便于对损伤软骨12的手木部位的可视化。在本发明之前，存在两种主要对手术工具20-22的位置和取向进行跟踪的方案。第一种方案是无导航的徒手技木，因此外科医生通过三种(3)不同的模态来观察手术区域。例如，如图2中所示，出于诊断和手术规划的目的，采用CT扫描器30采集手术前CT扫描图像31。采用X射线装置40采集一幅或多幅手术中二维(“2D”)荧光透视图像，诸如示范性图像41，以观察一个或多个手术工具20-22相对于膝盖10的位置和取向。并且，采用关节内窥镜20连续采集手术中关节内窥镜图像，诸如示范性图像23，以观察膝盖10的手术部位。外科医生可以观察不同显示屏上的或同一显示屏上的图像。在任一种情况下，这种方案都无法建立各图像之间的关系，而这种关系便于对ー个或多个手术工具20-22相对于膝盖10的位置和取向，特别是相对于膝盖10的手术部位的位置和取向进行跟踪。第二种方案是基于导航的手术，其利用外部位置跟踪系统解决了对手术工具20-22中的一个或多个相对于膝盖10的位置和取向进行跟踪的问题。例如，图3图示了一种光学跟踪系统50，其用于在系统50的跟踪摄像机的坐标系内跟踪修整仪器21的位置和取向，从而必须执行患者配准流程，以便将修整仪器21呈现为扫描图像和(一幅或多幅)荧光透视图像中的叠加(overlay)，诸如处于扫描图像31和荧光透视图像42的相应坐标系中的示范性叠加32和43。所述配准可以采用附着到患者的皮肤或骨骼上的并利用修整仪器21触碰的基准标记，该基准标记在荧光透视图像42上可见。或者，可以执行涉及CT扫描图像31和荧光透视图像42的无标记配准。
图3所示的第二种方案为外科医生提供了修整仪器21相对于膝盖10和手术前规划的位置和取向的实时反馈。然而，采用光学跟踪系统50或者备选的外部跟踪系统(例如，电磁跟踪系统)因患者配准而延长了手术流程的时间，不能跟踪所有的工具20-22，并且还可能给外科医生増加身体活动限制(例如，必须总是保持系统50与修整仪器21之间的视线)。本发明提供了对手术工具的相对于手术前手术规划和手术中图像的实时跟踪，其涉及基于图像的配准和工具跟踪。基于图像的配准实施对身体解剖区域的多幅图像的整合，所述图像包括手术前扫描图像(例如，3D CT/MRI图像)、手术中荧光透视图像(例如，2DX射线图像)和手术中内窥镜图像(例如，2D关节内窥镜图像)。所述工具跟踪通过手术中内窥镜图像实施对一个或多个手术工具的跟踪在手术前扫描图像和/或手术中荧光透视图像内的呈现。本发明的ー种形式是用于整合身体的解剖区域的多幅图像的手术导航系统，所述多幅图像包括手术前扫描图像(例如，3D CT/MRI图像)、手术中荧光透视图像(例如，2D X射 线图像)和手术中内窥镜图像(例如，2D关节内窥镜图像)。所述手术导航系统包括图像整合器和工具跟踪器。在工作过程中，图像整合器生成整合图像矩阵，所述整合图像矩阵包括荧光透视图像矩阵与内窥镜图像矩阵的整合(例如，矩阵乘法)，其中，荧光透视图像矩阵包括手术中荧光透视图像与手术前扫描图像之间的变换，并且其中，内窥镜图像矩阵包括手术前扫描图像与手术中内窥镜图像之间的变换。继而，工具跟踪器生成整合跟踪矩阵，其中，所述整合跟踪矩阵包括整合图像矩阵和内窥镜跟踪矩阵的整合(例如，矩阵乘法)，并且其中，所述内窥镜跟踪矩阵表示在手术中内窥镜图像内对手术工具的跟踪。所述工具跟踪器可以进一歩生成或备选地生成扫描跟踪矩阵，其中，所述扫描跟踪矩阵包括内窥镜图像矩阵和内窥镜跟踪矩阵的整合(例如，矩阵乘法)。就本发明的目的而言，可以将本文采用的“生成”一词广义地定义为包括当前已知的或者以后已知的用于创建、提供、配备、获得、产生、形成、开发、演化、修改、变换、改变或制作可用信息(例如，数据、文本、图像、语音和视频)，以实现计算机处理目的和存储器存储/检索目的的任何技木，特别是对图像数据集和视频帧而言，将本文采用的“配准”一词广义地定义为包括本领域当前已知或者以后已知的用于将不同的图像数据集变换到ー个坐标系内的技术。此外，将本文采用的“手术前”一词广义地定义为描述在内窥镜应用之前的时期或准备过程(例如，针对内窥镜的路径规划)中发生的或者与之相关的活动，并且将本文采用的“手术中”一词广义地定义为描述在内窥镜应用(例如，根据规划的路径操作内窥镜)的过程中发生、执行或者遇到的活动。内窥镜应用的例子包括，但不限于，关节内窥镜检查、支气管镜检查、结肠镜检查、腹腔镜检查、脑部内窥镜检查和内窥镜心脏手术。内窥镜心脏手术的范例包括，但不限于，内窥镜冠状动脉旁路术、内窥镜ニ尖瓣和主动脉瓣修补和置換。在大多数情况下，手术前活动和手术中活动将发生在截然不同的分立时间段期间。然而，本发明也包括涉及手术前和手术中时间段发生任何程度的重叠的情況。此外，本文将“内窥镜”一词广义地定义为由具有从身体内部成像的能力的任何类型的内窥镜采集的图像的特征表述，并且本文将“荧光透视”ー词广义地定义为由具有提供身体内部结构的实时图像的能力的任何类型的荧光透视仪采集的图像的特征表述。用于本发明的目的的内窥镜的范例包括，但不限于，任何类型的检查镜，柔性或刚性的(例如，内窥镜、关节内窥镜、支气管镜、胆管镜、结肠镜、膀胱镜、十二指肠镜、胃窥器、宫腔镜、腹窥镜、喉镜、神经镜、耳镜、推进肠镜、鼻喉镜、こ状结肠镜、窦窥镜、胸腔镜等)以及与检查镜类似的配备有成像系统的任何装置(例如，具有成像功能的嵌套插管)。所述成像是局部的，可以利用光纤、透镜或微型(例如，基于CCD的)成像系统获得表面图像。用于本发明的目的的荧光透视仪的范例包括，但不限干，X射线成像系统。通过下文结合附图
对本发明的各实施例的详细描述，本发明的上述形式及其他形式以及本发明的各种特征和优点将变得更加明显。所述详细描述和附图仅用于对本发明进行举例说明而非对其构成限制，本发明的范围由权利要求及其等同要件界定。
图I图不了本领域已知的ACL关节内窥镜手术的不意性表不。图2图示了本领域已知的无手术导航的示范性ACL关节内窥镜手术。图3图示了本领域已知的具有手术导航的示范性ACL关节内窥镜手木。图4图示了根据本发明的手术导航系统的示范性实施例的具有手术导航的示范性ACL关节内窥镜手木。图5图示了表示根据本发明的图像整合方法的示范性实施例的流程图。图6图示了表示根据本发明的工具跟踪方法的示范性实施例的流程图。图7图示了根据本发明的手术导航方法的示范性实施例的流程图。參考图4，其示出了本发明的手术导航系统60，其用于相对于手术规划和手术中图像对手木工具进行实时跟踪，该过程涉及基于图像的配准和工具跟踪。为此，系统60包括图像整合器61、工具跟踪器62以及用于图示图像23、31、43的显示装置。本文将图像整合器61广义地定义为在结构上被构造成实施基于图像的配准的任何装置，所述配准涉及身体的解剖区域的多幅图像的整合，所述多幅图像包括手术前扫描图像(例如，3D CT/MRI图像)、手术中荧光透视图像(例如，2D X射线图像)以及手术中内窥镜图像(例如，2D关节内窥镜图像)。本文将工具跟踪器62广义地定义为在结构上被构造成实施工具跟踪的任何装置，所述跟踪涉及手木工具在手术前扫描图像和/或手术中荧光透视图像内的叠加，其表示在手术中内窥镜图像内对手术工具的跟踪。本文将显示装置广义地定义为在结构上被构造为根据任何适当的技术显示图像和受到跟踪的手木工具的任何装置，例如，所述技术可以是对图像和受到跟踪的手木工具的增强虚拟可视化。图5图示了表示由图像整合器61执行的图像整合方法的流程图70。參考图5，流程图70具有荧光透视路径和内窥镜路径，两条路径都引向图像整合阶段S74。所述荧光透视路径包括流程图70的阶段S71，其包括手术中荧光透视图像(例如，图4中的图像41)与手术前扫描图像(例如，图4的图像31)的荧光透视图像配准。在阶段S71的一个实施例中，荧光透视图像配准涉及将2D手术中荧光透视图像刚性空间变换为目标图像，从而使之与作为參考图像的3D手术前扫描图像对准，由此生成荧光透视图像矩阵
其中，ベ表示本领域已知的矩阵求逆)，其中，所述刚性空间变换是本领域已知的。或者，所述荧光透视图像配准可以涉及将3D手术前扫描图像刚性空间变换为目标图像，从而使之与作为參考图像的2D手术中荧光透视图像对准，由此生成荧光透视图像矩阵(TCT_X)，其中，所述刚性空间变换是本领域已知的。阶段S71是由图像整合器60在通过荧光透视仪(例如，图4的X射线系统40)生成每个新的图像帧时执行的，其以手术流程期间由外科医生決定的需求为基础。内窥镜路径包括流程图70的阶段S72和阶段S73。阶段S72包括手术中内窥镜图像(例如，图4的图像23)内的对象的表面重建。在阶段S72的针对立体内窥镜(例如，具有两个照相机的同时拍摄两幅图像的关节内窥镜)的示范性实施例中，可以采用本领域已知的任何立体3D重建方法。在阶段S72的针对单筒内窥镜(例如，拍摄图像的单照相机关节内窥镜)的示范性实施例中，可以采用本领域已知的任何摄影测量重建技术。例如，在给定单筒内窥镜的速度的情况下，可以从光流提取深度图。具体而言，光流是表示图像内的每个点或特征在图像时间序列内的运动的矢量场，其中，将光流上的在连续片层内不发生移动的点称为扩展焦点(“F0E”)。使内窥镜的光轴与其移动对准，由此使FOE与内窥镜的移动对准。可以通过了解每个点或特征距FOE的距离(D)、每个点内的光流的幅度(V)以及内窥镜的速度(V)而根据Z=v*D/V提取深度信息(Z)。可以从固有的照相机參数(例如，焦点等)计算内窥镜的X和Y位置。本领域技术人员应当认识到，在不采用光学线索(cue)的情况下使内窥镜进行枢轴转动，以实现表面重建目的，而备选地，在采用光学线索的情况下不必使内窥镜进行枢轴运动来实现表面重建目的。阶段S73包括手术前扫描图像(例如，图4中的图像31)的内窥镜图像配准以及手术中内窥镜图像内的表面重建(例如，图4的图像23)。在阶段S73的ー个示范性实施例中，内窥镜图像配准涉及将手术中内窥镜图像内的表面重建刚性空间变换成目标图像，从而使之与作为參考图像的3D手术前扫描图像对准，由此生成内窥镜图像矩阵TCT_E(VfrU，其中，所述刚性空间变换是本领域已知的。具体而言，可以按照所定义的特征性亨氏(Hounsfield)单位(例如，175HU)利用图像阈值化对手术前扫描图像中所示的骨骼表面进行分割，并且可以执行迭代最近点(ICP)算法，从而对所述图像进行变换。或者，所述内窥镜图像配准涉及将3D手术前扫描图像刚性空间变换成目标图像，从而使之与作为參考图像的手术中内窥镜图像内的表面重建对准，由此生成内窥镜图像矩阵TE_CT，其中，所述刚性空间变换是本领域已知的。由图像整合器60在通过(ー个或多个)内窥镜装置(例如，图4的关节内窥镜40)生成每个新的图像帧时执行阶段S73，其在手术过程中采取连续的方式。阶段S74包括阶段S71的荧光透视图像矩阵TX_CT和阶段S73的内窥镜图像矩阵TCT_E的图像整合。在阶段S74的一个示范性实施例中，图像整合包括对荧光透视图像 矩阵TX_CT和内窥镜图像矩阵TCT_E实施本领域已知的矩阵乘法，由此得到整合图像矩阵TX_E
(Te-x_T x-e )。流程图70仍然处于手术流程期间的ー个循环内，这时通过与阶段71的最当前的荧光透视图像配准发生了整合的内窥镜路径S72和S73对阶段S74持续不断地更新。图6图示了表示由工具跟踪器62 (图4)执行的工具跟踪方法的流程图80。參考图6，流程图80的阶段S81包括在手术中内窥镜图像(例如，图4的图像23)内跟踪手木工具，以及生成表示手木工具(T)在手术中内窥镜图像(E)中的位置的内窥镜图像矩阵Ττ_Ε(例如，所述内窥镜图像矩阵Ττ_Ε可以是通过平移分量示出工具尖端，通过旋转分量示出工具取向的变换矩阵)。在阶段S81的一个示范性实施例中，工具跟踪器61执行本领域已知的摄影測量跟踪技木。具体而言，与内窥镜图像的背景(例如，骨骼)相比，手木工具在内窥镜图像内通常具有高对比度。因而，有可能利用三(3)种颜色通道上的阈值化来对图像进行分害わ由此检测手木工具在内窥镜图像内的位置。或者，可以向手木工具的尖端涂上ー种在人体内极少观察到的截然不同的顔色(例如，緑色)，由此将得到通过绿色通道实施的分割。在任一种情况下，一旦通过内窥镜图像的分割检测到了手木工具，那么可以采用先前本文描述的深度估算技术估算工具相对于内窥镜框架(endoscopic frame)的深度。流程图80的阶段82包括通过内窥镜跟踪矩阵Ττ_Ε (ΤΕ_τ=ΤΛ_Ε)与整合图像矩阵ΤΧ_Ε的整合在手术中荧光透视图像内跟踪手木工具。在阶段S82的一个示范性实施例中，所述整合包括对内窥镜跟踪矩阵Ττ_Ε和所述整合图像矩阵ΤΧ_Ε的逆矩阵实施本领域已知的矩阵乘法，从而得到荧光透视跟踪矩阵Ττ_χ (Τχ_τ=ΤΛ_χ)。流程图80的阶段S83包括通过内窥镜跟踪矩阵Ττ_Ε与内窥镜图像矩阵TCT_E的整合在手术前扫描图像内跟踪手木工具。在阶段S83的一个示范性实施例中，所述整合包括对内窥镜跟踪矩阵Ττ_Ε和内窥镜图像矩阵TCT_E的逆矩阵实施本领域已知的矩阵乘法，由此得到扫描跟踪矩阵TT_CT ( Tct_t=T^t_ct )。阶段S82和S83的结果是在手术前扫描图像和手术中荧光透视图像中对手术工具的实时跟踪的显示，例如，图4所示的手术前扫描图像31的跟踪叠加32和图4所示的手术中荧光透视图像42的跟踪叠加43。不需要外部成像系统(但是可以采用外部成像系统对内窥镜装置进行补充)和患者配准就可以达到这ー目的。图7图示了表示在ACL关节内窥镜手术的背景下表示流程图70 (图5)和流程图80 (图6)的手术导航方法的流程图90。具体而言，流程图90的阶段S91包括采集手术前扫描图像(例如，3DCT图像、3DMRI图像、3D X射线图像、3D荧光透视图像等)。流程图90的阶段S92包括对患者进行准备以实施ALC关节内窥镜手木。例如，患者准备可以包括对膝盖的肌腱描画格栅以及对膝盖固定，以实施手木。流程图90的阶段S93包括采集手术中荧光透视图像(例如，2D X射线图像)以及执行阶段S71的荧光透视配准(图5)。第一次通过流程图90涉及阶段S93并由其进行至阶段S95-S98。阶段95包括在膝盖内部署关节内窥镜(例如，图4的关节内窥镜20)。阶段S96包括在膝盖内部署额外的手木工具(例如，图4的修整仪器21和冲洗仪器22)。阶段S97包括采集手术中内窥镜图像和执行阶段S72的表面重建(图5)，还包括阶段S73的内窥镜配准(图5)以及阶段S74的图像整合(图5)。并且，阶段S98包括根据流程图80对手术工具进行跟踪(图6)。判决阶段S99-S101允许在手术流程阶段S102和工具跟踪阶段S98之间形成连续的循环，直到发生下述情况为止(I)外科医生移动了关节内窥镜，从而迫使流程返回至阶段S97，(2)外科医生在膝盖内引入了新的要跟踪的手木工具，其迫使流程返回至阶段S96，或者(3)外科医生确定需要新的荧光透视图像，其迫使流程返回至阶段S93。如果关节内窥镜和受到跟踪的手木工具仍然部署着，那么任何一次返回至阶段S93都将经由判决阶段S94进行至阶段S97。在实践中，本领域技术人员应当认识到如何针对其他内窥镜应用实施流程图90。尽管已经对本发明的各种实施例给出了图示和描述，但是本领域技术人员应当认识到，本文描述的方法和系统仅仅是示范性的，在不背离本发明的实际范围的情况下，可以、做出各种变化和修改，并且可以采用等价要素替代其要素。此外，在不背离本发明的核心范围的情况下，可以做出很多修改，使之适应本发明的教导。因此，其目的是说，本发明不受作为为了实施本发明而构思的最佳模式而公开的具体实施例的限制，相反本发明 包括所有落在权利要求的范围内的实施例。
权利要求
1.一种用于整合身体的解剖区域的多幅图像的手术导航系统(60)，所述多幅图像包括手术前扫描图像(31)、手术中荧光透视图像(42)和手术中内窥镜图像(23)，所述手术导航系统(60)包括 图像整合器(61 )，其能够用于生成整合图像矩阵(TX_E)，所述整合图像矩阵包括荧光透视图像矩阵(TX_CT)与内窥镜图像矩阵(TCT_E)的整合， 其中，所述荧光透视图像矩阵(TX_CT)包括所述手术中荧光透视图像(42)与所述手术前扫描图像(31)之间的变换，并且 其中，所述内窥镜图像矩阵(TCT_E)包括所述手术前扫描图像(31)与所述手术中内窥镜图像(23)之间的变换，以及 工具跟踪器(62)，其能够用于生成整合跟踪矩阵(Ττ_χ)和扫描跟踪矩阵(TT_CT)， 其中，所述整合跟踪矩阵(Ττ_χ)包括所述整合图像矩阵(ΤΧ_Ε)与内窥镜跟踪矩阵(Ττ_Ε)的整合， 其中，所述扫描跟踪矩阵(TT_CT)包括所述内窥镜图像矩阵(Tct_e)与所述内窥镜跟踪矩阵(Ττ_Ε)的整合，并且 其中，所述内窥镜跟踪矩阵(Ττ_Ε)表示在所述手术中内窥镜图像(23)内对手术工具(21)的跟踪。
2.根据权利要求I所述的手术导航系统(60)，其中，所述图像整合器(61)还能够用于执行所述手术中内窥镜图像(23)内的对象的表面的摄影测量重建，从而以其作为所述手术前扫描图像(31)与所述手术中内窥镜图像(23 )之间的所述变换的基础。
3.根据权利要求I所述的手术导航系统(60)，其中，所述荧光透视图像矩阵(TX_CT)与所述内窥镜图像矩阵(TCT_E)的所述整合包括执行涉及所述荧光透视图像矩阵(TX_CT)与所述内窥镜图像矩阵(TCT_E)的矩阵乘法。
4.根据权利要求I所述的手术导航系统(60)，其中，所述整合图像矩阵(TX_E)与内窥镜跟踪矩阵(Ττ_Ε)的所述整合包括执行涉及所述整合图像矩阵(ΤΧ_Ε)与所述内窥镜跟踪矩阵(Ττ_Ε)的矩阵乘法。
5.根据权利要求I所述的手术导航系统(60)，其中，所述内窥镜图像矩阵(TCT_E)与所述内窥镜跟踪矩阵(Ττ_Ε)的所述整合包括执行涉及所述内窥镜图像矩阵(TCT_E)与所述内窥镜跟踪矩阵(Ττ_Ε)的矩阵乘法。
6.根据权利要求I所述的手术导航系统(60)，还包括 用于显示所述手术中荧光透视图像(42)的显示装置，所述手术中荧光透视图像具有作为所述整合跟踪矩阵(Ττ_χ)的函数的手木工具(21)的叠加(43)。
7.根据权利要求I所述的手术导航系统(60)，还包括 用于显示所述手术前扫描图像(31)的显示装置，所述手术前扫描图像具有作为所述扫描跟踪矩阵(TT_CT)的函数的手木工具(21)的叠加(43)。
8.根据权利要求I所述的手术导航系统(60)，其中，所述工具跟踪器(62)还能够用于执行在所述手术中内窥镜图像(23)内对所述手木工具(21)的摄影测量跟踪。
9.根据权利要求I所述的手术导航系统(60)，其中，所述手术前扫描图像(31)选自包括计算机断层摄影图像、磁共振图像、超声图像和X射线图像的组。
10.一种用于整合身体的解剖区域的多幅图像的手术导航系统(60)，所述多幅图像包括手术前扫描图像(31)、手术中荧光透视图像(42)和手术中内窥镜图像(23)，所述手术导航系统(60)包括 图像整合器(61)，其能够用于生成整合图像矩阵(TX_E)，所述整合图像矩阵包括荧光透视图像矩阵(Tx_ct)与内窥镜图像矩阵(Tct_e)的整合， 其中，所述荧光透视图像矩阵(TX_CT)包括所述手术中荧光透视图像(42)与所述手术前扫描图像(31)之间的变换，并且 其中，所述内窥镜图像矩阵(TCT_E)包括所述手术前扫描图像(31)与所述手术中内窥镜图像(23)之间的变换，以及 工具跟踪器(62 )，其能够用于生成整合跟踪矩阵(Tt_x)， 其中，所述整合跟踪矩阵(Tt_x)包括所述整合图像矩阵(Tx_e)与内窥镜跟踪矩阵(Tt_e)的整合，并且 其中，所述内窥镜跟踪矩阵(Tt_e)表示在所述手术中内窥镜图像(23)内对手术工具(21)的跟踪。
11.根据权利要求10所述的手术导航系统(60)，所述图像整合器(61)还能够用于重建所述手术中内窥镜图像(23)内的对象的表面，从而以其作为所述手术前扫描图像(31)与所述手术中内窥镜图像(23 )之间的所述变换的基础。
12.根据权利要求10所述的手术导航系统(60)，其中，所述荧光透视图像矩阵(Tx_ct)与所述内窥镜图像矩阵(Tct_e)的所述整合包括执行涉及所述荧光透视图像矩阵(Tx_ct)与所述内窥镜图像矩阵(Tct_e)的矩阵乘法。
13.根据权利要求10所述的手术导航系统(60)，其中，所述整合图像矩阵(TX_E)与内窥镜跟踪矩阵(Tt_e)的所述整合包括执行涉及所述整合图像矩阵(tx_e)与所述内窥镜跟踪矩阵(Tt_e)的矩阵乘法。
14.根据权利要求10所述的手术导航系统(60)，还包括 用于显示所述手术中荧光透视图像(42)的显示装置，所述手术中荧光透视图像具有作为所述整合跟踪矩阵(Tt_x)的函数的手术工具(21)的叠加(43)。
15.根据权利要求10所述的手术导航系统(60)，其中，所述工具跟踪器(62)还能够用于执行在所述手术中内窥镜图像(23)内对所述手术工具(21)的摄影测量跟踪。
16.一种用于整合身体的解剖区域的多幅图像的手术导航方法，所述多幅图像包括手术前扫描图像(31)、手术中荧光透视图像(42)和手术中内窥镜图像(23)，所述方法包括 生成整合图像矩阵(TX_E)，所述整合图像矩阵包括荧光透视图像矩阵(TX_CT)与内窥镜图像矩阵(Tct_e)的整合， 其中，所述荧光透视图像矩阵(TX_CT)包括所述手术中荧光透视图像(42)与所述手术前扫描图像(31)之间的变换，并且 其中，所述内窥镜图像矩阵(TCT_E)包括所述手术前扫描图像(31)与所述手术中内窥镜图像(23)之间的变换，以及 生成整合跟踪矩阵(Tt_x)和扫描跟踪矩阵(Tt_ct)， 其中，所述整合跟踪矩阵(Tt_x)包括所述整合图像矩阵(Tx_e)与内窥镜跟踪矩阵(Tt_e)的整合， 其中，所述扫描跟踪矩阵(Tt_ct)包括所述内窥镜图像矩阵(Tct_e)与所述内窥镜跟踪矩阵(Ττ_Ε)的整合，并且 其中，所述内窥镜跟踪矩阵(Ττ_Ε)表示对所述手术中内窥镜图像(23)内的手木工具(21)的跟踪。
17.根据权利要求16所述的手术导航方法，其中，所述荧光透视图像矩阵(TX_CT)与所述内窥镜图像矩阵(TCT_E)的所述整合包括执行涉及所述荧光透视图像矩阵(TX_CT)与所述内窥镜图像矩阵(TCT_E)的矩阵乘法。
18.根据权利要求16所述的手术导航方法，其中，所述整合图像矩阵(TX_E)与内窥镜跟踪矩阵(Ττ_Ε)的所述整合包括执行涉及所述整合图像矩阵(ΤΧ_Ε)与所述内窥镜跟踪矩阵(Ττ_Ε)的矩阵乘法。
19.根据权利要求16所述的手术导航方法，其中，所述内窥镜图像矩阵(TCT_E)与所述内窥镜跟踪矩阵(Ττ_Ε)的所述整合包括执行涉及所述内窥镜图像矩阵(TCT_E)与所述内窥镜跟踪矩阵(Ττ_Ε)的矩阵乘法。
20.根据权利要求16所述的手术导航方法，还包括 显示所述手术中荧光透视图像(42)，所述手术中荧光透视图像具有作为所述整合跟踪矩阵(Ττ_χ)的函数的手木工具(21)的叠加(43);以及 显示所述手术前扫描图像(31)，所述手术前扫描图像具有作为所述扫描跟踪矩阵(TT_CT)的函数的手术工具(21)的叠加(43)。
全文摘要
一种相对于手术前手术规划和手术中图像对手术工具实施的实时跟踪涉及基于图像的配准和工具跟踪配准。所述基于图像的配准实施对身体的解剖区域的多幅图像的整合，所述多幅图像包括手术前扫描图像(31)(例如，3D CT/MRI图像)、手术中荧光透视图像(42)(例如，2D X射线图像)和手术中内窥镜图像(23)(例如，2D关节内窥镜图像)。所述工具跟踪配准实施在手术中内窥镜图像(23)内对一个或多个手术工具的跟踪在手术前扫描图像(31)和/或手术中荧光透视图像(42)内的表示。
文档编号A61B19/00GK102711650SQ201080061265
公开日2012年10月3日 申请日期2010年12月6日 优先权日2010年1月13日
发明者A·波波维奇 申请人:皇家飞利浦电子股份有限公司