CN102077248B - 用于在受试者内定位感兴趣对象的设备和方法 - Google Patents
用于在受试者内定位感兴趣对象的设备和方法 Download PDFInfo
- Publication number
- CN102077248B CN102077248B CN200980124246.7A CN200980124246A CN102077248B CN 102077248 B CN102077248 B CN 102077248B CN 200980124246 A CN200980124246 A CN 200980124246A CN 102077248 B CN102077248 B CN 102077248B
- Authority
- CN
- China
- Prior art keywords
- area
- image
- experimenter
- dimensional image
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/12—Arrangements for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
- A61B6/469—Arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B90/37—Surgical systems with images on a monitor during operation
- A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
- G06T2207/10124—Digitally reconstructed radiograph [DRR]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30021—Catheter; Guide wire
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30048—Heart; Cardiac
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- Heart & Thoracic Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Optics & Photonics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- High Energy & Nuclear Physics (AREA)
- Theoretical Computer Science (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- General Physics & Mathematics (AREA)
- Biophysics (AREA)
- Human Computer Interaction (AREA)
- Robotics (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Magnetic Resonance Imaging Apparatus (AREA)
- Image Analysis (AREA)
- Processing Or Creating Images (AREA)
- Circuits Of Receivers In General (AREA)
Abstract
本发明涉及用于在受试者内定位感兴趣对象的设备、方法和计算机程序。该设备包括:配准单元(25),用于将所述受试者的3D表示与2D图像(200)配准(120),所述3D表示包括与所述受试者的多个结构区域对应的多个片段,其中所述配准单元适于在所述图像中限定与所述多个片段对应的多个面积(205,210,215),使得所述多个面积中的至少一个面积与所述多个区域中的相应区域相关联;以及用于定位(125)所述对象的定位单元(30),所述定位单元通过处理所述图像从所述图像中提取所述对象的指示,其中所述处理限于所述多个面积中与预定对象区域相关联的对象面积。
Description
技术领域
本发明涉及用于在受试者内定位感兴趣对象的设备、方法和计算机程序。
背景技术
在US 2006/184006A1公开的一方面中,提供了一种用于产生患者脉管解剖结构的虚拟路线图的装置,以供外科医生在对患者的脉管解剖结构进行手术时使用,所述设备包括:患者解剖结构的虚拟3D模型,其中虚拟3D模型包括表示患者骨骼结构的虚拟3D结构以及表示患者脉管结构的虚拟3D结构,其中表示患者骨骼结构的虚拟3D结构与表示患者脉管结构的虚拟3D结构适当配准;用于提供患者骨骼结构以及程序中使用的手术设备的实时图像的荧光镜;用于使虚拟3D模型与荧光镜的患者空间适当配准的配准装置;骨骼掩模减除装置,用于(i)产生患者骨骼结构的骨骼掩模,以及(ii)从荧光镜提供的实时图像减除骨骼掩模,由此创建忽略了骨骼结构的经修改荧光镜图像;以及用于产生虚拟路线图的图像产生装置,其中虚拟路线图包括组合了(i)表示患者脉管结构的虚拟3D结构的图像和(ii)省略了骨骼结构的经修改荧光镜图像的复合图像,其中表示患者脉管结构的虚拟3D结构的图像与省略了骨骼结构的经修改荧光镜图像适当配准。
常常需要在如人体的受试者内定位如导管的感兴趣对象的特定领域是电生理学(EP)。于是,在本发明和心脏电生理学(EP),更具体而言是X射线引导的消融和起搏器放置程序,之间有着特别的关系。
为了在3D中自动定位EP导管(例如用于电解剖学或消融映射),可能需要在二维X射线图像中跟踪它们并从2D信息外推出3D位置。这种方法的示例包括:如US 7050844中那样,在立体或双平面X射线系统提供的两个同时图像中进行跟踪,从而可以从两个视角推断出3D位置。
然而,由于若干原因,一般情况下,在2D X射线图像中跟踪EP导管 是困难的,这些原因包括:
为了允许实时成像而不使患者暴露于过量的辐射,荧光检查图像中的X射线剂量一般是低的,于是,图像质量较差。
可能会把荧光检查图像中很多可见的对象误认为EP导管(例如,ECG导联和贴片、缝线、注射导管等)。
可能同时使用很多EP导管(例如为了映射各种形状的导管、消融导管和参考导管),但并非需要跟踪它们全部,而它们可能在跟踪那些特别感兴趣的时产生干扰。
于是,如通常在EP程序中那样,使用很多各种类型和形状的导管(例如,参考、映射或消融),存在可能与导管混淆的额外对象,并且所提供的荧光检查图像的图像质量相当差,因此,经典的探测和跟踪方法可能在正确获取感兴趣对象时失败。
发明内容
本发明的目的在于提供一种设备、方法和计算机程序,其允许在受试者内定位感兴趣对象,在对图像质量、易混淆对象和/或干扰对象的敏感性方面更为鲁棒。优选地,本发明提供了一种用于定位的手段,其更为准确而无需增加图像处理所需的工作量,或提供期望的定位准确度而减小对如计算能力或计算时间的资源需求。
在本发明的第一方面中,提供了一种用于在受试者内定位感兴趣对象的设备,其包括:配准单元,用于将所述受试者的三维表示与二维图像配准,所述三维表示包括与所述受试者的多个结构区域对应的多个片段,其中所述配准单元适于在所述图像中限定与所述多个片段对应的多个面积,使得所述多个面积中的至少一个面积与所述多个区域中的相应区域相关联;以及用于定位所述对象的定位单元,其中所述定位单元适于通过处理所述图像从所述图像中提取所述对象的指示,其中所述图像的处理限于多个面积中与预定对象区域相关联的对象面积。
在本发明的另一方面中,提供了一种用于在受试者内定位感兴趣对象的方法,其包括如下步骤:将受试者的三维表示与二维图像配准,所述三维表示包括与所述受试者的多个结构区域对应的多个片段,由此在所述图像中限定与所述多个片段对应的多个面积,使得所述多个面积中的至少一个面积与所述多个区域中的相应区域相关联;以及通过处理所述图像从所述图像中提取所述对象的指示从而定位所述对象,其中所述图像的处理限于所述多个面积中与预定对象区域相关联的对象面积。
在本发明的另一方面中,提供了一种包括程序代码段的计算机程序,所述程序代码段用于当所述计算机程序在计算机上被执行时令计算机执行根据本发明的方法的步骤。
在EP的背景中,本发明利用来自患者3D扫描的解剖学信息以便帮助在荧光检查图像中空间定位EP导管并排除不感兴趣的大部分对象和结构,以便使得自动导管探测、跟踪和标记更鲁棒。
本发明基于以下见地:例如,可以在2D荧光检查图像(二维图像的特例)上配准心脏解剖结构的3D模型(作为受试者的三维表示的示例),其中投射在二维X射线图像上的(由三维模型提供的)心脏的分割界定了针 对不同解剖部分的感兴趣区域。然后,可以使用对感兴趣区域的这种识别来帮助在二维荧光检查图像序列中探测和跟踪与感兴趣区域相关的感兴趣对象,例如如导管的介入工具,条件是感兴趣对象被定位在已知解剖结构中,即在感兴趣区域中。
可以通过不同手段提供对象的所提取指示。一种可能性是该指示仅指示对象的位置(例如对象的中心点或另一预定特征的位置)。另一种可能性是该指示包括关于对象轮廓线的信息或由轮廓线构成,轮廓线例如可以在图像中被突出显示。此外,该指示可以是指示对象的图像的分割或子图像。此外,该指示还可以包括以上可能性中一些或全部的组合。
本发明的有用实现方式的示例可以包括下列:
在AF程序中,通过排除所有被探测为处于相关区域的投影之外例如左心房之外的对象,可以使得映射和消融导管的探测更容易。
可以利用起搏器导联和其他导管不起源于同一解剖结构(即结构区域)的事实,将它们区分开(或自动标记)。
一旦在给定视图中完成2D-3D配准,就可以将X射线系统几何结构中的所有变化应用于配准矩阵。通过这样的调整,所投射的感兴趣区域始终保持与X射线视图一致,即三维表示的片段和示出对应结构区域的二维面积之间的关系保持正确。
优选地,尤其在将本发明用于EP目的的背景中,将3D数据与2D X射线图像配准,使得对应的体积投影密切匹配2D图像。这在X射线提供的3D空间中给出了患者的位置,由此给出可以在3D体积中分割的所有解剖结构的位置。例如,自动探测冠状窦中的参考导管可以限于该解剖区域到荧光检查图像上的投影,这是正面视图中非常有限的区域。可以进行更为广泛的计算,因为搜索区域减小了,并且由于处在不同解剖面积中这样简单的原因就可以排除所有其他导管,甚至是非常类似的导管。
在这里特别参考在电生理学背景中的实施方式例示和解释了本发明。但是,必须注意,本发明不仅限于电生理学领域。本发明还可以有利地应用于其他领域,例如支架的放置以及微创手术(例如,穿刺活检、射频消融)。此外,本发明还可以用于非医疗背景下,例如用于与机器人相关的技术领域中。
尽管本发明的特别有利方面涉及到医疗领域以及对医务人员在介入程序中的支持,但要在其中定位感兴趣对象的受试者不限于人或动物体。因此,配准片段所对应的结构区域可以包括但未必限于身体的解剖区域或结构。
此外,多个片段可以覆盖或不覆盖完整的受试者或受试者部分。例如,三维表示可以包括仅针对受试者的特定区域的片段,例如,仅对应于心脏的特定要素的片段。虽然如此,即使在仅提供了例如心脏的单个明确片段的情况下,也可以将这考虑成多个片段,包括对应于心脏的第一片段以及与第一片段互补、与身体其余部分对应的第二片段。
此外,分割也可以是非排他性的,即,不同片段可以部分对应于同一结构区域。例如,可以提供对应于血液通路的片段以及对应于胸廓的另一片段。此外,片段可以包括一个或多个进一步的子片段,其进而可以交叠或包括进一步的片段,例如,对应于血液通路的片段包括对应于心脏或特定静脉(区域)的子片段。
为了实现有利的效果,三维表示不必一定是受试者的完美或精确表示,因为即使是在所述分割和受试者的结构区域之间表现出一定量误差的近似表示也可以被使用。对于所述表示和图像之间的配准而言也是如此。不过,所述表示和所述配准越准确,就可以提供越精确的图像处理限制。
根据本发明的优选方面,该设备还包括接口,所述接口适于允许由用户选择所述受试者的多个区域中的对象区域作为预定对象区域。优选地,该设备允许以更多方式确定为了定位感兴趣对象而进行的图像处理所限于的区域或对应的对象面积。利用该接口,用户能够输入和/或操控信息,基于这种信息,将受试者的对象区域之一识别为预定对象区域。于是,用户可以使根据本发明的设备适应于用户当前所处的情况的特定需要。
根据本发明的另一优选方面,该设备还包括用于采集所述受试者的三维表示的三维扫描器。通过为根据本发明的设备提供三维扫描器,有可能将用于产生三维表示的数据的采集与本发明的定位方面耦合在一起。这种耦合消除了检查三维表示和本发明的参数之间的兼容性的需要,在根据本发明的设备使用的三维表示是由如要检查的患者的医疗数据库的外源提供的情况下,可能会出现这种需要。
根据本发明的又一优选方面,该设备还包括分割单元,其用于将所述三维表示分割成与所述受试者的多个结构区域对应的多个片段。根据这一优选方面,可以使分割单元特别适应于本发明的任何特殊需要,即,分割单元可以是专用单元,其被设计成满足针对本发明而优化的特定规格。
必须要指出,即使在根据本发明的方面提供三维扫描器和/或分割单元的情况下,这些方面仍然可以包括如下选项:可以从某种外源向根据本发明的设备输入相应信息(即,三维表示和/或其分割)。
根据本发明的另一优选方面,该设备还包括成像单元,其用于采集所述二维图像,其中所述成像单元优选为荧光镜。已发现将成像单元包括在根据本发明的设备中是有利的,尤其是允许在2D图像采集和感兴趣对象的定位之间进行更直接和实时的联系。
根据本发明的优选方面,该方法还包括采集受试者的三维表示和采集二维图像的步骤。
还可以与用于所述表示的数据的真实采集、所述分割的产生和所述图像的采集分离地提供本发明的设备和方法。然而,如果扫描器(例如与计算断层摄影或磁共振成像设备相关)、分割单元和/或荧光镜(例如)被组合到本发明的设备中,则可以彼此相对地调节设备的单元和/或方法的步骤以改善性能。
根据本发明的另一优选方面,所述定位单元适于处理所述受试者的荧光检查图像。本发明的优选应用领域是在提供普通荧光检查图像的电生理学领域中。
根据本发明的另一优选方面,在介入程序中执行所述二维图像的采集和所述对象的定位,并且在介入前程序中执行所述受试者的三维表示的采集。例如,为了提供在如用于治疗心房纤颤的射频消融的介入程序期间对感兴趣对象的跟踪,优选实时地即几乎即时地和连续地执行受试者(身体)内部真实情况的二维图像或投影的获得以及对象的定位。在这种情况下,优选在介入之前提供包括其分割的所述表示。于是,时间限制更少,并可以在开始治疗或诊断程序之前完成改善其质量可能需要的对配准进行的任何调节。
根据本发明的又一优选方面,感兴趣对象是介入工具,尤其是导管或 起搏器探头。如上所述,本发明在医疗介入程序领域,尤其是包括要定位的导管的程序中特别有用。
根据本发明的另一优选方面,该设备还包括用于标记所述对象的标记单元,其中所述标记单元适于在所述多个面积中与预定标记面积相关联的面积中定位所述对象的情况下产生要与所述对象相关联的预定指示。根据这个方面,也可以从解剖区域的投影推断出根据其位置的例如一个或多个导管的自动标记。本发明的特别有用的应用是有可能在2D荧光检查中探测到的设备上——例如在EP程序中冠状窦(CS)导管上——自动放置标记。对应于CS区域的投影的感兴趣区域不仅有助于探测导管,它还给出该区域中被探测导管的识别,其可以自动呈现为标记。于是,例如,利用足够小的对应感兴趣体积的投影,可以更容易地探测和标记在参考部位(例如冠状窦、肺静脉)中定位的EP导管。要指出的是,标记区域可以不同于对象区域。这种状况的示例是利用对应于患者心脏的对象区域/片段来定位导管,而对于心脏的区域,提供进一步的(子)片段以便允许根据其在心脏内部的位置对导管进行更详细的标记。
尤其在从属权利要求中限定了本发明的优选实施例。应当理解,根据权利要求1所述的用于定位的设备、根据权利要求8所述的用于定位的方法和根据权利要求12所述的计算机程序具有与从属权利要求中限定的类似和/或等同的优选实施例。
此外,要理解,从属权利要求和/或这里所述优选实施例的其他特征与相应独立权利要求的任何组合也可以构成本发明的有利实施例。
附图说明
参考下文描述的实施例,本发明的这些和其他方面将显而易见并得到阐明。在下述附图中
图1示意性示出了根据本发明用于在受试者内定位感兴趣对象的设备;
图2示出了流程图,其示意性地例示了根据本发明用于在受试者内定位感兴趣对象的方法;以及
图3示出了受试者的图像,包括不同感兴趣对象的子图像以及与受试者的区域相关联的相应面积的指示。
具体实施方式
图1示意性示出了根据本发明的优选实施例用于在受试者20内定位感兴趣对象15的示范性设备10。对象15被提供于受试者20内部,其中至少要相对于受试者20的一个或多个特定区域确定对象15在受试者20内部的位置。
设备10包括充当三维扫描器的磁共振成像(MRI)设备40(本发明的其他实施例可以涉及例如计算断层摄影(CT)或旋转血管造影术)、耦合到3D成像设备40的分割单元45、充当成像单元的荧光镜50(2D成像设备的另一示例为超声波系统)、耦合到分割单元45和荧光镜50的配准单元25(根据另一实施例,配准单元可以替换地或额外地耦合到如MRI 40的3D成像设备)、耦合到配准单元25的定位单元30、耦合到定位单元30的接口35以及耦合到定位单元30和接口35的标记单元55。为了允许用户在其他步骤中进行校正,根据修改的实施例(未示出),接口还耦合到分割单元和/或配准单元。
可以使用几种配准方法:配准可以使用分段模型,但也可以基于图像(如在心脏在X射线图像中不可见的情况中,结果后来被应用于分割的面积),或甚至可以使用患者身体内部或优选为外部的一个或多个标记。
MRI设备40优选在向受试者20内引入对象15之前采集受试者20的三维扫描,并将扫描传递到分割单元45,分割单元45处理扫描以产生受试者20的模型或表示,包括指示受试者20的一个或多个结构区域的一个或多个片段,其要被传递到配准单元25。
荧光镜50提供受试者20的至少一个二维图像,其指示受试者20的内部构造,其中图像包括作为感兴趣对象15的指示的子图像。荧光镜将图像或一系列图像传递到配准单元25。
配准单元25接收三维表示(可以是来自3D成像设备40的体积和/或来自分割单元45的其分割)以及来自荧光镜50的至少一个图像,并执行该表示与图像的配准,其中在图像中限定多个面积,这些面积对应于来自分割单元45的表示中提供的多个片段,这些片段进而对应于受试者20内的相应区域。然后将指示这些面积的数据和2D图像传递到定位单元。在配 准单元25接收到多个图像的情况下,即接收到一系列按时间顺序变化的图像的情况下,配准单元25优选针对每个帧调整配准数据和/或图像面积数据,以便更新额外/新图像的图像面积和所述表示之间的相关性。
定位单元30接收指示以上面积的数据和2D图像(或多个图像)。定位单元30可以从配准单元25(连同面积数据一起)或直接从荧光镜50(如虚线箭头所示)接收图像。此外,定位单元30从接口35接收关于对象区域的指示(由用户(未示出)输入),其中感兴趣对象15是要定位的(根据另一实施例,可以省略该指示,其中定位单元适于检查一个或多个预定对象区域而无需进一步的指示)。基于所提供的输入(即图像、面积数据和对象区域的选择),定位单元30对图像执行图像处理,由此从图像中提取子图像作为感兴趣对象15的指示(根据其他实施例,该指示例如可以是分割、轮廓线和/或位置)。这种图像处理限于与所选对象区域对应的对象面积。
由于要处理的数据的这种限制,图像处理可以更快和/或更精确和/或更鲁棒,而无需额外的计算能力。
此外,根据备选实施例(未示出),接口耦合到配准单元,根据对本发明的图像处理的限制,配准单元向定位单元仅传递缩减的图像。
根据另一备选实施例,配准单元提供一组参数作为图像中面积的限定,并将该组参数传递到定位单元,而定位单元从分割单元接收所述表示(由虚线所示)并基于所提供的该组参数、所述表示和2D图像提供受限的处理。根据这一备选实施例,配准单元提供虚拟配准,即描述配准的数据,而真实配准是由定位单元提供的。
一旦定位了感兴趣对象15,就向标记单元55传递关于定位的数据,标记单元55可以耦合到分割单元45以便接收关于所述表示的分割数据。
图2示出了流程图,其示意性地例示了根据本发明用于在受试者内定位感兴趣对象的方法。
图2所例示的定位方法包括两个总体阶段,即,治疗和/或诊断程序之前的介入前阶段100和介入阶段105,其中在治疗和/或诊断程序期间实时执行定位。在步骤110中,获得并处理(包括分割)受试者的三维表示。在接下来的步骤——步骤115中,采集示出受试者内部的感兴趣对象的受试者的二维图像。
在接下来的步骤——步骤120中,将受试者的三维表示(包括与受试者的多个结构区域对应的多个片段)与二维图像配准,由此在图像中限定与多个片段对应的多个面积,使得多个面积中的至少一个面积与多个区域中的相应区域相关联。
基于这样获得的所述表示和图像之间的配准,在步骤125中定位感兴趣对象,其中定位单元适于通过处理图像从图像中提取对象的子图像,其中图像的处理限于多个面积中与预定对象区域相关联的对象面积。
在介入程序期间可以连续或在预定时间点重复步骤115到125的序列。
图3示出了受试者的图像,包括不同感兴趣对象的子图像以及与受试者的区域相关联的相应面积的指示。根据本发明的实施例,图像采集系统被配置成产生解剖区域还包含例如导管和/或起搏器导联的介入工具的荧光检查图像。图3中例示了这样的荧光检查图像200。另外的图像采集系统被配置成产生同一解剖区域(在这种情况下为心脏)的3D体积。对该心脏或其一部分(心房、冠状静脉……)进行分割并给出3D模型。在3D和2D数据集之间进行配准,然后能够将3D分割投射在2D图像上,如图3中的面积205、210和215所示。面积205对应于左心房域,面积210指示冠状窦域,面积215与下腔静脉域相关。此外,还可以在图3中看到多个导管220、225和230。在一个帧上定位模型允许探测给定解剖部位中的参考导管或导联。这个部位可以是其中具有长导管/导联的冠状窦或其中具有“套索(lasso)”导管的一个或几个肺静脉的口,如图3所示。
根据本发明,与常规处理相比,进行图像处理以定位如导管220、225、230的给定对象所需的计算机能力和/或计算时间减小了,因为要处理的图像面积被减小到(对应于)在其中提供感兴趣对象的感兴趣区域(的对象面积)。定位也更加容易,因为在定位期间可以忽略不在所考虑面积中的其他导管。
一旦在一个帧上探测到导管/导联,就能够在2D荧光检查序列上跟踪它。
本领域技术人员熟悉实现本发明所需或所用的程序(包括算法)和装置,尤其是用于采集包括其分割的三维表示、用于采集受试者的二维图像、用于将三维表示与二维图像配准以及用于从图像中提取感兴趣对象的指示 所需或所用的程序和装置。因此,这里将省略对这些方面的详细解释。
欲了解关于心房纤颤程序的更多背景信息,可以参考例如Jasbir Sra和Masood Akhtar在Curr Probl Cardiol,2007年12月,669到767页的文章“Mapping Techniques For Atrial Fibrillation Ablation”。例如,可以在Jasbir Sra、David Krum、Angela Malloy、Melissa Vass、Barry Belanger、Elisabeth Soubelet、Regis Vaillant和Masood Akhtar的文章“Registration of Three-Dimensional Left Atrial Computed Tomographic Images With Projection Images Obtained Using Fluoroscopy”(发表于Circulation,2005;112:3763-3768)中找到关于配准的更多背景信息。
电生理学(EP)是介入心脏病学的特定领域,其中医师使用心内导管来定位和治愈心脏节律的电功能障碍,通常是在X射线荧光检查引导下进行的。非常有挑战性的EP程序是用于治疗心房纤颤(也称为AF)的射频消融。另一个重要程序是放置起搏器以进行心脏再同步治疗(CRT),其中必须要将起搏器导联放入冠状静脉中。特别在常规设备和方法的背景中,电生理学家需要专门的培训来熟练了解解剖学以及通往所有感兴趣部位的进入通道以及一些实践,以选择正确的设备并操控它们到达目标。
可以利用三维(3D)成像设备(例如CT、MRI)或通过在介入刚开始时局部(对于AF而言是左心房(LA)和肺静脉(PV)的口,对于CRT而言是冠状静脉和窦)注射造影剂来记录患者的解剖结构,但医师必须执行智力配准以在这种信息不再可见的实况荧光检查图像中导航。
对于AF程序而言,在测量电势时知道导管的精确位置是找到导致纤维性颤动的源(异位病灶(ectopic foci)、再入回路(re-entry loop))的关键。更为重要的是消融部位的解剖学映射,以便执行期望的消融模式(例如PV隔离或LA中的屋顶线消融)。
当前通过荧光检查引导的常规EP程序,尤其是AF,常常要花费几个小时。这种程序的主要任务是确定心房内部的电势路径,以便知道消融哪里。在3D中精确定位EP导管并显示叠加在3D心房解剖结构上的所记录电势或消融部位(也称为电-解剖映射或消融映射)对于电生理学家有很大帮助。
尽管已经在附图和上述说明中详细例示和描述了本发明,但是应当将 这样的例示和描述看作是示范性或示例性的,而不是限定性的;本发明不限于所公开的实施例。
通过研究附图、公开内容和随附的权利要求,本领域技术人员能够在实践所要求保护的本发明的过程中理解并实现针对所公开的实施例的其他变型。
在权利要求中,“包括”一词不排除其他元件或步骤,不定冠词“一”或“一个”不排除多个。可以通过单个处理器或其他单元实现权利要求中记载的几项的功能。在互不相同的从属权利要求中记载某些措施的事实不指示不能有利地采用这些措施的组合。
可以将计算机程序存储/分布在适当的介质上,例如,所述介质可以是光存储介质或者与其他硬件一起提供或者作为其他硬件的部分的固态介质,但是,也可以使所述计算机程序通过其他形式分布,例如,通过因特网或者其他有线或无线电信系统。
权利要求中的任何附图标记不应被解释为限制其范围。
Claims (14)
1.一种用于在受试者(20)内定位感兴趣对象(15,220,225,230)的设备,包括:
-配准单元(25),其用于将所述受试者的三维表示与二维图像配准(120),所述三维表示包括与所述受试者的多个结构区域对应的多个片段,其中所述配准单元适于在所述二维图像中限定与所述多个片段对应的多个面积(205,210,215),使得所述多个面积中的至少一个面积与所述多个结构区域中的相应区域相关联,以及
-定位单元(30),其用于接收所述二维图像和指示所述多个面积的数据以定位(125)所述对象,其中所述定位单元适于通过处理所述二维图像从所述二维图像中提取所述对象的指示,其中所述二维图像的处理限于所述多个面积中与预定对象区域相关联的对象面积。
2.根据权利要求1所述的设备,
还包括接口(35),其适于允许由用户选择所述受试者的所述多个结构区域中的对象区域作为所述预定对象区域。
3.根据权利要求1所述的设备,
还包括三维扫描器,其用于采集所述受试者的所述三维表示。
4.根据权利要求1所述的设备,
还包括分割单元(45),其用于将所述三维表示分割(110)成与所述受试者的所述多个结构区域对应的所述多个片段。
5.根据权利要求1所述的设备,
还包括成像单元,其用于采集(115)所述二维图像。
6.根据权利要求5所述的设备,
其中,所述成像单元为荧光镜。
7.根据权利要求1所述的设备,
其中所述定位单元适于处理所述受试者的荧光检查图像。
8.根据权利要求1所述的设备,还包括
-标记单元(55),其用于标记所述对象,其中所述标记单元适于当在所述多个面积中与预定标记区域相关联的面积中定位所述对象时产生要与所述对象相关联的预定指示。
9.一种用于在受试者(20)内定位感兴趣对象(15,220,225,230)的方法,包括如下步骤:
-将所述受试者的三维表示与二维图像(200)配准(120),所述三维表示包括与所述受试者的多个结构区域对应的多个片段,由此在所述二维图像中限定与所述多个片段对应的多个面积(205,210,215),使得所述多个面积中的至少一个面积与所述多个结构区域中的相应区域相关联,以及
-接收所述二维图像和指示所述多个面积的数据以通过处理所述二维图像从所述二维图像中提取所述对象的指示从而定位(125)所述对象,其中所述二维图像的处理限于所述多个面积中与预定对象区域相关联的对象面积。
10.根据权利要求9所述的方法,还包括如下步骤:
-采集所述受试者的所述三维表示,以及
-采集(115)所述二维图像。
11.根据权利要求10所述的方法,
其中在介入程序中执行所述二维图像的采集和所述对象的定位,并且
其中在介入前程序中执行所述受试者的所述三维表示的采集。
12.根据权利要求9所述的方法,
其中所述感兴趣对象为介入工具。
13.根据权利要求12所述的方法,其中,所述感兴趣对象是导管(220,225,230)或起搏器探头。
14.一种用于在受试者(20)内定位感兴趣对象(15,220,225,230)的装置,包括:
-用于将所述受试者的三维表示与二维图像配准(120)的模块,所述三维表示包括与所述受试者的多个结构区域对应的多个片段,由此在所述二维图像中限定与所述多个片段对应的多个面积(205,210,215),使得所述多个面积中的至少一个面积与所述多个结构区域中的相应区域相关联,以及
-用于接收所述二维图像和指示所述多个面积的数据以通过处理所述二维图像从所述二维图像中提取所述对象的指示从而定位(125)所述对象的模块,其中所述二维图像的处理限于所述多个面积中与预定对象区域相关联的对象面积。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP08305325 | 2008-06-25 | ||
| EP08305325.6 | 2008-06-25 | ||
| PCT/IB2009/052603 WO2009156918A1 (en) | 2008-06-25 | 2009-06-18 | Device and method for localizing an object of interest in a subject |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102077248A CN102077248A (zh) | 2011-05-25 |
| CN102077248B true CN102077248B (zh) | 2016-10-19 |
Family
ID=41211946
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN200980124246.7A Active CN102077248B (zh) | 2008-06-25 | 2009-06-18 | 用于在受试者内定位感兴趣对象的设备和方法 |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US8805003B2 (zh) |
| EP (1) | EP2289047B1 (zh) |
| JP (1) | JP5529860B2 (zh) |
| CN (1) | CN102077248B (zh) |
| AT (1) | ATE548712T1 (zh) |
| BR (1) | BRPI0910123A2 (zh) |
| RU (1) | RU2520369C2 (zh) |
| WO (1) | WO2009156918A1 (zh) |
Families Citing this family (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FR2960332B1 (fr) * | 2010-05-21 | 2013-07-05 | Gen Electric | Procede de traitement d'images radiologiques pour determiner une position 3d d'une aiguille. |
| GB201020077D0 (en) * | 2010-11-26 | 2011-01-12 | Siemens Medical Solutions | Correlating planar to tomograph data |
| JP5895624B2 (ja) * | 2012-03-14 | 2016-03-30 | オムロン株式会社 | 画像処理装置、画像処理方法、制御プログラムおよび記録媒体 |
| US20140037049A1 (en) * | 2012-07-31 | 2014-02-06 | General Electric Company | Systems and methods for interventional imaging |
| WO2014132209A1 (en) * | 2013-02-28 | 2014-09-04 | Koninklijke Philips N.V. | Segmentation of large objects from multiple three-dimensional views |
| CN110176031B (zh) * | 2013-08-09 | 2021-07-06 | 杭州堃博生物科技有限公司 | 一种评估已完成的胸部二维荧光透视影像与三维荧光投影影像之间配准的方法 |
| US10019800B2 (en) * | 2014-01-06 | 2018-07-10 | Koninklijke Philips N.V. | Deployment modelling |
| US10772684B2 (en) | 2014-02-11 | 2020-09-15 | Koninklijke Philips N.V. | Spatial visualization of internal mammary artery during minimally invasive bypass surgery |
| CN106132484B (zh) * | 2014-05-28 | 2019-09-06 | 核通业务有限公司 | 用于基于成像数据的近距离放射治疗计划的方法和系统 |
| WO2017017556A1 (en) | 2015-07-28 | 2017-02-02 | Koninklijke Philips N.V. | Workflow of needle tip identification for biopsy documentation |
| KR102531117B1 (ko) | 2015-10-07 | 2023-05-10 | 삼성메디슨 주식회사 | 대상체를 나타내는 영상을 디스플레이하는 방법 및 장치. |
| JP6945293B2 (ja) * | 2015-11-16 | 2021-10-06 | キヤノンメディカルシステムズ株式会社 | X線診断装置および医用画像診断システム |
| US11058386B2 (en) * | 2015-11-16 | 2021-07-13 | Canon Medical Systems Corporation | X-ray diagnosis apparatus and medical image diagnosis system for specifying a device being currently operated |
| CN108778419A (zh) * | 2016-03-16 | 2018-11-09 | 皇家飞利浦有限公司 | 近距离放射治疗系统和方法 |
| US10349986B2 (en) | 2017-04-20 | 2019-07-16 | Warsaw Orthopedic, Inc. | Spinal implant system and method |
| EP3424458B1 (en) * | 2017-07-07 | 2020-11-11 | Leica Instruments (Singapore) Pte. Ltd. | Apparatus and method for tracking a movable target |
| CN112639998A (zh) * | 2018-07-05 | 2021-04-09 | 加利福尼亚大学董事会 | 解剖结构与体表电极定位的计算模拟 |
| CN111078346B (zh) * | 2019-12-19 | 2022-08-02 | 北京市商汤科技开发有限公司 | 一种目标对象显示方法及装置、电子设备和存储介质 |
| DE102020212086A1 (de) * | 2020-09-25 | 2022-03-31 | Siemens Healthcare Gmbh | Ermitteln der Qualität einer Positionierung eines in einen Patientenkörper eingeführten Objekts |
| US11941814B2 (en) * | 2020-11-04 | 2024-03-26 | Globus Medical Inc. | Auto segmentation using 2-D images taken during 3-D imaging spin |
| FR3122936B1 (fr) * | 2021-05-17 | 2024-08-02 | Vygon | Procédé d’identification d’instruments médicaux |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1168625A (zh) * | 1994-08-19 | 1997-12-24 | 生物感觉有限公司 | 医用诊断、治疗及成象系统 |
| CN1503184A (zh) * | 2002-11-01 | 2004-06-09 | GEҽҩϵͳ����Ƽ���˾ | 用于医学介入程序规划的方法和装置 |
| CN1748646A (zh) * | 2004-08-12 | 2006-03-22 | 通用电气公司 | 医学介入过程计划、位置和导航的介入工具的方法和装置 |
| US20060079759A1 (en) * | 2004-10-13 | 2006-04-13 | Regis Vaillant | Method and apparatus for registering 3D models of anatomical regions of a heart and a tracking system with projection images of an interventional fluoroscopic system |
| CN1989903A (zh) * | 2005-09-22 | 2007-07-04 | 西门子公司 | 医学治疗装置及其运行方法 |
Family Cites Families (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6095976A (en) * | 1997-06-19 | 2000-08-01 | Medinol Ltd. | Method for enhancing an image derived from reflected ultrasound signals produced by an ultrasound transmitter and detector inserted in a bodily lumen |
| JP2000175897A (ja) * | 1998-12-17 | 2000-06-27 | Toshiba Corp | 手術支援用x線ct装置 |
| DE19919907C2 (de) * | 1999-04-30 | 2003-10-16 | Siemens Ag | Verfahren und Vorrichtung zur Katheter-Navigation in dreidimensionalen Gefäßbaum-Aufnahmen |
| DE10004764A1 (de) * | 2000-02-03 | 2001-08-09 | Philips Corp Intellectual Pty | Verfahren zur Positionsbestimmung eines medizinischen Instruments |
| US6389104B1 (en) * | 2000-06-30 | 2002-05-14 | Siemens Corporate Research, Inc. | Fluoroscopy based 3-D neural navigation based on 3-D angiography reconstruction data |
| DE10114099B4 (de) | 2001-03-22 | 2005-06-16 | Siemens Ag | Verfahren zum Detektieren der dreidimensionalen Position eines in einen Körperbereich eingeführten medizinischen Untersuchungsinstruments, insbesondere eines in ein Gefäß eingeführten Katheters |
| US7158692B2 (en) * | 2001-10-15 | 2007-01-02 | Insightful Corporation | System and method for mining quantitive information from medical images |
| US7286866B2 (en) * | 2001-11-05 | 2007-10-23 | Ge Medical Systems Global Technology Company, Llc | Method, system and computer product for cardiac interventional procedure planning |
| JP3516942B2 (ja) * | 2001-11-26 | 2004-04-05 | ザイオソフト株式会社 | 3次元画像処理方法、装置およびプログラム |
| DE10210647A1 (de) * | 2002-03-11 | 2003-10-02 | Siemens Ag | Verfahren zur Bilddarstellung eines in einen Untersuchungsbereich eines Patienten eingebrachten medizinischen Instruments |
| US7450743B2 (en) * | 2004-01-21 | 2008-11-11 | Siemens Medical Solutions Usa, Inc. | Method and system of affine registration of inter-operative two dimensional images and pre-operative three dimensional images |
| DE102004025685A1 (de) * | 2004-05-26 | 2005-12-22 | Siemens Ag | Verfahren zur Bilderzeugung mit einer bildgebenden Modalität |
| DE102004035980A1 (de) * | 2004-07-23 | 2006-03-16 | Siemens Ag | Verfahren zur Bildgebung bei einem interventionellen Eingriff |
| US7725165B2 (en) * | 2004-12-07 | 2010-05-25 | M2S, Inc. | Method and apparatus for visualizing anatomical structures |
| US7907756B2 (en) * | 2005-01-31 | 2011-03-15 | Siemens Medical Solutions Usa, Inc. | System and method for validating an image segmentation algorithm |
| US20070100223A1 (en) * | 2005-10-14 | 2007-05-03 | Rui Liao | Method and system for cardiac imaging and catheter guidance for radio frequency (RF) ablation |
| US20070167700A1 (en) * | 2005-12-21 | 2007-07-19 | Norbert Rahn | Method for accurate in vivo delivery of a therapeutic agent to a target area of an organ |
| US7412023B2 (en) * | 2006-02-28 | 2008-08-12 | Toshiba Medical Systems Corporation | X-ray diagnostic apparatus |
| DE102006013476B4 (de) * | 2006-03-23 | 2012-11-15 | Siemens Ag | Verfahren zur positionsgenauen Darstellung von interessierenden Gewebebereichen |
| ATE466352T1 (de) * | 2006-06-28 | 2010-05-15 | Koninkl Philips Electronics Nv | Modellbasierte bestimmung des kontraktionsstatus eines periodisch kontrahierten objekts |
| US20080037843A1 (en) * | 2006-08-11 | 2008-02-14 | Accuray Incorporated | Image segmentation for DRR generation and image registration |
| US20080147086A1 (en) * | 2006-10-05 | 2008-06-19 | Marcus Pfister | Integrating 3D images into interventional procedures |
| US7831096B2 (en) * | 2006-11-17 | 2010-11-09 | General Electric Company | Medical navigation system with tool and/or implant integration into fluoroscopic image projections and method of use |
| US20080119725A1 (en) * | 2006-11-20 | 2008-05-22 | General Electric Company | Systems and Methods for Visual Verification of CT Registration and Feedback |
| US8098914B2 (en) * | 2007-03-05 | 2012-01-17 | Siemens Aktiengesellschaft | Registration of CT volumes with fluoroscopic images |
| EP2129284A4 (en) * | 2007-03-08 | 2012-11-28 | Sync Rx Ltd | IMAGING AND TOOLS FOR USE WITH MOBILE ORGANS |
| FR2914176B1 (fr) * | 2007-03-27 | 2009-05-22 | Gen Electric | Procede de detection et de compensation du mouvement respiratoire dans des images cardiaques fluoroscopiques synchronisees a un signal electrocardiogramme. |
| EP2193499B1 (en) * | 2007-10-01 | 2016-07-20 | Koninklijke Philips N.V. | Detection and tracking of interventional tools |
| US8532352B2 (en) * | 2010-10-06 | 2013-09-10 | Siemens Aktiengesellschaft | Method and system for intraoperative guidance using physiological image fusion |
-
2009
- 2009-06-18 BR BRPI0910123A patent/BRPI0910123A2/pt not_active IP Right Cessation
- 2009-06-18 EP EP09769727A patent/EP2289047B1/en active Active
- 2009-06-18 US US12/999,393 patent/US8805003B2/en active Active
- 2009-06-18 RU RU2011102542/08A patent/RU2520369C2/ru not_active IP Right Cessation
- 2009-06-18 JP JP2011515686A patent/JP5529860B2/ja not_active Expired - Fee Related
- 2009-06-18 WO PCT/IB2009/052603 patent/WO2009156918A1/en not_active Ceased
- 2009-06-18 AT AT09769727T patent/ATE548712T1/de active
- 2009-06-18 CN CN200980124246.7A patent/CN102077248B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1168625A (zh) * | 1994-08-19 | 1997-12-24 | 生物感觉有限公司 | 医用诊断、治疗及成象系统 |
| CN1503184A (zh) * | 2002-11-01 | 2004-06-09 | GEҽҩϵͳ����Ƽ���˾ | 用于医学介入程序规划的方法和装置 |
| CN1748646A (zh) * | 2004-08-12 | 2006-03-22 | 通用电气公司 | 医学介入过程计划、位置和导航的介入工具的方法和装置 |
| US20060079759A1 (en) * | 2004-10-13 | 2006-04-13 | Regis Vaillant | Method and apparatus for registering 3D models of anatomical regions of a heart and a tracking system with projection images of an interventional fluoroscopic system |
| CN1989903A (zh) * | 2005-09-22 | 2007-07-04 | 西门子公司 | 医学治疗装置及其运行方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP2289047A1 (en) | 2011-03-02 |
| US8805003B2 (en) | 2014-08-12 |
| EP2289047B1 (en) | 2012-03-07 |
| BRPI0910123A2 (pt) | 2017-12-19 |
| ATE548712T1 (de) | 2012-03-15 |
| RU2011102542A (ru) | 2012-07-27 |
| JP5529860B2 (ja) | 2014-06-25 |
| CN102077248A (zh) | 2011-05-25 |
| JP2011525831A (ja) | 2011-09-29 |
| US20110085706A1 (en) | 2011-04-14 |
| WO2009156918A1 (en) | 2009-12-30 |
| RU2520369C2 (ru) | 2014-06-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102077248B (zh) | 用于在受试者内定位感兴趣对象的设备和方法 | |
| US11798178B2 (en) | Fluoroscopic pose estimation | |
| US12114933B2 (en) | System and method for interventional procedure using medical images | |
| US8050739B2 (en) | System and method for visualizing heart morphology during electrophysiology mapping and treatment | |
| CN100518648C (zh) | 计划和治疗双心室起搏的心脏ct系统 | |
| US8452062B2 (en) | Respiration determination apparatus for determining respiration based on bronchial tree image data | |
| US20030181809A1 (en) | 3D imaging for catheter interventions by use of 2D/3D image fusion | |
| EP3750134A1 (en) | System and method for pose estimation of an imaging device and for determining the location of a medical device with respect to a target | |
| Sra et al. | Registration of 3D computed tomographic images with interventional systems: implications for catheter ablation of atrial fibrillation | |
| WO2012117366A1 (en) | Visualization for navigation guidance | |
| EP2681711A1 (en) | Visualization for navigation guidance | |
| CN105992556A (zh) | 具有观察角优化功能的医学观察系统 | |
| Sra et al. | Cardiac image registration of the left atrium and pulmonary veins | |
| US9036880B2 (en) | High-resolution three-dimensional medical imaging with dynamic real-time information | |
| WO2023126216A1 (en) | Endobronchial probe tracking | |
| EP4272655B1 (en) | Image processing device, method, and program | |
| EP4205690A1 (en) | Endobronchial probe tracking | |
| JP2025145531A (ja) | 支援装置、支援方法、及び支援プログラム | |
| Fahmy et al. | Integration of Nonelectrophysiological Imaging Technologies into the Mapping of Atrial Fibrillation |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |