医学图像融合技术思考.docx

1、医学图像融合技术思考医学图像融合技术思考1医学图像融合的方式一个完整的医学图像融合系统应该是各种医学成像设备、处理设备与融合软件的总和。下面是几种常用的分类方法。按照成像设备的组成,可将系统分为同类多源融合系统与异类多源融合系统。同类多源图像融合系统如:SPECT图像融合系统,MRI图像融合系统等等;异类多源融合系统如:SPECT与MRI图像融合系统,SPECT与CT图像融合系统,CT与MRI图像融合系统等等。按照融合对象分,有单样本时间融合系统、单样本空间融合系统以及模板融合系统。单样本时间融合:跟踪某个病人,将其一段时间内对同一脏器所做的同种检查图像进行融合,以助于跟踪病理发展和研究该检查

2、对该疾病诊断的特异性。单样本空间融合:将某个病人在同一时期内对同一脏器所做的几种检查的图像进行融合,以便综合利用这几种检查提供的信息,对病情做出更准确的诊断。模板融合:从许多健康人的研究中建立一系列模板,将病人的图像与模板图像融合,有助于研究某种疾病的病理和诊断标准。按照处理方法,则有数值融合法和智能融合法。数值融合法:将来源于不同成像设备的图像做空间归一化处理,获得一致性描述后,直接应用。智能融合法:将来源于不同成像设备的图像做空间归一化处理,根据研究的需要,选择不同图像中的所需信息进行融合。如:提取MRI的颅骨轮廓作为先验知识用于SPECT脑的重建。2医学图像融合需要解决的问题由于不同医学

3、成像设备的成像机理不同,其图像质量、空间与时间特性有很大的差别。因此,要实现医学图像的融合,图像数据转换、图像数据相关、图像数据库和数据理解都是要解决的关键技术。图像数据转换包括不同图像的格式转换、三维方向调整、尺度变换等,其目的在于确保多源图像的像/体素表达同样大小的实际空间区域,确保多源图像对脏器在空间描述上的一致性。图像数据相关主要是完成相关图像的对位。理想情况下,图像融合应能够实现所研究图像精确的点到点对应,然而在实际应用中,图像分辨率越高,图像细节越多,实现点到点的一一对应也就越困难;并且,事实上由于各种客观或人为因素,用医学图像获得100%真实的脏器信息是不可能的,医学图像设备总是

4、在不断地完善以求所得图像能更接近脏器的真实情况。图像配准技术的实现是医学图像融合的难点。图像数据库完成典型病例和典型图像数据的建档、管理和信息提取,它是图像融合的数据支持。数据理解是医学图像融合的最终目的。图像融合的潜力在于综合处理应用各种成像设备所得信息以获得新的有助于临床诊断的信息。由于图像融合技术目前还是一个全新的研究领域,因此,如何理解和利用这些新的综合信息,还需要不断的实验和证明。3医学图像融合面临的难点图像配准及其研究现状图像配准是公认难度较大的图像处理技术,也是制约着医学图像融合技术的发展和医学图像融合软件实用化的技术难关。近年来,发展了许多图像配准方法57,分类介绍如下。外部定

5、位装置法方法是:在病人颅骨嵌入螺钉,或在皮肤上做记号,或放置其他在2幅图像都可检测到的附加标记物,例如充有硫酸铜的管子、玻璃珠、铬合金珠、明胶球等。这方面的例子有:Shukla等8将3个小模型分置于双侧外耳道和眉间作为定位标志,融合脑SPECT与MRI;SPECT采集时模型内放入Co,MRI采集时放入CuSO4,取同样的切面厚度重建横切面图像,以出现3个标志点的切面作为参考平面定位2种成像方式的对应层面。Malison等9将一尼龙胶带固定在患者头部,胶带上固定数个中空的小球,在进行不同方式采集时,球内注入不同的显像剂或增强剂,利用计算机程序计算脑ECT和MRI各层面上标记点的位置信息,确定出配

6、对层面。原则上外部定位法可用于配准任何模式的图像,而且配准精度很高,在CT/MRI中,定位精度大约在12mm10以内,并且外部标志在医学图像中比较容易识别,通过比较图像中标志的位置对配准结果也易于视觉检测,因此,这种方法配准效果比较理想;缺点是在使用这些标志时,受试者都要在扫描装置内严格保持不动,有些还是介入性的,对病人带来一定的痛苦。曲线法Batler11对二维投影放射照片首先用人工的方法在2幅图像中寻找对应的开曲线,再在2条曲线局部曲率最佳拟合的线段用相同的采样率找出一组对应点来,然后用对应点来匹配2幅图像。Gueziec和Ayache12配准CT体积图像系列时,用图像强度的导数自动提取脊

7、线。然后,用连续的样条近似这些离散的曲线并计算曲率和扭矩。曲线的对应关系是用几何散列表检索和表决技术确定的。对应曲线及图像间的配准是通过刚体变换实现的。表面法基于表面的配准技术典型的例子是Pelizzari和Chen研究的“头帽法”。从一幅图像轮廓提取的点集称作帽子,从另一幅图像轮廓提取的表面模型叫作头。一般用体积较大的病人图像,或在图像体积大小差不多时用分辨较高的图像来产生头表面模型。Powell探索算法被用来寻求所需的几何变换,即使帽点和头表面间的距离平均平方值最小。许多学者对该算法作了重要改进,例如用多分辨金字塔技术克服局部极值问题;用距离变换拟合两幅图像的边缘点,斜面匹配技术可有效地计

8、算距离变换。矩和主轴法借用经典力学中物体质量分布的概念,计算2幅图像像素点的质心和主轴,再通过平移和旋转使2幅图像的质心和主轴对齐,从而达到配准的目的14。这方面的例子有东南大学的汪家旺、舒华忠、罗立民等用基于Legendre矩的方法融合CT和MR医学图像15。该方法对数据的缺失较敏感,即要求整个物体必须完整的出现在2幅图像中,此外,该方法还对神经医生感兴趣的某些病案效果不佳。例如,PET图像中大的周边低代谢肿瘤可能引起较大的MRPET配准误差。学者们更多地是使用主轴变换法作粗配准,使2幅图像初步对齐,可以减少后续主要配准方法的搜索步骤。相关法对于同一物体由于图像获取条件的差异或物体自身发生的

9、小的改变而产生的图像序列,采用使图像间相似性最大化的原理实现图像间的配准,即通过优化2幅图像间相似性准则来估计变换参数,主要是刚体的平移和旋转。对照相序列,考虑到棱镜系统的使用,还要作必要的尺度变换。还须对曝光时间不同引起的强度差异作修正。对核医学图像也要作强度换算来修正因获取时间、注入活性及背景等因素产生的影响。所使用的相似性测度可以是多种多样的,例如相关函数、相关系数、差值的平方和或差的绝对值和等。由于要对每种变换参数可能的取值都要计算一次相似性测度,相关法的计算量十分庞大,一些学者在这方面做出了努力。例如,用相位相关傅里叶法估算平移和旋转参数;用遗传算法和模拟退火技术减少搜索时间和克服局

10、部极值问题,及用傅里叶不变性和对数变换分解变量的互相关技术。值得注意的是相关法主要限于单模图像配准,通过改进算法,也可用于多模图像配准。最大互信息配准法互信息是信息论的一个基本概念,是2个随机变量统计相关性的测度。Woods16使用给出参考像后测试图像的条件熵作为配准的测度。他研究的AIR是一种广泛应用于PET到MR图像配准的算法,但缺点是依赖对MR图像的预处理,这通常涉及很费功夫的剔除非脑组织的手工编辑工作。Collignon17、Viola和Wells18、Studholme19等人用互信息作为多模医学图像的配准的测度。如果两幅图像几何上对齐的话,它们对应体素对的强度值的互信息最大。由于该

11、方法不需要对2种成像模式中图像强度间关系的性质作任何假设,也不需要对图像作分割或任何预处理,所以被广泛地用于CT/MR、PET/MR等多种配准工作。最大互信息法几乎可以用在任何不同模式图像的配准,特别是当其中一个图像的数据部分缺损时也能得到很好的配准效果。图谱法图谱方法作为图像匹配的一个重要应用,特别是对研究工作而言,对来自不同个体的图像进行匹配是有重要意义的。而通过医学图像和医学图谱之间的匹配,可以把来自医学图谱的语法的和/或语义的信息映射到不同病人个体的图像上去。图谱匹配方法的一个直接的应用就是实现医学图像的自动识别和正确地分割。值得注意的是,医学图像匹配是一项正在快速发展中的技术。到目前

12、为止,已经提出了许多种医学图像匹配的算法,但应用于临床的报道还不多,大部分文献中的算法都只是对少数的几个或几十个病人的研究结果。为了解决图像配准,理论上可以构造一种成像设备以同时获得多种模态的图像,但这存在很大的技术困难。另外较实际的办法是对不同的成像设备,要求对病人进行严格准确的定位,这可以通过记录定位位置、机械定位装置、激光定位装置或其它一些定位方法实现6。图像信息融合图像融合就是要将同一对象的2个或更多的图像合成到一幅图像中,以便它比任何原来的一幅都更容易为人们所理解。因此,图像配准以后,还要进行图像的融合。在进行医学图像信息融合之前,一般要根据医学专家的意见,对已配准的图像进行预处理,

13、分别从2幅图像中提取所需信息而融合得到一幅新图像。融合目的和成像设备不同,融合方式都不太一样。比如文献15在CT图像中显示MR病灶,其方法是:根据MR图像中病变区域的灰度范围与正常组织的灰度范围的不一致,首先采用灰度阈值分割技术进行阈值处理;再对经过阈值处理后的图像进行中值滤波,以消除边缘附近的噪音;再用边缘追踪技术提取出病变的边缘,将病变部分识别出来,然后在CT图像上融合显示。也有应用小波变换的方法,直接实现图像信息融合,即是先将2幅图像进行小波正变换,2副图像都在变换域中通过取各自坐标中幅度最大的系数进行组合,然后再对所得系数使用逆变换重建出融合的图像,使的结果图像同时融合了2幅图像的清晰20部分。例如,把MRI图像的构造信息与PET扫描的功能信息结合在一起产生一个更方便的结果21。下面简单介绍一下小波变换的方法。4结束语医学图像融合技术是90年代中期发展起来的一项高新技术,也是当前国内外研究的热点之一。本文详细的介绍了医学图像融合的意义、方式,特别重点介绍了医学图像融合的难点:图像配准和图像信息融合的方法及其研究现状,使得从整体上对医学图像融合技术有一个比较清楚的理解。医学图像融合技术思考