基于多尺度变换的多源图像融合技术研究

基于多尺度变换的多源图像融合技术研究

多源图像融合是指综合两个或者多个源图像信息,获得对同一场景更为准确、更为全面和更为可靠描述的图像。目前,由于多尺度变换具有良好的时频域局部特性,因此它被广泛的应用于图像融合领域,当源图像采用多尺度变换进行分解后,所得到的分解系数会处于不同的尺度上,因此可以更有针对性的选择融合准则,实现系数最优化的融合,从而最终改善融合图像的质量。

在基于多尺度变换的图像融合算法中,比较成熟和应用较为广泛的当属基于拉普拉斯金字塔的图像融合算法和基于小波变换的图像融合算法。但这两种方法都有其局限性,在基于拉普拉金字塔的图像融合算法中,源图像经拉普拉斯金字

塔分解后不仅会产生大量的冗余信息,致使融合过程中数据量增大,而且分解后

产生的信息不具备方向性,在基于小波变换的图像融合算法中,虽然小波分解后

不会造成数据量增大,且有一定的方向性,从而在一定程度上弥补了拉普拉斯金

字塔分解的不足,但小波分解只能对低频信号进行,不能对高频信号进行,同时分解后如何选择一个具有优良特性的融合准则也是一个问题,最重要的是,由于小

波基不具备各向异性,因此往往不能实现对图像最为稀疏的表达,这些都会对最

终的融合图像质量产生不利影响。

因此,针对这些问题,本论文开展了以下几方面工作:(1)针对小波变换只能

对低频信号进行分解,不能对高频信号进行分解这一局限性,选用既能对低频信

号进行分解,又能对高频信号进行分解的小波包变换来对源图像进行分解和重构,并对融合准则进行了改进以实现红外图像与可见光图像融合。(2)针对融合准则的问题,特别介绍了脉冲耦合神经网络(Pulse Coupled Neural Network, PCNN),并将PCNN进行了有效的改进使之作为融合准则使用;同时为了解决小波变换过

程中存在大量的卷积运算,会造成运算复杂,计算量增大,储存空间需求增多等问题,改用提升格式小波变换来对图像进行多尺度变换;最后将提升格式小波变换与改进后的PCNN结合起来应用于医学图像融合。

(3)针对小波基不具备各向异性,不能够对图像实现稀疏的表达这一局限性,选用了具有多尺度、多方向性的非下采样Contourlet变换来对源图像进行分解和重构,并将其与形态学处理结合起来应用于多聚焦图像融合。本论文所采用的一系列图像融合算法都是以多尺度变换为基础的,实验结果表明,它们都能取得比较好的融合效果。