空間域融合技術(shù)直接對(duì)輸入圖像的像素值進(jìn)行處理,以達(dá)到所需的融合結(jié)果。空間域融合技術(shù)包括基于灰度加權(quán)的圖像融合、基于PCA的圖像融合和基于IHS的圖像融合。變換域融合技術(shù)包括基于多尺度變換圖像融合和基于稀疏表示的圖像融合方法。

除空間域和變換域兩種融合方式以外，還有許多基于深度學(xué)習(xí)的融合方法[3]。在過(guò)去的幾年里，出現(xiàn)了許多基于深度學(xué)習(xí)的圖像融合方法。深度學(xué)習(xí)可以幫助解決圖像融合中的幾個(gè)重要問(wèn)題。例如，與手工制作的方法相比，深度學(xué)習(xí)可以提供更好的功能。此外，深度學(xué)習(xí)可以在圖像融合中學(xué)習(xí)自適應(yīng)權(quán)重，這在許多融合規(guī)則中都是至關(guān)重要的。在方法上，卷積神經(jīng)網(wǎng)絡(luò)(CNN)，生成對(duì)抗網(wǎng)絡(luò)(GAN)， Siamese網(wǎng)絡(luò)，自編碼器已經(jīng)被應(yīng)用于圖像融合工作中?？梢灶A(yù)見(jiàn)，圖像融合技術(shù)將朝著機(jī)器學(xué)習(xí)的方向發(fā)展，未來(lái)幾年將出現(xiàn)越來(lái)越多的研究成果。劉羽于2017年第一次將CNN引入圖像融合領(lǐng)域,采用孿生網(wǎng)絡(luò)對(duì)多聚焦圖像進(jìn)行融合。受聚焦與離焦分類思想的影響,通過(guò)孿生網(wǎng)絡(luò)對(duì)圖像像素點(diǎn)進(jìn)行分類,其網(wǎng)絡(luò)模型如圖所示。

?