-
在偏振成像探测中,由于受到偏振成像设备性能或探测目标距离的限制,偏振图像的空间分辨率一般较低[1],影响了目标的探测和识别精度.在偏振图像中,由于在同一幅图像中相邻或者非相邻位置,甚至在其他偏振方向图像中某一位置的图像块,存在非局部自相似特征,而传统的方法没有利用这种特征,重建效果不是很理想.本文利用不同偏振方向图像中的这种冗余和互补信息,提出了一种基于稀疏表示的偏振图像超分辨率重建方法.
在基于稀疏表示的超分辨率重建方法中,使用通用的超完备字典D进行字典学习,可以对所有图像块进行稀疏编码.但是,超完备的冗余字典中含有许多不相干元素,降低了计算效率和稀疏编码精度.为此,利用一个具有相似结构的样本集学习出紧的子字典对给定图像块进行编码.首先,选取一组较高质量的偏振图像,并将它们分成许多图像块; 其次,使用高通滤波器输出各图像块的高频特征数据,并利用K均值方法处理高频特征数据,形成聚类子集; 然后,利用主成分分析方法对每一个子类进行主成分计算,并以此构建子字典.当对图像块进行编码时,利用自适应回归稀疏表示的选取策略获得最优的子字典.在稀疏编码阶段,为了提高稀疏编码的稳定性和精度,使用集中稀疏编码方法对图像块逐一进行稀疏编码,最后,以稀疏表示系数与高分辨率字典的线性组合得到重建的高分辨率偏振图像.
全文HTML
-
对于一个给定的很小的偏振图像块(3×3~7×7),不仅存在不同偏振方向相同位置上的相似图像块,甚至有可能存在分布在不同偏振方向图像中具有相似结构的图像块.像这样分布在不同偏振方向图像中的图像块,将它称作图像的非局部自相似先验信息[2].显然,对于给定的图像块xi,可以通过对其非局部相似块xij的加权平均来近似,
$x_{i} \approx \sum_{j} \gamma_{i}^{j} x_{i}^{j}$ ,其中γij是分配给xij的加权系数,则xi的稀疏表示系数αi可以由xij的稀疏表示系数αij来表示加权近似:显然,‖αi-γijαij‖lp应该取最小值,这将作为非局部相似正则化约束项,用于稀疏编码过程.
基于稀疏表示的图像超分辨率重建问题可以描述为:
其中X={x1,x2,…,xN},D是预先学习的超完备字典,可以对所有可能的图像结构进行稀疏编码,λ是用于平衡编码精度和表示系数的稀疏性,结合式(1)和式(2),可得到如下非局部稀疏编码模型:
其中ηi是一个分配给非局部正则化的权重.
-
在公式(3)的稀疏编码模型中,假设通用的冗余超完备字典已经得到.然而,超完备字典的冗余性决定了其中有许多不相关的原子,这不仅降低了稀疏编码的计算效能而且影响了重建的准确度.因此,使用一个具有相似结构的局部紧凑子字典Dk对图像块进行编码.首先,采集一组较高质量的偏振图像并对其进行分割处理,获得训练所需的样本图像块集合S={s1,s2,…,sM}.利用高通滤波器处理每一个图像块,获得S的特征数据库,表示为Sh={s1h,s2h,…sMh}.然后,利用K均值聚类方法将Sh划分成K个子类{S1,S2,…Sk},并用μk表示第Sk子类的质心.为了从Sh子类中学习局部紧凑子字典,通过主成分分析方法计算每一子类的主成分.
对数据集合Sk的协方差矩阵Ωk进行主成分分解,可以获得一个正交变换矩阵Pk.为了平衡式(2)中λ,取前r个最重要的特征向量构建子字典Dk,而r的最优值ro则由下式得到:
其中Dr=[P1,P2,…, Pr],因此数据集合Sk的紧的子字典是Dk=[P1,P2,…,Prο].
为了对图像中图像块xi进行编码,可以通过自适应的稀疏域选择策略选择合适的子字典.基于xih和μk之间距离的最小值决定xi的子字典,xih为xi的高通滤波部分,μk为各类的质心,则xi的子字典ki由下式决定:
1.1. 非局部相似稀疏模型
1.2. 子字典学习和适应性选择
-
待重建的图像
$\widehat{x}$ 可以通过$\hat{x}=\boldsymbol{D}_{k} \hat{\alpha}$ 获得.由于$\widehat{\alpha }$ 是通过观察图像编码得到,与原始图像的稀疏编码系数有紧密的关系,因此重建图像最接近原始图像.事实上,式(3)中非局部相似正则项$\sum_{i=1}^{N}{\|}{{\eta }_{i}}\left({{\alpha }_{i}}- \right.\left. \alpha _{i}^{*} \right){{\|}_{lp}}$ 是一个集中稀疏约束条件,可以有效地减少稀疏编码误差,从而得到更好的重建结果.令θi=αi-αi*,实验表明,θi可以由独立同分布的Laplacian分布很好地表示,而集中稀疏约束条件可以由l1范数(lp=1)来描述,因此式(3)中的非局部稀疏编码模型可以被描述为:其中λi和ηi分别是对角元素为λi,j和ηi,j的对角加权矩阵.在实现过程中,对于图像块系数αi和αi*的每一个元素αi,j和αi,j*,它们的权重λi,j和ηi,j在各自循环中随αi,j和αi,j*更新而更新:
其中c1和c2是正常数,αi,j(l)是αi,j第l次迭代后的估计值,ε是一个用来增加式(7)的稳定性的系数.在初始化时,一旦求得编码系数αi,就能通过公式(1)计算得到αi*,再更新得到
$\widehat{\alpha }$ ,满足收敛条件后,迭代结束.式(6)可以通过迭代收缩算法求解.
-
为了验证本文方法的有效性,选取伪装网偏振图像进行实验.从一些较高质量的偏振图像和一些纹理性强的图像中(如标准测试图像Lena,Leaves,Starfish等),分割提取5×5大小的图像块用于训练子字典.实验过程中,先将原始的高分辨率图像通过2倍下采样、加适当噪声和模糊,生成模拟的低分辨率图像,再采用本文方法和经典双二次法(Bicubic)、基于稀疏的ScSR方法[3]与CSR方法[4]对低分辨率图像进行2倍率超分辨率重建并比较,结果如图 1所示.限于篇幅,图 1中只给出了60°偏振方向的局部重建效果图.
从图 1中可以看出,ScSR方法在重建图像结构上优于双二次法[5],并且能很好减少振铃和锯齿效应[6-8],但较模糊,丢失了一些细节信息,如伪装网下面的杂草几乎被模糊掉. CSR方法和本文提出的方法重建图像边缘更清晰,但本文方法得到的重建图像边缘结构更接近于原始图像.为进一步评价重建结果的质量,通过计算其峰值信噪比(PSNR)和结构相似度(SSIM)值等指标[9-10]进行客观评价,结果如表 1所示.
由表 1中数据可知,本文方法提高了偏振图像的PSNR和SSIM值,这与图 1中的主观视觉效果相符合,从客观上验证了本文方法的有效性.
-
基于偏振方向图像稀疏表示域中的非局部自相似特性,本文提出了一种偏振图像超分辨率重建方法,利用同一场景中不同偏振方向低分辨率图像的冗余和互补信息,重建得到一幅高分辨率图像.通过实验从主观视觉效果和客观评价指标上验证了本文方法的有效性.