APP下载

非均匀纹理复杂表面缺陷多光谱图像显著性融合

2020-01-14陈海永杨佳博

北京工业大学学报 2020年1期
关键词:滤波器光谱显著性

陈海永, 杨佳博, 陈 鹏, 刘 坤

(河北工业大学人工智能与数据科学学院, 天津 300130)

人工物理检测法的检测效率低而且容易造成二次损伤. Chen等[3]基于噪声方式进行检测,该方法利用晶硅太阳能电池片的低频噪声与可靠性相关的性质,通过对比缺陷太阳能电池片的噪声和其非缺陷噪声的差异来判断是否有缺陷;Duenas等[4]和Istratov等[5]利用电路相关理论,通过分析硅片中的多数载流子和少数载流子的数量造成外部电压的不同来判断太阳能电池片缺陷的存在性. 与上述检测方法相比,基于机器视觉的太阳能电池片表面缺陷检测,具有稳定、实时、精确且无二次损伤的优点,已经成为发展的主要方向. Anwar等[6]提出了基于缺陷梯度特征的检测方法,但容易受到复杂背景的干扰,精度不高. Agroui等[7]利用聚类的方法,将缺陷部分和非缺陷部分区分,通过设定阈值得到缺陷部分的二值图,但运算速度慢,实时性较差. Li等[8]提出了基于频域分析的缺陷检测,但其检测精度略低,容易造成误检.

为了消除太阳能电池片复杂背景对缺陷识别与检测的干扰,本文运用Yin等[9]在2006年提出的结构纹理分解方法作为预处理手段,通过对太阳能电池片结构与纹理的分离,去除复杂背景对融合效果的影响. 在单一条件下,无法兼顾把所有表面缺陷都很好地呈现出来,导致后续检测漏检率比较高,适用性比较局限. 应用图像融合技术来弥补去除背景带来的细节问题以及互补不同采集条件下采集到的不同图像的信息,可以提高图像整体的质量,更准确地表达电池片本身所包含的信息. 因此,本文采取多光谱的方式进行数据采集,最大程度上降低检测难度,减少了复杂表面对特征信息提取的干扰. Gilles[10]在2013年提出经验小波变换(empirical wavelet transform,EWT),其生成的经验滤波器含有经验信息,并且符合图像内在模式. 本文利用该小波变换对多光谱图像滤波后产生的细节层进行显著性计算,得到显著性图,并根据显著性图得到缺陷区域的权重,然后对权重较大区域进行基于对数变换的对比度增强,最后通过逆经验小波变换得到最后融合的图像. 实验结果表明,该算法可以有效提取电池片缺陷信息,同时抑制复杂背景带来的噪声.

1 多光谱图像采集

1.1 多光谱成像

多光谱成像常用于遥感影像,是由不同波长可见光拍摄所形成的图像,其像素值可以描述物体的光谱反射率,具有照明无关性. 利用这个特性,可以在一定程度上减少电池片复杂背景对缺陷检测的影响. 图1所示为本文算法流程图. 图2所示为白光条件下采集到的缺陷电池片图像,背景干扰较大. 图3所示为采集到的5种不同波长的多光谱灰度图像,虽然减少了背景噪声,但是同时丢失了大量信息;因此,需要通过图像融合方法进行重构.

1.2 多光谱图像预处理

太阳能电池片的复杂背景会影响表面缺陷的可靠检测,因此,为了消除影响,本文采用Yin等[9]提出的一种结构纹理分解方法,将图像结构纹理看作分段光滑且具有锐利边缘轮廓的结构图像u,以及仅包含精细尺度细节且具有一些振荡性质的纹理图像v的总和,即f=u+v,公式为

(1)

采用真空预压法加固软土地基,施工过程如下:(1)在基础上设置砂井或塑料排水板,在地面上铺设一层砂垫层:(2)在砂垫上放置密封膜,使其与空气隔离;(3)利用砂垫中的吸力管将密封膜中存在的空气抽出,形成真空砂垫,同时在密封膜的内外逐渐形成压差。将其作用地基荷载,可增加地基的有效应力,进而起到加固作用。进行空气抽提作业前,土壤有效应力为其质量应力,而空气连续还原后,土壤有效应力呈上升趋势,形成地基固结。在泵送作业结束时,完成基础的固结反应。对软基进行处理后,采用真空预压法能够大幅度提高地基承载力,可取得良好的经济效益和社会效益。

(2)

式中:Ω是f的作用域;λ越大,逼近项越小,也就是说u的平滑程度越小,越接近f. Aujol等[12]提到u和v的相关性最小值可以用来估计λ,通常λ为0.2~2.0,本文中λ取为0.4. 处理结果如图4、5所示.

2 多光谱图像融合

2.1 经验小波变换

EWT[10]是一种自适应的方法,它会根据信号本身的特征生成一组滤波器,用生成的滤波器对多光谱图像进行滤波,得到细节层和近似层子图像,滤波过程如下.

1) 构造行滤波器

(3)

式中Nrow为图像的行数.

② 使用边缘探测法[13],根据指定的N值来确定滤波器数量,再取输入信号傅里叶频谱的前N个相邻2个最大值的中值来确定分割频谱的N-1个边缘ωn(1≤n≤N-1),同时假定ω0=0,ωN=π.

③ 根据

(4)

(5)

3) 对图像按行使用行滤波器组中的滤波器进行滤波,得到NR+1个中间结果,再对每个中间结果使用列滤波器进行滤波,得到最终的(NR+1)×(NC+1)个子带图.

(6)

式中β可以是任意Ck([0,1])函数[14],这里取β=x4(35-84x+70x2-20x3).

为了达到简单的目的,可以假设τn=λωn(0<λ<1)[13],这样只需要一个参数λ,而不用为尺度函数和每个小波函数指定τn.

2.2 显著性权重计算

本文利用图像特征显著性算法,计算出经验小波变换生成的细节层子图像的显著性图,进而根据显著性图得到权重较大的缺陷区域. 图像特征是Hou等[15]在2012年提出的一种简单的图像描述符. 在稀疏信号混合的理论框架内,这个描述符在空间上近似于图像的前景,这种近似前景与视觉上明显的图像位置重叠. 由图像特征所引起的像距离更接近于人类的感知距离[15]. 可以将灰度图像看作

x=f+b,x,f,b∈RN

(7)

式中:f代表前景或者图像信号,并且假设在标准空间基础上得到稀疏支持;b代表背景,并且假设在离散余弦变换基础上得到稀疏支持. 通常图像特征的定义为

ImageSignature(x)=sign(DCT(x))

(8)

式中sign(·)表示特征算子.

假设图像的前景相对于它的背景来说是显而易见的,那么可以根据

(9)

定义一个显著性图. 式中:g代表高斯核;∘为阿达玛积运算符.

如图6所示,图中亮度较高部分即是权重较大的缺陷区域,根据显著性图信息,即可进行基于对数变换的对比度增强. 通过热度图可以表示子图像缺陷强弱程度,颜色越深,表示缺陷特征越明显;颜色越浅,表示缺陷特征越不明显,需要进行对比度增强,如图7所示.

2.3 融合规则

本文使用经验小波变换将源图像分解成近似层子图像与细节层子图像. 近似层包含能量较高,代表了原图像的整体信息,细节层包含能量较低,代表了原图像的细节信息. 通过显著性图得到细节层子图像权重较大的部分,并使用对数变换方法提高该部分的对比度,再将处理后各细节层子图像通过均值规则进行融合,得到融合后的细节层子图像. 对于近似层子图像,只采取均值规则进行融合,得到融合后的近似层子图像. 最后,通过逆经验小波变换,将融合后的近似层和细节层整合,得到最终的融合图像. 对显著性区域进行基于对数变换的对比度增强效果如图8所示,划痕和指纹缺陷区域均有明显的增强. 融合后的近似层和细节层如图9所示.

3 实验结果与分析

本文算法实现的环境为MATLAB 2016a. 所采用的PC配置为Intel Core i5-3230M 2.6 GHz CPU,操作系统为Windows 7 旗舰版. 选择拉普拉斯金字塔(Laplacian pyramid,LP)变换[16]、交叉双边滤波(cross bilateral filter,CBF)[17]、非下采样轮廓波变换(nonsubsampled contourlet transform,NSCT)[16]以及结构块分解(structural patch decomposition,SPD)方法[18]作为对比算法,对本文算法进行对比论证.

为了定量地比较4种算法的综合性能,采用平均梯度(average gradient,AVG)、边缘强度(edge intensity,EDG)、图像清晰度(figure definition,FIG)、标准差(standard deviation,STD)作为量化指标. 表1列出了不同融合方法对比的实验结果,可以看出本文算法在平均梯度、边缘强度、图像清晰度以及标准差4个指标上均优于其他3种算法. 表2列出了本文算法融合结果图与融合前原图对比的实验结果,4个评估指标均是最高,达到了融合的目的. 上述实验数据综合表明,本文算法融合效果较好,融合后的图像信息更加完整,细节方面有了增强. 使用各算法得到的融合结果如图10所示.

表1 不同算法融合图像指标

表2 融合结果与原图对比结果

4 结论

1) 本文将多光谱成像特点应用于太阳能电池片非均匀复杂表面缺陷检测上,利用缺陷特征与波段的关系,增强了缺陷信息,并且在一定程度上抑制了复杂背景的影响.

2) 利用结构纹理分解的方法作为融合前的预处理,可以有效地去除复杂背景的干扰,降低了缺陷检测的难度.

3) 通过二维张量经验小波的内在经验信息,将太阳能电池片分解为细节层和近似层. 近似层表征了整体特性,而细节层包含了缺陷信息,通过多尺度分解的方法,可很好地将缺陷信息提取出来.

4) 利用显著性的方法确定需要增强的区域,得到显著性权重图. 根据权重的不同,对缺陷部分进行对比度提升,增强了缺陷特征.

猜你喜欢

滤波器光谱显著性
基于三维Saab变换的高光谱图像压缩方法
浅谈有源滤波器分析及仿真
基于多模谐振器的超宽带滤波器设计
一种结合多尺度特征融合与像素损失加权的显著性目标检测方法
基于3D-CNN的高光谱遥感图像分类算法
声音商标显著性认定研究
从滤波器理解卷积
基于显著性权重融合的图像拼接算法
欧盟法院判决明确欧盟商标通过使用获得显著性的地域认定标准
苦味酸与牛血清蛋白相互作用的光谱研究