单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,*,图像的复原,图像复原是图像处理的另一重要课题。它的主要目的是改善给定的图像质量并尽可能恢复原图像。,图像在形成、传输和记录过程中,由于成像系统、传输介质和设备的不完善,使图像的质量变坏,这一过程称为图像的退化。图像的复原就是要尽可能恢复退化图像的本来面目,它是沿图像降质的逆向过程进行。,典型的图像复原是根据图像退化的先验知识建立一个退化模型,以此模型为基础,采用各种逆退化处理方法进行恢复,使图像质量得到改善。可见,图像复原主要取决于对图像退化过程的先验知识所掌握的精确程度。,图像复原,图像复原的一般过程:,弄清退化原因,建立退化模型,反向推演,恢复图像,对图像复原结果的评价已确定了一些准则,这些准则包括最小均方准则、加权均方准则和最大熵准则等,这些准则是用来规定复原后的图像与原图像相比较的质量标准。,图像复原和图像增强是有区别的,二者的目的都是为了改善图像的质量。但图像增强不考虑图像是如何退化的,只通过试探各种技术来增强图像的视觉效果。因此,图像增强可以不顾增强后的图像是否失真,只要看得舒服就行。而图像复原就完全不同,需知道图像退化的机制和过程的先验知识,据此找出一种相应的逆过程方法,从而得到复原的图像。如果图像已退化,应先作复原处理,再作增强处理。,图像复原,图像退化现象:图像模糊、失真、噪声等。,图像退化原因;大气湍流效应、光学系统的绕射、光学系统的像差、成像设备与物体的相对运动、传感器特性的非线性、感光胶卷的非线性和胶片颗粒噪声、摄像扫描所引起的几何失真等。,图像恢复:明确图像退化原因,建立数学模型,沿逆过程恢复图像。,主要方法:代数方法恢复、运动模糊恢复、逆滤波恢复、,Wiener,滤波恢复、功率谱均衡恢复、约束最小平方恢复、最大后验恢复、最大熵恢复、几何失真恢复。,图像复原,用巴特沃思带阻滤波器复原受正弦噪声干扰的图像,(,a),被正弦噪声干扰的图像,(,b),滤波效果图,(a),(b),图像复原,维纳滤波器应用,(,a),受大气湍流的严重影响的图像,(,b),用维纳滤波器恢复出来的图像,(a),(b),图像退化模型,假定成像系统是线性位移不变系统(退化性质与图像的位置无关),它的点扩散函数用,h(x,y),表示,则获取的图像,g(x,y),表示为,g(x,y)=f(x,y)*h(x,y),式中,f(x,y),表示理想的、没有退化的图像,,g(x,y),是劣化(被观察到)的图像。,若受加性噪声,n(x,y),的干扰,则退化图像可表示为,g(x,y)=f(x,y)*h(x,y)+n(x,y),这就是线性位移不变系统的退化模型。,图像退化模型,由于许多种退化都可以用线性的位移不变模型来近似,这样可把线性系统中的许多数学工具如线性代数用于求解图像复原问题,从而得到简捷的公式和快速的运算方法。,当退化不太严重时,一般用线性位移不变系统模型来复原图像。把它作为图像退化的近似模型,在很多应用中有较好的复原结果,且计算大为简化。而实际上非线性和位移变的情况能更加准确而普遍地反映图像复原问题的本质,但在数学上求解困难。只有在要求很精确的情况下才用位移变的模型去求解,其求解也常以位移不变的解法为基础加以修改而成。因此本章着重介绍线性位移不变系统的复原方法。,离散退化模型,离散退化模型:,离散退化模型的矩阵表示:512,2,512,2,=262144 262144,H,的矩阵表示:,图像复原模型,图像的退化/复原过程模型,图像,f(x,y),被线性操作,h(x,y),所模糊,并叠加上噪声,n(x,y),,构成了退化后的图像,g(x,y)。,退化后的图像与复原滤波器卷积得到复原的,f(x,y),图像。,对于线性移不变系统而言,上式两边进行傅立叶变换得,式中,G(u,v),F(u,v),H(u,v),和,N(u,v),分别是,g(x,y),f(x,y),h(x,y),和,n(x,y),的二维傅立叶变换。,H(u,v),称为系统的传递函数。从频率域角度看,它使图像退化,因而反映了成像系统的性能。,逆滤波复原法,通常在无噪声的理想情况下,上式可简化,则,逆滤波复原法,1/,H(u,v),称为逆滤波器。对,上式,再进行傅立叶反变换可得到,f(x,y),。,但实际上碰到的问题都是有噪声,因而只能求,F(u,v),的估计值,然后再作傅立叶逆变换得,这就是逆滤波复原的基本原理。其复原过程可归纳如下:,(1)对退化图像,g(x,y),作二维离散傅立叶变换,得到,G(u,v);,(2),计算系统点扩散函数,h(x,y),的二维傅立叶变换,得到,H(u,v)。,这一步值得注意的是,通常,h(x,y),的尺寸小于,g(x,y),的尺寸。为了消除混叠效应引起的误差,需要把,h(x,y),的尺寸延拓。,(3)计算,(,4,)计算 的逆傅立叶变换,求得 。,逆滤波复原法,若噪声为零,则采用逆滤波恢复法能完全再现原图像。若噪声存在,而且,H,(,u,v,),很小或为零时,则噪声被放大。这意味着退化图像中小噪声的干扰在,H(u,v),较小时,会对逆滤波恢复的图像产生很大的影响,有可能使恢复的图像和,f(x,y),相差很大,甚至面目全非。,病态性质,(1),H(u,v)=0:,无法确定,F(u,v),(2)H(u,v),0:,放大噪声,逆滤波复原法,逆滤波复原法,解决该病态问题的唯一方法就是避开,H(u,v),的零点即小数值的,H(u,v)。,两种途径:,一是:在,H(u,v)=0,及其附近,人为地仔细设置,H,-1,(u,v),的值,使,N(u,v)*H,-1,(u,v),不会对产生太大影响。下图给出了,H(u,v)、H,-,-1,(u,v),同改进的滤波特性,H,I,(u,v),的一维波形,从中可看出与正常的滤波的差别。,(,a),图像退化响应,(,b),逆滤波器响应,(,c),改进的逆滤波器响应,逆滤波复原法,二是:使,H(u,v),具有低通滤波性质。,(,a),点光源,f(x,y)。(b),退化图像,g(x,y),G(u,v)=H(u,v)F(u,v),H(u,v),逆滤波复原法,(,a),原图;,(,b),退化图像;(,c)H(u,v);(d)H(u,v),0,逆滤波复原法,逆滤波复原方法数学表达式简单,物理意义明确。然而存在着上面讲到的缺点,且难以克服。因此,在逆滤波理论基础上,不少人从统计学观点出发,设计一类滤波器用于图像复原,以改善复原图像质量。,Wienner,滤波恢复的思想是在假设图像信号可近似看作平稳随机过程的前提下,按照使恢复的图像与原图像,f(x,y),的均方差最小原则来恢复图像。,维纳滤波复原法,维纳滤波复原法,功率谱特征:图像的功率谱具有低通性,噪声的功率谱为常数或变化平缓。,图像信号近似看作平稳随机过程。,图像恢复准则:,f(x,y),和 的之间的均方误差,e,2,达到最小,即,线性滤波:寻找点扩散函数,h,w,(x,y),,使得,则有,由,Andrews,和,Hunt,推导满足这一要求的传递函数为:,这里,,H*(u,v),是成像系统传递函数的复共轭;,H,w,(u,v),就是维纳滤波器的传递函数。,P,n,(,u,v,),是噪声功率谱;,P,f,(,u,v,),是输入图像的功率谱。,维纳滤波复原法,维纳滤波复原法,采用维纳滤波器的复原过程步骤如下:,(1)计算图像,g(x,y),的二维离散傅立叶变换得到,G(u,v)。,(2),计算点扩散函数,h,w,(x,y),的二维离散傅立叶变换。同逆滤波一样,为了避免混叠效应引起的误差,应将尺寸延拓。,(3)估算图像的功率谱密度,P,f,和噪声的谱密度,P,n,。,(4),计算图像的估计值 。,(5),计算 的逆付氏变换,得到恢复后的图像 。,这一方法有如下特点:,(1)当,H(u,v)0,或幅值很小时,分母不为零,不会造成严重的运算误差。,(2)在信噪比高的频域,即,P,n,(u,v)P,f,(u,v),(3),在信噪比很小的频域,即|,H(u,v)|P,n,(u,v)/P,f,(u,v),,,H,W,(u,v)=0,维纳滤波复原法,对于噪声功率谱,P,n,(u,v),,,可在图像上找一块恒定灰度的区域,然后测定区域灰度图像的功率谱作为,P,n,(u,v),。,去除由匀速运动引起的模糊,在获取图像过程中,由于景物和摄像机之间的相对运动,往往造成图像的模糊。其中由均匀直线运动所造成的模糊图像的恢复问题更具有一般性和普遍意义。因为变速的、非直线的运动在某些条件下可以看成是均匀的、直线运动的合成结果。,设图像,f(x,y),有一个平面运动,令,x,0,(t),和,y,0,(t),分别为在,x,和,y,方向上运动的变化分量。,t,表示运动的时间。记录介质的总曝光量是在快门打开到关闭这段时间的积分。则模糊后的图像为,其中,g(x,y),为模糊后的图像。上式就是由目标物或摄像机相对运动造成图像模糊的模型。,令,G(u,v),为模糊图像,g(x,y),的傅立叶变换,对上式两边傅立叶变换得,去除由匀速运动引起的模糊,改变积分次序,则有,由傅立叶变换的位移性质,可得,可得,G(u,v)=H(u,v)F(u,v),令,这是已知退化模型的傅立叶变换式。若,x(t),、,y(t),的性质已知,传递函数可直接求出,因此,,f(x,y),可以恢复出来。,由水平方向均匀直线运动造成的图像模糊的模型及其恢复用以下两式表示:,去除由匀速运动引起的模糊,沿水平方向匀速运动造成的模糊图像的恢复处理例子。,(,a,),是模糊图像,(,b,),是恢复后的图像。,去除由匀速运动引起的模糊,(,a),原始图像 (,b),模糊图像 (,c),复原图像,去除由匀速运动引起的模糊,图像的几何校正,图像在生成过程中,由于系统本身具有非线性或拍摄角度不同,会使生成的图像产生几何失真。几何失真一般分为系统失真和非系统失真。系统失真是有规律的、能预测的;非系统失真则是随机的。,当对图像作定量分析时,就要对失真的图像先进行精确的几何校正(即将存在几何失真的图像校正成无几何失真的图像),以免影响分析精度。基本的方法是先建立几何校正的数学模型;其次利用已知条件确定模型参数;最后根据模型对图像进行几何校正。通常分两步:,图像空间坐标的变换;,确定校正空间各像素的灰度值(灰度内插)。,空间坐标变换,实际工作中常以一幅图像为基准,去校正几何失真图像。通常基准图像,f(x,y),是利用没畸变或畸变较小的摄像系统获得,而把有较大的几何畸变系统所摄入图像用,g(x,y,),表示,其畸变形式是多样的。,设两幅图像坐标系统之间几何畸变关系能用解析式来描述,若函数,h,1,(x,y),和,h,2,(x,y),已知,则可以从一个坐标系统的像素坐标算出在另一坐标系统的对应像素的坐标。在未知情况下,通常,h,1,(x,y),和,h,2,(x,y),可用多项式来近似,式中,N,为多项式的次数,,a,ij,和,b,ij,为各项系数。,空间坐标变换,1已知,h,1,(x,y),和,h,2,(x,y),条件下的几何校正,若我们具备先验知识,h,1,(x,y)、h,2,(x,y),,则希望将几何畸变图像,g(x,y,),恢复为基准几何坐标的图像,f(x,y)。,几何校正方法可分为直接法和间接法两种。,直接法:先由 推出,,然后依次计,算每个像素的校正坐标值,保持各像素灰度值不变,这样生成一幅校正图像,但其像素分布是不规则的,会出现像素挤压、疏密不均等现象,不能满足要求。因此最后还需对不规则图像通过灰度内插生成规则的栅格图像。,几何校正,几何校正,间接法:设恢复的图像像素在基准坐标系统为等距网格的交叉点,从网格交叉点的坐标(,x,y),出发算出在已知畸变图像上的坐标,(,x,y,),,,即,虽然点(,x,y,),坐标为整数,但(,x,y,),一般不为整数,不会位于畸变图像像素中心,因而不能直接确定该点的灰度值,而只能由其在畸变图像的周围像素灰度内插求出,作为对应像素(,x,y,),的灰度值,