湍流图像退化复原
红外目标湍流退化图像的优化复原算法

文章编号!"##$%$#&$’$##()#(%#*"#%#(红外目标湍流退化图像的优化复原算法洪汉玉"+$+喻九阳"+陈以超"+易新建$’",武汉工程大学计算机图像处理研究室+武汉-.##/-0$,华中科技大学图像所电子科学与技术博士后流动站+武汉-.##/-)摘要!提出了基于最速下降法的湍流退化图像盲目复原算法1将图像转换到频域中+建立一个基于目标图像和点扩展函数频谱的目标函数+通过迭代方式采用最速下降优化方法来极小化该目标函数+并利用傅里叶变换和反变换将目标图像和点扩展函数在频域和空域之间进行变换+在每次迭代中交替加入约束条件进行反复修正+以便取得预期的图像恢复效果+增强算法的稳定性和抗噪能力1针对红外目标湍流退化图像+在微机上对算法进行了一系列复原验证实验1实验结果表明!该文算法复原效果稳定+抗噪能力强+具有实用价值1关键词!湍流退化图像0图像复原0频谱0优化估计0最速下降法中图分类号!234"",/.文献标志码!56789:9;<89=>?@A 8=?<89=><B C =?98D :E =?9>E ?<?@F=G H @I 88J ?G J B @>I @K F @C ?<F @F9:<C @L M 3N L O P %Q R "+$+S T U V R %Q O P W "+X L Y 3S V %Z [O \"+S ]^V P %_V O P$’",‘R [O P]P a b V b R b c \d 2c Z [P \e \W Q +f O g \h O b \h Q d \h X \i j R b c h ]i O W c k h \Z c a a V P W +‘R [O P-.##/-+X [V P O 0$,]P a b V b R b c d \h k O b b c h Pl c Z \W P V b V \P O P m5]+k \a b m \Z b \h O e n b O b V \Pd \h Y e c Z b h \P n Z V c P Z c O P m 2c Z [P \e \W Q +L R O o [\P WT P V p c h a V b Q \d n Z V c P Z c O P m 2c Z [P \e \W Q +‘R [O P -.##/-+X [V P O)q G A 8?<I 8!5g e V P mh c a b \h O b V \PO e W \h V b [i d \hb R h g R e c P Z c %m c W h O m c mV i O W cg O a c m\Pb [ca b c c j c a b m c a Z c P b i c b [\mV a j h \j \a c m ,5P\g _c Z b V p c d R P Z b V \Pg O a c m\Pd h c r R c P Z Qa j c Z b h R ia \d b [c \g _c Z b V iO W cO P m b [c j \V P b %a j h c O m d R P Z b V \P ’k n s )V a a c bR j V P b [c d h c r R c P Z Q m \i O V P +t [V Z [V a iV P V i V o c mg Qb [ca b c c j c a b m c a Z c P b i c b [\mV PO PV b c h O b V p ci O P P c h ,s s 2O P m]s s 2O h cR a c mb \b h O P a d c hb [c\g _c Z b V i O W cO P mb [ck n s g c b t c c Pd h c r R c P Z Q m \iO V P O P mb V icm \i O V P +O P m b [c Z \P a b h O V P b a \d b [c d h c r R c P Z Qm \i O V PO P ma j O Z c m \iO V PO h c V P b h \m R Z c mV Pc O Z [V b c h O b V \Pb \i\m V d Q b [c i +a \O a b \\g b O V Pb [c c u j c Z b c mV i O W ch c a b \h O b V \Pc d d c Z b +b [cj h \j \a c mO e W \h V b [i h \g R a b P c a a O P mg c b b c h V i iR P V b Qb \P \V a c ,5a c h V c a \d h c a b \h O b V \Pc u j c h V ic P b a d \h V P d h O h c m\g _c Z b b R h g R e c P Z c %m c W h O m c mV i O W c aO h cj c h d \h ic mb \b c a bb [cj h \j \a c mO e W \h V b [i V Pb [ci V Z h \Z \i j R b c h +O P mb [c c u j c h V i c P b O e h c a R e b a a [\t b [O b b [cj h \j \a c mO e W \h V b [i V a h \g R a b O P mV i i R P c b \P \V a c ,v @wx =?F A !b R h g R e c P Z c %m c W h O m c mV iO W c 0V iO W ch c a b \h O b V \P 0d h c r R c P Z Qa j c Z b h R i 0\j b V iV o O b V \P c a b V iO b V \P 0a b c c j c a b m c a Z c P b i c b [\m收稿日期!$##(%#&%$(0修回日期!$##(%#4%#&基金项目!国家自然科学基金资助项目’(#*/$#-#)0中国博士后科学基金资助’$##*#.&*.&)作者简介!洪汉玉’"4(-y)+男+湖北阳新人+教授+华中科技大学博士后+主要从事红外成像z 图像复原z 气动光学及模式识别与人工智能研究工作1Y %i O V e ![\P W [O P Q {j R g e V Z ,t [,[g ,Z P第$/卷第(期$##(年""月应用光学U \R h P O e \d 5j j e V c m M j b V Z a|\e ,$/+3\,(3\p ,+$##(引言随着航空航天空间技术的发展!从湍流退化图像中有效地恢复出原目标图像!已经引起航空航天领域的特别重视"#$%大气微小温度变化将导致大气风速的随机变化!形成大气的湍流运动%物体通过大气湍流的成像是诸如天文观测&精确制导等在湍流大气环境中工作的天基&地基和机’弹载光学成像传感器系统必然会遇到的问题"($%由于存在大气层!在光线进入成像传感器窗口之前!大气湍流随机地干扰光波的传播")$!使焦平面上的像点强度分布扩散&峰值降低&图像模糊和位置偏移!严重限制了各种湍流大气环境下成像系统的分辨能力和性能!给目标识别带来了很大的困难%各国学者在克服大气干扰&重建畸变图像方面做了大量研究工作!提出了许多有关湍流退化图像恢复的方法和技术%但现有的方法都有其局限性%例如!基于相关技术的斑点全息术需要观测一个与目标邻近的参考星图像"*+,$!对图像数据质量就要求太高!不能有太多噪声!计算时间很长"-$%为了确定湍流对短曝光图像的波前相位扰动!人们提出了波前传感器技术!如波前分析去卷积方法".$和利用波前传感技术的自适应光学方法"/$%波前分析去卷积方法及自适应光学方法虽然可实时校正部分畸变!但这些技术包含有复杂的设备%建造和维护自适应光学系统是非常昂贵的!因此有理由去寻找更佳的方案%由于湍流光学点扩展函数是未知的和随机变化的!因此!其点扩展函数是难以确定的%当点扩展函数无法得到时!必须借助盲目反卷积方法%由于拥有的信息较少!实现这一方法固然就困难些!其关键在于在复原过程中如何合理引入先验信息%盲目反卷积方法是在点扩展函数未知的情况下!不用向导星作参考!而是利用一些合理的先验知识来估计目标的强度%在湍流退化模型未知的情况下!直接从退化图像中估计目标的强度!01234和567891于#://年提出了基于单帧的迭代盲目反卷积方法;<923697=2>?78@52A B8=B?C97B8!<>5D":$!且将其应用在大气湍流退化图像的复原中%在每一次迭代中都对图像进行非负性限制%01234和567891等人的研究激发了宇航学界对盲目反卷积的极大兴趣%这种法虽然在有噪声情况下存在稳定性问题!但被证明是非常有发展前途的%近年来!宇航界对<>5算法的兴趣日益增加%<>5算法对噪声较敏感!缺乏可靠性!许多学者发表了对<>5基本算法的改进"#E$%为了解决盲目反卷积算法对噪声敏感及其解不确定的问题!本文提出了基于最小二乘的盲目优化复原方法!通过在频域中建立一个误差项并使之最小化来获得最佳解!并且在每次迭代过程中使用最速下降法来最小化该误差项!利用傅里叶变换和反变换在迭代过程中将图像和点扩展函数在频域和空域之间反复变换!在变换过程中加入约束条件进行反复修正!以便获得满意的结果%经过这些改进!提高了算法的抗噪能力和稳定性%#基于最速下降法的优化复原算法原理二维图像的形成过程可模型化为F;G!H D I J K;L!M D N;G!H O L!M D@L@M P Q;G!H D;#D 式中R;L!M D S T O;G!H D S U%离散后!;#D式可表达为F;G!H D I VLVMK;L!M D N;G!H O L!M D P Q;G!H D;(D 一般情况下!在短曝光时间内!可假定大气湍流对目标成像的影响具有时移不变性"($!即对于湍流退化图像!其退化过程一般可假定为空不变的"##$!模糊算子具有位移不变性!则有RN;G!H O L!M D I N;GW L!H W M D;)D 将;)D式代入;(D式!得F;G!H DI VLVMK;L!M D N;GW L!H W M DPQ;G!H DI K;G!H DX N;G!H DPQ;G!H D;*D 式中X为卷积符%由;*D式可知!点扩展函数N;G!H D描述了气动流场对目标图像的综合影响%图像复原问题归结为从观测到的退化图像中去除模糊函数的卷积来复原目标图像%对;*D式进行傅里叶变换!在频域中可等价地表示为Y;Z![D I\;Z![D];Z![D P^;Z![D;,D 式中R Y;Z![D!];Z![D!\;Z![D及^;Z![D分别为F;G!H D!K;G!H D!N;G!H D及Q;G!H D的傅里叶变换%在此!可构造基于目标图像和点扩展函频谱的目标函;代价函D为_;\!]D I VZV[‘Y;Z![D W];Z![D\;Z![D‘(;-D 于是!图像恢复问题变为关于目标函;-D的极小a##,a应用光学(E E-!(.;-D洪汉玉!等R红外目标湍流退化图像的优化复原算法化技术求解问题!即"#$%&’!()我们采用最速下降法来对目标函数&*)实现极小化+最速下降法是目前求解最优化问题的一种有效的迭代求解方法,-./+人们在搜索目标函数极小值这类问题时!总希望从某一点出发!选择一个目标函数值下降最快的方向!以利于尽快达到极小点+正是基于这样一种愿望!早在-012年法国数学家345678提出了最速下降法+后来!35998等人做了进一步的研究+最速下降法已经成为一种最基本的最优化算法!在最优化方法中占有重要地位+它对图像复原算法的研究很有启发作用!因此!我们将其引入图像复原过程中+最速下降法的迭代公式是:&;<-)=:&;)<>;?&;)式中?&;)是从:&;)出发的搜索方向+这里取在点:&;)处为最速下降方向!即?&;)=@AB &:&;))>;是从:&;)出发沿方向?&;)进行一维搜索的步长!即>;满足B &:&;)<>;?&;))="#$>C DB &:&;)<>?&;))计算步骤如下E-)给定初点:&-)!允许误差F G D !置;=-H .)计算搜索方向?&;)=@AB &:&;))HI )若J ?&;)J KF !则停止计算H 否则!从:&;)出发!沿?&;)进行一维搜索H 为求>;!使B &:&;)<>;?&;))="#$>C DB &:&;)<>?&;))H 1)令:&;<-)=:&;)<>;?&;)!置;L=;<-!转步骤.)+最速下降法提供了基于目标函数极小化的迭代求解技术!形式简单!收敛速度较快+本文将最速下降法用于目标函数式&*)的迭代极小化求解过程中+为方便起见!采用M N ,/和O ",/分别表示复数的实部和虚部+根据最速下降法!在计算过程中要用到目标函数的导数!因此!将目标函数分别对点扩展函数频谱实部与虚部取导!可以得出目标函数关于点扩展函数频谱的实部与虚部+M N ,’&P !Q )/和O ",’&P !Q)/的梯度分别为A %&M N ,’&P !Q )/)=.R (&P !Q )R .M N ,’&P !Q)/@.&M N ,(&P !Q )/M N ,S &P !Q )/<O ",(&P !Q )/O ",S &P !Q )/)&2)A %&O ",’&P !Q )/)=.R (&P !Q )R .O ",’&P !Q )/@.&M N ,(&P !Q )/O ",S &P !Q )/@O ",(&P !Q )/M N ,S &P !Q )/)&0)同理!可以得出目标函数关于目标图像频谱实部与虚部!即M N ,(&P !Q )/和O ",(&P !Q )/的梯度分别为A%&M N ,(&P !Q )/)=.R ’&P !Q )R .M N ,(&P !Q )/@.&M N ,’&P !Q )/M N ,S &P !Q )/<O ",’&P !Q )/O ",S &P !Q )/)&T )A %&O ",(&P !Q )/)=.R ’&P !Q )R .O ",(&P !Q)/@.&M N ,’&P !Q )/O ",S &P !Q )/@O ",’&P !Q )/M N ,S &P !Q )/)&-D )求出目标函数的上述梯度后!根据最速下降法计算步骤!可采用迭代方式来极小化目标函数!进一步分别估计出点扩展函数频谱的实部和虚部!以及目标图像频谱的实部和虚部+其中&2)式和&0)式是迭代过程中由退化图像频谱和估计的目标图像频谱分别计算目标函数关于点扩展函数频谱的实部和虚部的梯度公式+&T )式和&-D )式是迭代过程中由退化图像频谱和估计的点扩展函数频谱分别计算目标函数关于目标图像频谱实部和虚部的梯度公式+.目标图像频谱的规整化处理为了进一步克服图像复原问题的病态性!在频域上需采用规整化方法!以绕开病态问题+在离散情况下!用二阶差分代替二阶导数+按照平滑规整要求!图像B 的二阶差分应极小+图像的二阶差分可以通过卷积B U ?来计算!其中!二阶差分算子为?=,D -D H -@1-H D -D /!即拉普拉斯算子+用V 表示基本算子?生成的循环矩阵!用循环矩阵和向量来表达卷积+规整化问题可表达为图像二阶差分最小化问题!将二阶差分最小化约束加入到关于目标图像的误差函数式W &B)=J X @’B J .<>J V B J .中+其中>为平滑因子+利用循环矩阵的对角化技术把去卷积问题变为频域滤波问题!并在频域中可得到(&P !Q )=S &P !Q )’Y&P !Q )R ’&P !Q )R .<>R V &P !Q )R.&--)根据以上分析!为稳定复原效果!将上述规整化法加入到估计目标图像频谱的梯度公式中+由此可将&T )式和&-D )式修改为A %&M N ,M N ,(&P !Q )//)=.&R ’&P !Q )R .<>R V &P !Q)R .)Z M N ,(&P !Q )/@.&M N ,’&P !Q )/Z M N ,S &P !Q )/<O ",’&P !Q )/Z[.-\[应用光学.D D *!.2&*)洪汉玉!等E 红外目标湍流退化图像的优化复原算法!"#$%&’()*)%+,) -.%/0#!"#1%&’()**)2,%34%&’()3,5637%&’()3,)8!"#1%&’()*9,%/0#4%&’()*8!"#$%&’()*9!"#4%&’()*8/0#$%&’()*)%+:) :基于先验知识的约束条件控制迭代过程从一个起始的目标图像频谱值1;及点扩展函数频谱4;开始’在迭代过程中’采用最速下降法交替地估计出点扩展函数频谱的实部和虚部及目标图像频谱的实部和虚部<在每次迭代中加入点扩展函数的频域带限约束及其空域的非负性约束和支持域限制<点扩展函数是一个冲激函数’它的频带是有限的’因此可以构造一个带限滤波器’抑制或截断点扩展函数频谱中高于某一带限频率的空间频率’对其频谱进行带限控制’然后对点扩展函数频谱进行反傅里叶变换’转换到空域进行空域约束<采用非负性和支持域限制作为点扩展函数空域约束的先验条件’并对目标图像实施正性约束’保证目标图像的正性<=算法实现我们采用最速下降法来求解目标图像和点扩展函数频谱’整个迭代过程主要由采用最速下降法估计目标图像和点扩展函数频谱的实部和虚部的=个内循环组成<图+为基于梯度最速下降的优化复原算法流程图<迭代过程从一个起始预设值1;和4;开始’采用最速下降法经过=个循环估计目标图像和点扩展函数频谱’交替地使用>>?和!>>?图+基于最速下降的优化复原算法流程图@A B C+@D E FG H I J K E L E M K A N A O I K A E PJ Q R K E J I K A E PI D B E S J A K H N T I R Q UE PR K Q Q M Q R K U Q R G Q P K N Q K H E U 在空域和频域中对目标图像和点扩展函数进行约束’进行下一次迭代’如此反复进行’直至满足迭代中止条件’可获取稳定复原结果<V实验结果与分析为验证复原算法的有效性及其稳定性’我们在微机上%W0X Y Z["!\’V+,]内存)编程’对本文最速下降复原算法进行了实现和复原验证实验<图,%^)为用红外热像仪所拍的直升机图像%红外原图’大小为+,_8+,_)‘图,%a)为原图的频谱<图:%^)为用气动光学软件#,*生成的湍流模糊图像<采用本文算法恢复出的图像如图:%a)所示’恢复耗时V C,,+_秒<模糊图像频谱及恢复出的频谱分别为图:%b)和图:%c)’通过频谱比较可知’图像的高频部分得到增强’目标轮廓细节得到了很好的恢复<图,红外飞机原图及其频谱@A B C,d J A B A P I D A P L J I J Q U A N I B Q E L K H Q M D I P QI P UA K R L J Q e f Q P G g R M Q G K J f N图:模糊图像和恢复图像及其频谱@A B C:h D f J J Q U A N I B Q’J Q R K E J Q UA N I B QI P UK H Q A J L J Q e f Q P G g R M Q G K J f N R下面主要验证本文算法对复杂背景目标图像i:+Vi应用光学,;;j’,k%j)洪汉玉’等l红外目标湍流退化图像的优化复原算法的恢复效果及抗噪性能!图"为地面目标图像#大小为$%&’$%&(!图)#*(为地面目标模糊图像#无噪(+为了验证算法的抗噪能力+在模糊图)#*(的基础上添加高斯白噪声+使图像信噪比分别为,-./+%-./+$-./+得出的退化图像如图)#0(+#1(和#.(所示!采用本文算法分别从图)#*(+#0(+#1(和#.(中恢复出的图像如图2#*(+#0(+#1(和#.(所示!从视觉效果上看+地面目标得到了较好的复原!下面进一步以评价参数均方根误差#344567*89:;*3773343(<=>?@$AB C AD $E@-C BD $F @-G H I #E +F (DH #E +F (J KL%$%作为客观定量标准度量图像性能#与原图比较(!不同噪声条件下的模糊图像及恢复图像的<=>?值列于表$!从表$可知+本文恢复算法将图像的<=>?误差值#与原图像比较(平均降低"以上+且在各种强噪声较低信噪比#$-M,-./(条件下复原效果比较稳定+说明本文算法恢复效果具备很强的图"复杂背景原图N O P Q "R S O P O T U V O W U P X Y O Z [\]W ^V X _‘U \a P S ]b T c图)不同信噪比的退化图像#模糊d 噪声(N O P Q )e X P S U c X c O W U P X f Y O Z [c O g g X S X T Z h i j f #‘V b S d T ]O f X (抗噪性能!表$均方误差<=>?值比较k U ‘V X $l ]W ^U S O f ]T]g Z [X j mh no U V b X f 信噪比>p <q#无噪(,-./%-./$-./模糊图的<=>?%2Q )r 2s s %2Q 2$r $&%2Q &"$s s %r Q %r ,s "复原图的<=>?%%Q s )$--%%Q s 2,")%%Q &"%)$%,Q 2%%r ,在本文算法的图像盲目复原中+由于点扩展函数也是未知的+需从图像观测数据中估计点扩展函数和恢复原图像+即t #u +v (含有%个未知项w #u +v (和H #u +v(+且图像包含有随机噪声+因此复原出的图像H I #u +v (与原图像H #u +v (会有差距!由公式t #u +v (@H #u +v (x w #u +v (d y #u +v (可知+恢复图像质量与点扩展函数的估计w I #u +v (有关+且受噪声影响!由此可知+要提高图像复原质量+可采用更先进的z 具有鲁棒性和抗噪性的最优化方法#如共轭梯度法和神经网络方法等(+以及引入更完整的先验约束知识估计出与实际点扩展函数w #u +v(尽可能接近的数值w I #u +v (!这也是本文算法可以进一步改进的方向!图2在各种信噪比条件下恢复出的图像N O P Q 2j X f Z ]S X cO W U P X f b T c X S Z [X \]T c O Z O ]T]g c O g g X S X T Z h i j f2结论湍流退化图像复原是一个跨学科的前沿性课题+富有挑战性+它具有很大的应用前景!在湍流点扩展函未知的情况下+本文提出一种基于最速下降法的图像频谱优化复原算法!针对红外目标湍流退化图像+进行了一系列图像恢复实验+验证了本{"$){应用光学%--2+%s #2(洪汉玉+等|红外目标湍流退化图像的优化复原算法文算法的可行性和有效性!实验结果表明"本文算法的恢复性能和抗噪性较好"尤其在各种强噪声干扰的情况下恢复效果比较稳定"在航天光学成像传感器和空中目标探测与识别系统中具有应用前景!参考文献#$%&洪汉玉"张天序’基于各向异性和非线性规整化的湍流退化图像复原$(&’宇航学报")**+"),-%.#,/%%’0123045/67"80923:;45/<7’=>?@A B4@;A5A C @7B D7E>5F>/G>H B4G>G;I4H>?7?;5H45;?A@B A J;F45G5A5E;5>4B B>H7E4B;K4@;A5$(&’(A7B54E A C9?@B A/547@;F?")**+"),-%.#,/%%’-;5L M;5>?>.$)&张天序"洪汉玉’基于估计总体点扩展函数值的湍流退化图像复原$(&’自动化学报")**N")O-+.#,P N/,Q%’80923:;45/<7"0123045/67’=>?@A B;5H@7B D7/E>5F>/G>H B4G>G;I4H>?D4?>G A5@M>>?@;I4@;A5A C@7B D7E>5F>J A;5@?J B>4G C75F@;A5R4E7>?$(&’9F@497@A I4@;F4S;5;F4")**N")O-+.#,P N/,Q%’-;5L M;5>?>.$N&曹青华"彭仁军"吴键’激光在湍流大气中的干涉仿真$(&’应用光学")**T")P-+.#N%)/N%+’L91U;5H/M74"V W23=>5/X75"YZ(;45’[5@>B C>B>5F>?;I7E4@;A5A C E4?>B D>4I J B A J4H4@;A5;5@7B D7E>5@4@I A?J M>B>$(&’(A7B54E A C9J J E;>G1J@;F?")**T")P-+.#N%)/N%+’-;5L M;5>?>.$+&\9]W^=[W9’9@@4;5I>5@A C G;C C B4F@;A5/E;I;@>GB>/ ?A E7@;A5;5E4B H>@>E>?F A J>?D6_A7B;>B454E6K;5H?J>F‘E>J4@@>B5?;5?@4B;I4H>?$(&’9?@B A5A I645G9?@B A J M6?;F?"%O P*"-T.#Q,/Q P’$,&\10a9229Y"YW[3W\:3"Y[=2[:8W=]’S J>F‘E>I4?‘;5H;54?@B A5A I6#@B;J E>F A B B>E4@;A5@M>A B645G4J J E;F4@;A5?$(&’9J J E;>G1J@;F?"%O Q N"))-)+.#+*)Q/+*N P’$T&_12b92W\\9(L"S W c W9’=>F A5?@B7F@;A5A C @7B D7E>5F>/G>H B4G>G;I4H>?7?;5H@M>d5A</:M A I J?A54E H A B;@M I$(&’(A7B54EA C@M>1J@;F4ES A F;>@6A C9I>B;F49"%O Q P"+-N.#+N Q/++Q’$P&_1=b Sb"YW\S0]a"=133W a922a L’L A5?@B4;5>G E>4?@/?e74B>?>?@;I4@;A5;5G>F A5/R A E7@;A5C B A I f4R>C B A5@?>5?;5H$(&’1J@;F?L A I I75;F4@;A5?"%O O Q"-%,%.#O N/%**’$Q&2[S W2S12V"]9=9d9:=’V4B@;4E4@I A?J M>B;FF A B B>F@;A5f;@M4G4J@;R>A J@;F?$(&’(A7B54E A C@M>1J@;F4E S A F;>@6A C9I>B;F49"%O Q P"+-%).#))+O/)),N’$O&9^W=S3="b9[2:^(L’[@>B4@;R>D E;5GG>F A5/ R A E7@;A5I>@M A G45G;@?4J J E;F4@;A5?$(&’1J@;F?\>@@>B"%O Q Q"N-P.#,+P/,+O’$%*&\92W=3’]E;5GG>F A5R A E7@;A5A C?J>F‘E>;I4H>?$(&’(A7B54E A C@M>1J@;F4E S A F;>@6A C9I>B;F49"%O O)"O-O.#%,*Q/%,%+’$%%&293^(3"V\W aa129S=(":1=3W=S W2: L’[@>B4@;R>;I4H>B>?@A B4@;A57?;5H4J J B A<;I4@>;5R>B?>J B>F A5G;@;A5;5H$(&’[W W W:B45?A5[I4H>V B A F>??;5H"%O O T",-P.#%%,%/%%T)’$%)&陈宝林’最优化理论与算法$a&’)版’北京#清华大学出版社")**,’L0W2]4A/E;5’1J@;I;K4@;A5:M>A B645G9E H A/B;@M I$a&’)@M>G’]>;X;5H#:?;5H M74Z5;R>B?;@6V B>??")**,’g,%,g应用光学)**T")P-T.洪汉玉"等#红外目标湍流退化图像的优化复原算法。
图像复原

设: α=x - x0(t), β= y - y0(t)
则: x =α+ x0(t), y = β+ y0(t) 代入上式,有
(一)连续图像退化的数学模型
G u, v f , exp j 2 (u )dd 0 exp j 2 (ux0 (t ) y0 (t )dt
或消弱其影响的过程,是一种估计方法; 另一种方法是针对原始图像有足够的先验知识的情 况,对原始图像建立一个数学模型并根据它对退化 图像进行拟合,能够获得更好的复原效果。
从方法和应用角度的分类
频域图像恢复方法:逆滤波、维纳滤波等;
线性代数恢复方法:线性代数滤波方法、空间域滤波
方法等;
非线性代数恢复方法:投影法、最大熵法、正约束方
几种典型的退化模型 光学散焦造成的图像退化
小孔衍射造成的模糊
图像退化效果
散焦对应的点扩展函数
(一)连续图像退化的数学模型
光学散焦系统的传递函数为:
J1 (d ) H (u, ) d
(u )
2 2
d是散焦点扩展函数的直径, J1(•)是第一 类贝塞尔函数。
目标相对运动造成的图像退化
若把fe(x)、 ge(x) 表示成向量形式:
f [ f e (0), f e (1), , f e ( M 1)]
T T
g [ ge (0), ge (1), , ge ( M 1)]
循环卷积写成矩阵形式:
g Hf
H是M*M的矩阵。
(二)离散图像退化的数学模型
he (1) he (2) he (0) h (1) he (0) he (1) e H he (2) he (1) he (0) he ( M 1) he ( M 2) he ( M 3) he ( M 1) he ( M 2) he ( M 3) he (0)
复杂背景红外湍流退化图像复原算法研究

d g a e ma e t o l x b c g o n sp o o e . e e f x e me ta d c mp rn e u t s o a e p o e r d d i g swi c mp e a k r u d i rp s d S r s o p r n n o a g r s ls h w t tt r — h i e i i h h
p s d ag r h i efci e frt e r soa in o nr r d t r ue c — e r d d i g i o lx b c go n . o e l o t m s f t h e t rt fi f e u b n e d ga e i e v o o a l ma e w t c mp e a k u d h r Ke r s ifae u b l n e d g a e ma e ; o l x b c g o n ;ma e r so ain; 一 o l y wo d :n r d t r u e c — e r d d i g s c mp e a k u d i g e t rt r r o 2 n rl T
Ab t a t F rt e p o lm ft e r soa in o e i f r d tr u e c — e rd d i g i o lx b c g o n te sr c : o r b e o e t rt ft nr e u b ln e d g a e ma e w t c mp e a k u d,h h h o h a h r i ms o o n s t p cweg t d dfee c s a ec n t c e i l h sp p r T e mi i z t n o - om fte t fs me a ior i ih e i r n e r o sr t d man y i t i a e . h n miai f n r o e o f u n o 2 h s c n — r e i e e c st e f n t n d a p t l o r cin c n tan n o p r td i h si t n p o e so e o d o d rd f r n e o b u c i e s a s a i re t o sr iti ic r o ae n t e e t o ac o s ma i r c s f o s l ig f rt e v l e ft e p i ts ra u c in . e tr t n ag r h f rt eg b rn o vn h au s o o n p e d f n t s A r s a i l o t m o o h o o o i wo n i h o g ̄a s o u b l n e i me ft r u e c —
水下湍流成像退化及优化恢复研究

水下湍流成像退化及优化恢复研究谌雨章;叶婷;程超杰;杨婉璐【摘要】为了全面且针对性地研究水下湍流成像的退化因素,同时优化相应图像恢复算法,搭建了一个可控湍流条件和重复使用的水下成像实验系统,利用循环水泵控制实验水箱中湍流的强度,气泡发生器制造微气泡,图像传感器获取不同条件下的正弦条纹目标板的成像结果.研究了流速场、程辐射和流体介质对水下成像的影响,结合图像复原和超分辨率重建技术,比较了基于三种退化因素的调制传递函数(MTF)的差异和适用性.结果表明,湍流流速场在低空间频率段造成MTF快速下降,程辐射和流体介质则会导致高空间频率的调制对比度减小;在水下湍流退化图像恢复中,湍流流速场的MTF适合图像复原,程辐射和流体介质的MTF适合图像重建.【期刊名称】《光电工程》【年(卷),期】2018(045)012【总页数】11页(P52-62)【关键词】海洋光学;调制传递函数;图像复原重建;超分辨率【作者】谌雨章;叶婷;程超杰;杨婉璐【作者单位】湖北大学计算机与信息工程学院,湖北武汉430062;湖北大学计算机与信息工程学院,湖北武汉430062;湖北大学计算机与信息工程学院,湖北武汉430062;华中科技大学计算机科学与技术学院,湖北武汉430074【正文语种】中文【中图分类】P733.3+1;TP391.411 引言上世纪70年代,光学湍流被提出是影响水下光学系统的因素之一[1],到如今,水下成像技术已经被广泛地应用于水下地形勘测和水下地貌观测等领域。
在自然静态水体中,悬浮颗粒的散射和吸收特性是造成水下图像退化的主要因素,这个影响因素使得水下可见范围最长才达到几十米,导致水下操作困难。
在自然水体环境下,高频随机运动的湍流会对成像产生严重的影响,水下可见距离会进一步缩小,并导致水下成像质量降低,这与静态水体中的成像结果相差甚远。
因此,深入研究水下湍流是很有必要的。
关于大气湍流的研究和技术都已经趋于成熟,相比之下,对水下湍流的关注较晚。
基于分数阶傅立叶变换的湍流退化图像相位恢复算法研究

第 4期
空
气
动
力
学
学
报
பைடு நூலகம்
Vo. 1 28。 No. 4 Au g., 01 2 0
21 0 0年 8月 文 章编 号 :0 5 — 8 5 2 1 ) 4 0 8 — 4 2 8 1 2 ( 0 0 0 — 3 10
ACTA AERoD YNAM I CA I CA S NI
及相 位恢 复方法 l 等 。其 中 , _ 7 相位 恢复 方法 是通 过利 用 目标 图像 的傅 立 叶变换 幅值来 恢 复 目标 图像 , 由 即
傅立 叶变换 的 幅值得 到 目标 图像 的 自相关 , 恢复傅 立 叶变换 相位 , 故相 位恢 复方 法又转 化 为解相 关 问题 的
验结果表明该算法对湍流退化具有较好复原能力 。 关 键 词 : 动 光 学 ; 流退 化 ; 数 阶 傅 立 叶 变 换 ; 气 湍 分 相位 恢 复 ; 小 二 乘 共 轭 梯 度 最
中 图分 类 号 : 1 . V2 1 3 文献标识码 : A
0 引 言
光 电探 测 系统在对 目标 进行 探测 跟踪 时 , 光线 受
求解 。相位恢 复 方 法 最 早 由 J R . .F e u i p根 据 目标 n
1 基 于 分 数 阶 傅 立 叶 变 换 的 相 位 恢 复
域和频 域交 替 迭 代 的 G S复 原 算 法 改 进 得 来 , — 称
算 法 原 理
1 1 分 数 阶 傅 立 叶 变 换 .
为迭代 傅立 叶变 换 算 法 , 用 误 差 下 降 ( R) 和 ]采 E 法 混合输 入输 出 ( O) 法 交 替进 行 迭 代 运 算 。文 献 HI 算
基于序列图像的湍流退化图像复原方法研究

2 1年 6 02 月
长春 理工大学学报 ( 自然 科 学版 )
J un l f a g h nUnv ri f ce c n e h oo y ( t r l ce c dt n o r a o Ch n c u ie s y o S in ea dT c n lg Nau a in eE io ) t S i
At o p rcTu bu e c so td m a eRe t r to m s he i r l n eDit re I g so a i n
Ba e n I a eS q n e s d o m g e ue c
Z HU n, Z Ya HA 0 n, YANG i h a GAO n Xi Jn u , Fe g, W ANG h o i Z a y
校正。
根 据序 列 图像相 邻 图像相 关 性较 大 , 图像 问 信 息 互 补等 特 点 , 常可 将 序列 图像 配 准 方法 分 为参 通
Ke r s: amo p e i tr ue c ; i g e u n e B一@ l e o -r i e itain; ftr ywo d t s h rc ub ln e ma e sq e c ; i ,n n i d rgsrto n g i e l
受大 气 湍 流 的影 响 , 气 折射 率 发 生着 不 规 则 大 变化 , 致光通过大气传播后的路径发生改变 , 导 Байду номын сангаас
Ab t c : Th s a e p o o e a sr t a i p p r r p s d m eh d f t o p e i t r u e c ds o td ma e whc i b s d 1 i g s — t o o am s h r c u b l n e i re i g s t ih s a e 01 a ma e e — q e c .Ths me h d s d B p ie n n i i r g sr t n l c n l g o e t r t e i g d f r t n c u e y t u ne i t o u e a s l o —r d e ita i e h o o y t r so e h ma e e o ma i a s d b a— n g o o m o p e i u b ln e a d f t r t l n t s t e r m ann o s n ma e ,a d t e h e r d d i g s a e r s o e . s h r t r u e c n i e s o e i ae h e ii g n ie i i g s n h n t e d g a e ma e r e t r d c l mi Ex e i n s s o d t a h eh d n t i p p r c n r s o e t r u e c —d g a e ma e l p rme t h we h t t e m t o i h s a e a e t r u b ln e — e r d d i g s we 1 .
基于广义规整化的红外湍流退化图像盲复原方法

Ab t a t A r u e c - e r d d b i d i g e t r t n m eh d b s d o e e ai e e u a i ai n wa sr c : t b l n e d g a e l ma e r so ai t o a e n g n r l d r g l r t s u n o z z o
引 言
由于大气 湍流 扰动 的 影响 ,使得 红外 成像 探测 系 统 获取 的 图像 质 量 退 化 ,加 上 成 像 过 程 中噪 声 的 引
何 成 剑 ,洪 汉 玉 ,张 天序
( 华中科技 大学图像识别与人工智能研究所 ,图像信息处理 与智 能控制教 育部重点实验 室,湖北 武汉 4 0 7 ) 3 0 4
摘要 :针对湍流环境 下红外成像 的特点,提 出了一种基于广义规整化的湍流退化图像盲复原方法。该 方法在合理建立红外图像退化模型的基础上, 根据极大似然估计准则来设计。为 了抑制噪声同时有效 地 引入关于图像 的先验信 息,对传 统的规整化方法进行 了扩展 ,提 出了 广义规整化的策略,将规整化
分为两个各有侧重点的层次,即复原过程 中噪声的抑制和含噪条件下红外图像相关特征 的保持, 根据 有限的先验知识将复原 问题 的求解转化为带规整化约束的最优化估计问题,进而复原湍流退化图像 。 关键词:湍流退化; 图像盲 目复原;极 大似 然估计;广义规整化 中图分 类号 :T 1.3 N9 1 7 文献 标 识码 :A 文 章编 号 : 10 .8 120 )80 4 .4 0 18 9(0 60 .4 30
湍流退化图像的最大熵盲目复原方法

关 键 词 : 大 熵 ; 图像 复 原 ; 湍 流 退 化 ; 共 轭 梯 度 法 最
中 图分 类 号 :T 3 1 P 9
文献 标识 码 : A
文 章 编 号 :0 7 2 7 (0 80 — 52 0 10 — 2 62 0 )3 0 4 — 5
Bl d r s o a i n o ur ul n e d g a d i a e u i a i u i e t r to f t b e c - e r de m g sng m x m m n e t o l o ih n r py a g r t m
d ni t nfr ao .T e rbe cn e ovd y he ojgt e sy r s m t n h po l t a o i m a b sle b t c n a me o w c n es e u e h t d h h ed fw i
c m p tto h e e e o u b l n e a e m a e b an d r m if rn o d to r r so e o o u a n.T n s r s f tr u e t d g d d i g s o ti e fo i i r dfe e t c n iins a e e t r d t
盲 目复 原 方 法 。复 原 过 程 中 , 避 免 最 大 熵 约 束 项 的 非 线 性 带 来 的 复 杂 运 算 , 熵 的表 达 式 进 行 二 次 为 对
近似 , 并利 用灰 度 变换 确保 近似 程度 的 准确 性 , 最后 采 用共 轭梯 度 法进 行 求 解 , 而 大大 降低 了计 算 从
基于大气湍流光学传递函数的图像复原

基于大气湍流光学传递函数的图像复原【摘要】本文讨论了大气湍流的光学传递函数,基于大气湍流中图像降质的先验知识,对湍流模糊图像逆滤波复原和维纳滤波复原进行了仿真实验。
【关键词】大气湍流光学成像点扩散函数图像复原1 大气湍流运动导致大气折射率的随机变化引起光束抖动、强度起伏(闪烁)、光束扩展和像点抖动等一系列光传输的大气湍流效应大气湍流导致的最常见且明显的光传输效应是光闪烁与光像抖动。
湍流畸变图像中含有成像系统物体的衍射极限信息,研究光学系统在各类湍流环境和系统结构条件的成像规律和像场所含有物信息细节的极限,是图像恢复研究领域的基本问题。
2 大气湍流的光学调制传递函数设物体的光强分布是坐标的函数,是观察瞬时像的光强分布,其也是的函数。
一个长曝光像可认为是的系综平均。
设物体位于处,由于天文像是完全非相干的,故与之间满足线性关系。
我们进一步假定大气成像系统是平移不变的,即大气成像系统是等晕的,这个假定是指在接收系统全视场内湍流平均效应是相同的。
这样,与之间满足卷积关系。
定义像的二维复傅里叶变换在傅里叶频率空间中这里是大气成像系统的光学传递函数OTF。
为了用波结构函数表示OTF考虑一个非常远的准单色光平面波垂直入射到透镜上。
在有大气湍流时,入射到非均匀介质上的平面波在介质内传播,最终落到透镜上的是一个受到扰动的波。
入射到透镜上的场可以表示为。
式中,是入射平面波的光强,和S是Rytov近似下的高斯随机变量。
在各态历经假设下,式中即不存在湍流时光学系统的OTF,而是大气的长曝光OTF。
和S均服从高斯统计,故总平均OTF的形式为:式中,假定无扰动的光学系统的OTp退化数学模型的空域、频域表达形式分别是:其中:、、、分别为观测的退化图像、模糊函数、原图像、加性噪声,*为卷积运算符,(x=0,1,2,…,M-1),(y=0,1,2,…,N-1)。
根据导致模糊的物理过程,大气湍流造成的传递函数OTF其中c是与湍流性质有关的常数,依赖于扰动的类型,通常由实验方法寻求。
TV正则化的双迭代RL湍流退化图像复原算法

Ke y wo r d s:a t mo s p h e r i c t u r b u l e n c e — d e g r a d e d mo d e l ;i ma g e r e s t o r a t i o n; Ri c ha r d s o n— Lu c y a l g o — r i t hm ;p o i n t s p r e a d f u n c t i o n;t o t a l v a r i a t i o n;r e g u l a r i z a t i o n
d e g r a d e d i ma g e s .Ho we v e r ,i t s u f f e r s t h e s h o r t c o mi n g o f a mp l i f y i n g t he n o i s e a n d r e s u l t i n g i n e x c e s — s i v e s mo o t h i n g i n t h e i t e r a t i v e p r o c e s s . Th i s p a p e r d i s c u s s e s t h e RL a l g o r i t h m a nd i t s i mp r o v e d me t h o ds f o c us i ng o n t u r b u l e n c e — d e g r a d e d i ma g e s r e s t o r a t i o n. A s h o t— r e x po s u r e a t mo s p he r i c t u r b u— l e n c e — de g r a d e d mo d e l i s e s t a b l i s h e d a n d a n u me r i c a l c o mp u t i n g m e t h o d i s p r o p o s e d f or r a n d o m
图像退化 图像复原解析

4记录和整理实验报告。
图像降质的数学模型图像复原处理的关键问题在于建立退化模型。
输入图像f(x, y)经过某个退化系统后输出的是一幅退化的图像。
为了讨论方便, 把噪声引起的退化即噪声对图像的影响一般作为加性噪声 考虑, 这也与许多实际应用情况一致,如图像数字化时的量化 噪声、 随机噪声等就可以作为加性噪声,即使不是加性噪声而 是乘性噪声, 也可以用对数方式将其转化为相加形式。
原始图像f(x, y) 经过一个退化算子或退化系统H(x, y) 的作用, 再和噪声n(x,y)进行叠加,形成退化后的图像g(x, y)。
图2-1表示退化过程的输入和输出的关系,其中H(x, y)概括了退化系统的物理过程,就是所要寻找的退化数学模型。
图2-1 图像的退化模型数字图像的图像恢复问题可看作是: 根据退化图像g(x , y)和退化算子H(x , y)的形式,沿着反向过程去求解原始图像f(x , y), 或者说是逆向地寻找原始图像的最佳近似估计。
图像退化的过程可以用数学表达式写成如下的形式:g(x, y)=H [f(x, y)]+n(x, y) (2-1)在这里,n(x, y)是一种统计性质的信息。
在实际应用中, 往往假设噪声是白噪声,即它的频谱密度为常数,并且与图像不相关。
在图像复原处理中, 尽管非线性、 时变和空间变化的系统模型更具有普遍性和准确性,更与复杂的退化环境相接近,但它给实际处理工作带来了巨大的困难, 常常找不到解或者很难用计算机来处理。
因此,在图像复原处理中, 往往用线性系统和空间不变系统模型来加以近似。
这种近似的优点使得线性系统中的许多理论可直接用于解决图像复原问题,同时又不失可用性。
f (x , y )g (x , y )2.2匀速直线运动模糊的退化模型在所有的运动模糊中,由匀速直线运动造成图象模糊的复原问题更具有一般性和普遍意义。
因为变速的、非直线运动在某些条件下可以被分解为分段匀速直线运动。
本节只讨论由水平匀速直线运动而产生的运动模糊。
稀疏先验型的大气湍流退化图像盲复原

DOI: 10.12086/oee.2020.190040稀疏先验型的大气湍流退化图像盲复原周海蓉1,2,3,田雨1,2,饶长辉1,2*1中国科学院自适应光学重点实验室,四川成都 610209;2中国科学院光电技术研究所,四川成都 610209;3中国科学院大学,北京 100049摘要:图像盲复原是仅从降质图像就恢复出模糊核和真实锐利图像的方法,由于其病态性,通常需要加入图像先验知识约束解的范围。
针对传统的图像梯度l2和l1范数先验不能真实刻画自然图像梯度分布的特点,本文将图像梯度稀疏先验应用于单帧大气湍流退化图像盲复原中。
先估计模糊核再进行非盲复原,利用分裂Bregman算法求解相应的非凸代价函数。
仿真实验表明,与总变分先验(l1范数)相比,稀疏先验有利于模糊核的估计、产生锐利边缘和去除振铃等,降低了模糊核的估计误差从而提高了复原质量。
最后对真实湍流退化图像进行了复原。
关键词:自适应光学;稀疏先验;盲解卷积;分裂Bregman中图分类号:TP391 文献标志码:A引用格式:周海蓉,田雨,饶长辉. 稀疏先验型的大气湍流退化图像盲复原[J]. 光电工程,2020,47(7): 190040 Blind restoration of atmospheric turbulence degraded images by sparse prior modelZhou Hairong1,2,3, Tian Yu1,2, Rao Changhui1,2*1Key Laboratory of Adaptive Optics, Chinese Academy of Sciences, Chengdu, Sichuan 610209, China;2Institute of Optics and Electronics, Chinese Academy of Sciences, Chengdu, Sichuan 610209, China;3University of Chinese Academy of Sciences, Beijing 100049, ChinaAbstract: Blind image deconvolution is one method of restoring both kernel and real sharp image only from de-graded images, due to its illness, image priors are necessarily applied to constrain the solution. Given the fact that traditional image gradient l2 and l1 norm priors cannot describe the gradient distribution of natural images, in this paper, the image sparse prior is applied to the restoration of single-frame atmospheric turbulence degraded images. Kernel estimation is performed first, followed by non-blind restoration and the split Bregman algorithm is used to solve the non-convex cost function. Simulation results show that compared with total variation priori, sparse priori is better at kernel estimation, producing sharp edges and removal of ringing, etc., which reducing the kernel estimation error and improving restoration quality. Finally, the real turbulence-degraded images are restored.Keywords: adaptive optics; sparse prior; blind deconvolution; split BregmanCitation: Zhou H R, Tian Y, Rao C H. Blind restoration of atmospheric turbulence degraded images by sparse prior model[J]. Opto-Electronic Engineering, 2020, 47(7): 190040——————————————————收稿日期:2019-01-24;收到修改稿日期:2019-03-15基金项目:国家自然科学基金资助项目(11727805,11703029)作者简介:周海蓉(1994-),女,硕士,主要从事自适应光学图像盲复原的研究。
基于生成逆推的大气湍流退化图像复原方法

基于生成逆推的大气湍流退化图像复原方法崔浩然;苗壮;王家宝;余沛毅;王培龙【期刊名称】《计算机应用研究》【年(卷),期】2024(41)1【摘要】大气湍流是影响远距离成像质量的重要因素。
虽然已有的深度学习模型能够较好地抑制大气湍流引起的图像像素几何位移与空间模糊,但是这些模型需要大量的参数和计算量。
为了解决该问题,提出了一种轻量化的基于生成逆推的大气湍流退化图像复原模型,该模型包含了去模糊、去偏移和湍流再生成三个核心模块。
其中,去模糊模块通过高维特征映射块、细节特征抽取块和特征补充块,抑制湍流引起的图像模糊;去偏移模块通过两层卷积,补偿湍流引起的像素位移;湍流再生成模块通过卷积等操作再次生成湍流退化图像。
在去模糊模块中,设计了基于注意力的特征补充模块,该模块融合了通道注意力机制与空间混合注意力机制,能在训练过程中关注图像中的重要细节信息。
在公开的Heat Chamber与自建的Helen两个数据集上,所提模型分别取得了19.94 dB、23.51 dB的峰值信噪比和0.688 2、0.7521的结构相似性。
在达到当前最佳SOTA方法性能的同时,参数量与计算量有所减少。
实验结果表明,该方法对大气湍流退化图像复原有良好的效果。
【总页数】6页(P282-287)【作者】崔浩然;苗壮;王家宝;余沛毅;王培龙【作者单位】陆军工程大学指挥与控制工程学院【正文语种】中文【中图分类】TP391【相关文献】1.基于字典学习的大气湍流退化图像复原技术应用2.基于非负支持域递归逆滤波技术的湍流退化图像复原算法3.基于改进湍流模型和偏振成像技术的水下退化图像复原方法4.基于改进湍流模型和偏振成像技术的水下退化图像复原方法5.基于多尺度生成对抗网络的大气湍流图像复原因版权原因,仅展示原文概要,查看原文内容请购买。
大气湍流模糊图像的高分辨力复原算法

Hi g h r e s o l u t i o n r e s t o r a t i o n a l g o r i t hm o f a t mo s p h e r i c t u r b ul e n c e b l u r r e d i ma g e
李 思 雯, 徐 超, 刘广 荣 , 金 伟其
( 北京理 工大 学 光 电学院 “ 光 电成像技 术 与 系统” 教 育部 重点 实验 室 , 北京 1 0 0 0 8 1 )
摘 要 :大 气湍流是 大气 中的一 种重要 运 动形 式 , 它的存 在使 大气 中的动 量 、 热量、 水 气和 污 染物 的
Ab s t r a c t :At mo s p h e ic r t u r b u l e n c e i s a n i mp o r t a n t f o r m o f mo v e me n t i n t h e a t mo s p h e r e,wh i c h ma k e s t h e v e ti r c a l a n d h o iz r o n t a l S e x c h a n g e i n t e r a c t i o n o f mo me n t u m ,h e a t ,wa t e r v a p o r a n d p o l l u t a n t s s i g n i ic f a n t l y e n h a n c e d ,a n d t h i s i n t e r f e r e n c e h a s a g r e a t i mp a c t o n t h e t a r g e t r e s o l u t i o n o f o p t i c a l i ma g i n g s y s t e m. Th e r e a l s o h a v e ” l u c k y r e g i o n s ” i n t h e d e g r a d e d i ma g e s b e c a u s e o f t u r b u l e n c e ,S O t h e a p p r o p ia r t e a l g o it r h m c a n o bt a i n h i g h r e s o l u t i o n r e s t o r e d i ma g e.To o b t a i n he t a t mo s p h e ic r t u r b u l e n c e b l u r r e d i ma g e s wh i c h c o n t a i n s” l u c k y r e g i o ns ” ,t h e a r t i ic f i a l t u r b u l e n c e wa s u s e d i n t h e l a b o r a t o r y a n d c o mb i n e d wi h t t h e s h o t— r e x p o s u r e t e c h n i q u e t o t a k e a s e ia r l o f a t mo s p h e ic r t u r b u l e n c e b l u re d i ma g e s . Th e r e c t a n g l e o v e r l a p p e d p a r t i t i o n m e t h o d wa s u s e d a n d t h e i ma g e r e s t o r a t i o n a l g o it r h m wa s i mp r o v e d b a s e d o n
湍流图像退化复原

总结
通过上述一些方法的介绍可知,如今利用多帧图 像进行湍流图像复原的各种方法都是利用了图像 序列所包含的数据信息互补这一特点,从而获得 比较清楚的复原图像。虽然多帧图像处理在图像 信息容量和噪声控制方面有很明显的优势,复原 的效果也较好。但是由于这类方法通常需要拍摄 大量的图像,从而使得计算量大大增加,程序整 个运行时间也较长,因此基于序列图像的湍流退 化图像的复原算法,还需我们进一步进行研究, 尤其是在快速实时处理方面,是我们现在急需解 决的问题。
图像配准的方式
图像配准的方式可以概括为相对配准和绝对配准 两种:
①相对配准是指选择多图像中的一张图像作为参 考图像,将其它的相关图像与之配准,其坐标系 统是任意的。
②绝对配准是指先定义一个控制网格,所有的图 像相对于这个网格来进行配准,也就是分别完成 各分量图像的几何校正来实现坐标系的统一。
湍流图像复原的几种方式
传统的图像复原 :传统的图像复原技术都是在退化 模型确定和已知的情况下进行复原的,即先确定 点扩展函数或其参数,然后利用诸如逆滤波和维 纳滤波这样的方法恢复图像。但这些方法对光学 系统的设计和光学器件的加工工艺都提出了更高 的要求,并且不能消除系统像差中由大气湍流引 起的部分,而且湍流流场对目标成像的影响是复 杂多变的,导致湍流光学点扩展函数难以测定, 其形式也是无法事先确定,所以往往单幅图像中 所包含的信息量很少,而且不够全面,很难进行 图像复原 。
湍流图像退化复原
大气湍流
大气中任意一点的运动,其速度的方向和大小都 时刻发生着不规则的变化,从而引起各个气团相 对于大气整体平均运动的不规则运动,这种现象 被称为大气湍流。
如通过望远镜观测到外太空的星星表现出的模糊 降晰,因为地球上的大气退化了图像的质量,大 气湍流随机地干扰,使像元强度分布扩散、峰值降 低、图像模糊、像素位置偏移及抖动,给目标识别 带来了较大的困难。
图像退化与复原实验报告

电子科技大学实验报告学生姓名:李雄风学号:2905301014指导老师:彭真明日期:2012年4月12日光电楼327、329学生机房二、实验项目名称:图像退化与复原三、实验原理:1.图像退化与复原图像复原是图像处理的主要内容之一,所谓图像复原就是指去除或减轻在图像获取过程中发生的图像质量的下降。
成像过程中的图像“退化”,是指由于成像系统各种因素的影响,使得图像质量降低。
图像复原可以看作图像退化的逆过程,是将图像退化的过程加以估计,建立退化的数学模型后,补偿退化过程造成的失真。
图像在形成、传输和记录过程中,由于受到多方面的影响,不可避免地造成图像质量的退化(degradation)。
造成图像退化的原因很多,主要有:•射线辐射、大气湍流等造成的照片畸变;•模拟图像数字化的过程中,由于会损失部分细节,造成质量下降;•镜头聚焦不准产生的散焦模糊;•成像系统中始终存在的噪声干扰;•拍摄时,相机与景物之间的相对运动产生的运动模糊;•底片感光、图像显示时会造成记录显示失真;•成像系统的像差、非线性畸变、有限带宽等造成的图像失真;•携带遥感仪器的飞机或卫星运动的不稳定,以及地球自转等因素引起的照片几何失真。
2.维纳(Wiener)滤波掌握图像f和噪声n的准确先验知识是非常困难的,一种较为合理的假设是将它们近似的看成是平稳随机过程。
假设和表示f和n的自相关矩阵,其定义为:式中,E{•}代表数学期望。
定义,得:假设M=N,和分别为图像信号和噪声的功率谱,则:式中,,。
四、实验目的:1.了解光电图像的退化原因和熟悉退化模型;2.掌握和理解基本的噪声模型及运动模糊退化过程;3.熟悉和掌握几种经典的图像复原方法及其基本原理;4.能熟练利用Matlab工具进行图像的各种退化处理,并能编程实现退化图像的复原。
1.滤波器设计及图像滤波实验;2.基于Wiener滤波的图像复原。
六、实验器材(设备、元器件):微型计算机、Matlab工具及相应的开发环境。
- 1、下载文档前请自行甄别文档内容的完整性,平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益,请联系客服反馈,我们会尽快为您处理(人工客服工作时间:9:00-18:30)。
湍流退化图像复原1、引言由于人类活动和太阳辐照等因素引起了大气温度的变化,这一温度变化又引起了大气密度的随机变化,导致大气折射率发生随机变化,从而产生了对光学系统对目标的成像分辨率和成像质量的重要影响,这种现象后经对其定义指大气中任意一点的运动,其速度的方向和大小都时刻发生着不规则的变化,从而引起各个气团相对于大气整体平均运动的不规则运动,这种现象被称为大气湍流。
大气湍流是造成图像退化的原因之一,大气湍流能够造成图像模糊降晰,它能够退化远距离拍摄的图像质量,如通过望远镜观测到外太空的星星表现出的模糊降晰,因为地球上的大气退化了图像的质量,大气湍流随机地干扰,使像元强度分布扩散、峰值降低、图像模糊、像素位置偏移及抖动,给目标识别带来了较大的困难。
光学器件受到大气湍流的影响主要是当光经过折射率不均匀的大气结构到达接收器件后,其振幅和相位等参数都产生了随机的起伏变化。
传统的图像复原技术都是在退化模型确定和已知的情况下进行复原的,即先确定点扩展函数或其参数,然后利用诸如逆滤波和维纳滤波这样的方法恢复图像。
但这些方法对光学系统的设计和光学器件的加工工艺都提出了更高的要求,并且不能消除系统像差中由大气湍流引起的部分,而且湍流流场对目标成像的影响是复杂多变的,导致湍流光学点扩展函数难以测定,其形式也是无法事先确定,所以往往单幅图像中所包含的信息量很少,而且不够全面,很难进行图像复原。
因此通常大气湍流图像的复原都是在图像序列基础上进行的。
为了消除大气湍流导致的成像抖动和模糊,很多学者进行了广泛深入的研究,如今已有很多针对大气湍流图像的复原算法,其中有不少取得的不错的进展。
2、国内外研究现状及方法湍流退化图像的复原是一个世界性的难题,也是国内外不少科学家们多年来一直想致力解决的问题。
大气湍流退化图像复原的困难之处在于其退化模型是未知的和随机变化的,且很难用数学解析式来描述,另外退化图像还含有噪声,这进一步增加了复原的难度。
传统的图像复原方法主要集中在退化模型已知情况下的图像复原。
退化模型未知情况下的图像复原方法研究室近几年来图像处理技术中极富挑战性的课题,它具有很大的应用前景。
湍流退化图像的复原有很多种方法,一种方法被称为“幸运成像”,由于大气湍流对图像产生的影响是随机的,所以在目标的短曝光图像中,存在一定比例接近衍射极限的好图像,它们只存在低阶像差,幸运成像正是运用这些“好图像”进一步复原图像。
所以幸运成像技术的基本原理是:按照一定标准将拍摄图像中一些接近衍射极限的好图像选取出来,再进行配准叠加,从而复原出更加清晰的图像,提高图像的成像质量,使得原本无法显示的弱目标得以显示,原本无法分辨的细节得以分辨。
由于这种方法的成本比空间望远镜的成本低很多,且复原图像的效果也比较好,所以很多学者都在深入研究如何更好的将这种方法应用天文观测领域。
但是这种方法也存在一定的缺陷,首先由于长曝光图像受到大气湍流的影响较大,很难出现接近衍射极限的好图像,所以“幸运成像”技术只适用于短曝光图像;其次由于在短曝光图像中出现“好图像”的比例也很低,因此这种成像技术要求拍摄大量的短曝光图像(通常为几百幅,甚至上千幅),这样就大大增加了还原算法的计算量。
另外加利福利亚大学电气工程学院实验室针对大气湍流退化图像也提出了图像复原方法。
这种算法是利用多帧图像重建的算法来复原图像序列中的某一幅图像,其基本步骤如下:首先对所拍摄的图像序列进行平均化处理,此时处理过的图像可以看做为一参考图像;然后利用非刚性图像配准技术对所得的图像进行配准,得到图像的变形矩阵Fk;最后利用贝叶斯图像重建算法对图像进行重建,从而得到更加清晰的图像。
这种方法与“幸运成像技术”相比,所需拍摄的图像数较少,而且其应用不仅局限于短曝光图像,它同样可以应用长曝光的图像序列。
美国在大气湍流对图像的退化方面,也进行了许多系统的理论研究,并建立了一系列的数学模型及相应的实验验证系统,同时揭示了一些规律,例如,图像模糊、抖动程度与探测器的成像积分(短曝光)时间有关,积分时间越长,湍流抖动引起的图像模糊越严重等。
美国研制的一些光学分析软件可以对湍流效应引起的像偏移、像模糊进行分析和预测。
同时美国也系统的开展湍流退化图像校正复原理论研究,提出了一些校正复原的新原理、新方法。
如基于LES仿真理论的湍流流场预测与控制技术、盲目迭代去卷积图像复原技术、基于自适应空间可变正则化图像复原技术等。
近些年来,国内也有许多科研机构开始对湍流退化图像的复原进行研究。
华中科技大学图像识别与人工智能研究所提出了一种基于图像统计模型和极大似然估计准则的交替迭代多帧复原算法。
该算法利用多帧湍流退化图像数据信息的互补,将航天图像的Poisson随机场概率模型作为先验知识,序列多帧湍流退化图像被一齐进行极大似然估计,建立了有关多帧图像数据的对数似然函数。
通过极大化该对数似然函数,推导出了目标图像及各帧点扩展函数离散。
经过实验证明,这种算法具有较好的抗噪声能力和稳定性,对湍流退化图像具有很好的恢复效果。
但此算法依然存在多帧图像复原算法普遍存在的缺点,即要求图像的数量较多,当图像数量和迭代次数有限的情况下,是不不可能将目标图像完全地恢复出来,图像帧数越多,恢复的效果越好,但随之而来的计算量和耗时也将增加。
由于湍流点扩展函数是未知的和随机变化的,因此瞬时点扩展函数(退化模型)是难以确定的。
当在湍流退化模型未知的情况下,直接从退化图像中估计目标的强度,必须转而借助盲目去卷积,为此人们提出了盲目去卷积方法。
1968年Oppenheim等人以及1975年Stockham等人发表了具有开创性意义的研究成果。
后来,Lane和Bates论证了用单帧图像进行盲目去卷积是可能的。
1988年GR.Ayers和J.C.Dainty提出了基于单帧的迭代盲目去卷积方法,简称为IBD(Iterative Blind Deconvolution),并将其应用在大气湍流退化图像的复原中,这种方法在以后的研究中被证明是非常有发展前途的,此后的很多算法都是在IBD 算法基础上进行修正和改进的,如ne提出的共轭梯度极小的盲目去卷积技术、ne和w提出的基于最小二乘优化的盲目复原方法、以及Davey等人通过对维纳滤波进行迭代和在目标估计中使用支持域约束条件所进行的改良等。
由上述发展可知,盲目去卷积方法是在未知湍流点扩展函数的情况下,利用一些合理的先验知识,如目标的强度和点扩展函数值都是非负的,支持区域大小以及频率域上某些已知的特性,来估计目标强度,它的关键是关于退化性质和图像的先验知识的应用。
为避免对先验知识的过多依赖和点扩展函数支持域大小的精确限制,D.Kundur和D.Hatzinakos提出了一种基于递归逆滤波的盲目去卷积算法,它不需要知道点扩展函数的支持域大小,利用目标图像的非负性和目标图像支持域。
这种算法具有更好的可靠性、更快的收敛性和更低的计算复杂性,但其对噪声仍然较为敏感。
随后,C.A.Ong和J.A.Chambers对这种算法进行了改进和提高。
近十年间,人们对于盲目去卷积中正则化的理论研究和自适应方法有所进展,一些正则化技术既可以平滑噪声同时又尽可能保留图像细节,是图像复原尽可能恢复出更多的图像细节。
上述一些单帧盲卷积方法不够完善,对噪声十分敏感,不能有过多的噪声,而且有时其解还存在不确定性,所以这类还原算法对于大气湍流退化图像的复原效果不是十分理想。
与单帧图像复原方法相比,显然多帧图像的使用对于确定和控制像抖动,实现稳定复原是有重要作用的,因此越来越多的科学家开始致力于多帧湍流图像复原。
图像建模是用数学的解析式来表达图像的基本属性。
图像模型可作为先验知识或约束于图像复原和图像重建中,这对于图像复原的意义是十分重要的。
对于被复原的原始目标图像而言,采用多个不同的模糊帧是一个强有力的约束条件。
这样可以针对地面目标图像,将其统计模型及其数学模型作为先验知识,使其复原问题变成参数化问题,从而实现稳定的湍流退化图像复原。
国内外有很多的科研机构在研究湍流退化图像的复原工作,且有很多取得了很好的复原效果。
3、湍流退化图像的关键技术通常来说,在不同条件下,如气候、照度、摄影位置和角度等获得的两幅或多幅图像之间会存在一定的差异,它们之间的差异表现在不同的分辨率、不同的灰度属性、不同的位置平移和旋转、不同的比例尺、不同的非线性变形等等。
图像配准的最终目的是消除以上所述两幅或多幅图像之间存在的种种差异,建立图像之间的对应关系,确定其最佳匹配关系,使它们在目标几何形状上匹配一致,为进一步的分析处理做准备。
目前大气湍流退化图像复原主要方法是利用多帧图像进行复原,而多帧图像复原多是利用图像序列所包含的数据信息互补这一特点,因此其最关键的技术就是图像配准技术。
图像配准是解决图像融合、图像镶嵌和变化检测等问题的必要前提,其应用遍及军事、遥感数据分析、医学和计算机视觉等多个领域。
概括的说,图像配准是对取自不同时间、不同传感器或者不同视角的同一场景的两幅或多幅图像进行匹配、叠加的过程,包括像素灰度匹配和空间位置对齐。
3.1 图像配准图像配准就是将不同时间、不同成像设备或不同条件下(天候、照度、摄像位置和角度等)获取的两幅或多幅图像进行匹配、叠加的过程。
首先对两幅图像进行特征提取得到特征点,通过进行相似性度量找到匹配的特征点对;然后通过匹配的特征点对得到图像空间坐标变换参数,最后由坐标变换参数进行图像配准。
而特征提取是配准技术中的关键,准确的特征提取为特征匹配的成功进行提供了保障。
因此,寻求具有良好不变性和准确性的特征提取方法,对于匹配精度至关重要。
这种方法的基本思想是基于对误差的积累进行分析。
所以对于大部分非匹配点来说,只需计算模板中的前几个像素点,而只有匹配点附近的点才需要计算整个模板。
这样平均起来每一点的运算次数将远远小于实测图像的点数,从而达到减少整个匹配过程计算量的目的。
3.2 图像配准的方式图像配准的方式可以概括为相对配准和绝对配准两种:①相对配准是指选择多图像中的一张图像作为参考图像,将其它的相关图像与之配准,其坐标系统是任意的。
②绝对配准是指先定义一个控制网格,所有的图像相对于这个网格来进行配准,也就是分别完成各分量图像的几何校正来实现坐标系的统一。
3.2 图像配准的分类总的来说,可以将图像配准方法大致分为三类:①基于模型的配准方法。
这种方法是根据图像失真的数学模型来对图像进行非线性校准的配准,多用于医学图像。
②基于象素的配准方法。
这类方法根据配准图像的相关函数、Fourier变换等关系式来计算配准参数。
一般来说,基于象素的配准算法把匹配点周围区域的点的灰度都考虑进来计算,故匹配计算量大,速度慢。
③基于特征的配准方法。