半二次图像复原中结构化方程组的预处理方法研究.pdf
《半二次图像复原中结构化方程组的预处理方法研究.pdf》由会员分享,可在线阅读,更多相关《半二次图像复原中结构化方程组的预处理方法研究.pdf(10页珍藏版)》请在咨信网上搜索。
1、Advances in Applied Mathematics 应用数学进展应用数学进展,2024,13(1),159-168 Published Online January 2024 in Hans.https:/www.hanspub.org/journal/aam https:/doi.org/10.12677/aam.2024.131019 文章引用文章引用:孙舒恩,王超杰,刘碧玲,陈婕.半二次图像复原中结构化方程组的预处理方法研究J.应用数学进展,2024,13(1):159-168.DOI:10.12677/aam.2024.131019 半二次图像复原中结构化方程组的预处理方法
2、半二次图像复原中结构化方程组的预处理方法研究研究 孙舒恩孙舒恩,王超杰王超杰*,刘碧玲,陈,刘碧玲,陈 婕婕 北京工商大学数学与统计学院,北京 收稿日期:2023年12月17日;录用日期:2024年1月11日;发布日期:2024年1月17日 摘摘 要要 半二次正则化最小二乘是实现高质量图像复原的重要模型之一半二次正则化最小二乘是实现高质量图像复原的重要模型之一。在利用牛顿迭代方法等优化方法求解该。在利用牛顿迭代方法等优化方法求解该模型的过程中,每一步都涉及模型的过程中,每一步都涉及结构化方程组的求解。预处理共轭梯度法结构化方程组的求解。预处理共轭梯度法(PCG)是求解此类方程组的有效是求解此类
3、方程组的有效方法,而其收敛速度取决于预处理后矩阵的特征值性质。构造合适的预处理矩阵对于提高图像复原的性方法,而其收敛速度取决于预处理后矩阵的特征值性质。构造合适的预处理矩阵对于提高图像复原的性能具有重要的意义。近年来,结合半二次图像复原中方程组的结构化特点,学者们基于矩阵的能具有重要的意义。近年来,结合半二次图像复原中方程组的结构化特点,学者们基于矩阵的Schur补补近似等策略构造出了一系列的预处理矩阵,并给出了相应的特征值分析。数值结果表明,这些预处理方近似等策略构造出了一系列的预处理矩阵,并给出了相应的特征值分析。数值结果表明,这些预处理方法有效地降低了图像复原的计算成本。针对半二次图像复
4、原中的结构化方程组,本文整理了近几年出现法有效地降低了图像复原的计算成本。针对半二次图像复原中的结构化方程组,本文整理了近几年出现的预处理方法,并从不同侧面进行对比分析,旨在为进一步的预处理方法改进和研究提供思路参考。的预处理方法,并从不同侧面进行对比分析,旨在为进一步的预处理方法改进和研究提供思路参考。关键词关键词 图像复原,半二次正则化,结构化方程组,预处理矩阵,图像复原,半二次正则化,结构化方程组,预处理矩阵,Schur补近似补近似 A Review of Preconditioners for Structured Systems Arising from Half-Quadratic
5、 Image Restoration Shuen Sun,Chaojie Wang*,Biling Liu,Jie Chen School of Mathematics and Statistics,Beijing Technology and Business University,Beijing Received:Dec.17th,2023;accepted:Jan.11th,2024;published:Jan.17th,2024 Abstract Half-quadratic regularized least square method is one of the important
6、 models for achieving *通讯作者。孙舒恩 等 DOI:10.12677/aam.2024.131019 160 应用数学进展 high-quality image restoration.In the process of solving this model using optimization methods such as Newton method,each step involves solving a structured system.The Preconditioned Con-jugate Gradient(PCG)method is an effici
7、ent method for solving such systems while its conver-gence rate depends on the nature of the eigenvalues of the preconditioner.Constructing a suitable preconditioner is meaningful to improving the performance of image restoration.In recent years,combined with the structured characteristics of the sy
8、stem in half-quadratic image restoration,scholars have constructed a series of preconditioners based on the Schur complement approxima-tion of the matrices and other strategies,and the corresponding eigenvalue analyses are given.The numerical results show that these preconditioners effectively reduc
9、e the computational cost of image restoration.For the structured system in half-quadratic image restoration,this paper organizes the preconditioners that appeared in recent years and makes a comparative analysis from different sides,aiming to provide ideas reference for further improvement and resea
10、rch of preconditioners.Keywords Image Restoration,Half-Quadratic Regularization,Structured System,Preconditioner,Schur Complement Approximation Copyright 2024 by author(s)and Hans Publishers Inc.This work is licensed under the Creative Commons Attribution International License(CC BY 4.0).http:/creat
11、ivecommons.org/licenses/by/4.0/1.问题背景问题背景 图像复原是对退化图像进行处理以恢复图像原始信息的过程,在生物医学、天文成像等许多工程和科学领域发挥重要作用1 2 3 4。在图像形成过程中,原始图像经常被噪声和模糊污染。因此,为了从退化图像中恢复出理想的图像,需要进行图像复原,常见的方法有:图像去噪、平滑、填补和去模糊等等4 5。近年来,基于最小二乘正则化模型的代数方法逐渐成为实现高质量图像复原的主流方法6 7。1.1.图像复原图像复原 由于引起图像退化的因素与性质各不相同,所以图像复原是一个复杂的数学过程,本质上是一个典型求解不适定的反问题8。对于一个n n
12、的图像 X,其退化可以建模为,bAx=+(1)其中向量2nxR和2nbR分别是由原始图像X与观测图像B按行拉直而成,向量2nR为高斯白噪声,22nnAR为空间不变模糊矩阵。图像复原的主要任务是基于一些先验信息,从观测图像 B 中估计原始图像 X。除了滤波方法以外,通常可以通过求解最小化问题来实现()2min.nx RxJ x=(2)图像复原的效果很大程度上取决于所建立的数学模型。即使对同一幅图像,利用不同数学模型求出的结果可能会有较大的差别。建立好模型后,图像复原就成了数学上反问题的求解。最简单的求解方法就是用最小二乘法,此时的代价函数为()22.J xAxb=(3)这里,b 指的是带有噪音的
13、退化图像,x 指的是将要被复原的图像。上式目的是不让被复原的图像偏Open AccessOpen Access孙舒恩 等 DOI:10.12677/aam.2024.131019 161 应用数学进展 离退化图像太多,但这可能会造成图像的过度拟合。因为没有约束项,模型得到的结果也可能不唯一。因此,最小二乘法是一个不适定的方法,通常需要对其添加具有约束作用的正则化项以优化图像恢复模型。1.2.优化模型优化模型 正则化是缓解反问题不适定性、约束解特征的重要方式。对模型添加惩罚项9 10,得到要求解的最小化问题()()2222argminargmin,nnx Rx RxJ xAxbR x=+(4)其
14、中,22Axb为数据保真项,用于保留原始图像的主要信息,正则项为形式()()T1iriR xg x=,其中2T:nigRR对于1,ir=?是线性算子,G 为Tig的2rn矩阵,我们考虑0/为(连续可微函数)凸保边势函数的情况9 11 12,满足()0t,TA A可逆且()()TTkerker0A AG G=。是平衡这两项的正则化参数。不同的 R 项对应不同的正则化方法。典型的吉洪诺夫(Tikhonov)正则化13 14能缓解反问题的不适定性,但通常会使结果变得光滑,不利于刻画图像边界。稀疏正则化15 16在边界连续性和边缘结构上的刻画更具有优势,因为其 L1 范数能使结果具有稀疏表征的效果,更
15、符合实际画质情况。全变差(TV)正则化17 18则在实现噪声压制的同时,保留图像原本的结构特征,具有恢复原始信号边缘的良好性能,但其高非线性和不可微性给计算带来挑战。而半二次(HQ)正则化9 11 19不止能很好地保留恢复图像中的图像细节,也能有效降低最小化问题的计算成本,其正则项一般有加性和乘性两种形式,本文将着重研究半二次正则化的图像复原模型。1.3.预处理预处理 图像复原中通常使用牛顿方法求解最小化问题,而牛顿法的每一次迭代都需要求解一个方程组。不同正则化模型对应不同特点的结构化方程组。这些方程组的系数矩阵一般是对称正定的,因此通常选择预处理共轭梯度法(PCG)来进行求解20 21。然而
16、,方程组收敛性质取决于特征值分布情况,当系数矩阵的谱分布不够聚集时,Krylov 子空间法的收敛速度会相当慢。为了解决这个问题,需要对线性方程组进行预处理。近几十年来,方程组预处理一直是许多领域活跃的研究课题22 23 24 25。不同的预处理方法取决于方程组的构造和对系数矩阵的近似,对于半二次图像复原中的结构化方程组,学者们通常基于系数矩阵的不完全分解和 Schur 补近似来构造不同的预处理矩阵,并结合到 PCG 法中求解该线性方程组。针对半二次图像复原中出现的结构化方程组,本文介绍了近些年来提出的不同预处理方法,并进行了对比分析和总结。本文具体结构如下:在第 2 部分,介绍了半二次正则化最
17、小二乘的基本模型,并分别给出了其加性形式和乘性形式对应的结构化方程组。在第 3 部分,整理并对比分析了关于这些方程组的预处理方法。最后,本文总结了半二次图像复原中的预处理方法,并为进一步的方法改进和研究提出了建议和参考思路。2.半二次半二次(HQ)正则化模型正则化模型 2.1.模型描述模型描述 最小化问题(4)通常具有很高的计算复杂度。此时,通过给正则化项添加辅助变量的方法,可以将代价函数()J x转化为其增广形式26,以此求解来降低优化问题的计算成本。设辅助变量为rvR,则增广代价函数2:nrJRRR?的形式()()()()()()2T12,iriJ xAxbQ g xii=+?(5)孙舒恩
18、 等 DOI:10.12677/aam.2024.131019 162 应用数学进展 其中().,:QsRR对于任意sR是二次的,()s是函数()t的对偶势函数,:RR满足()()()min,s RtQ t SstR=+(6)当势函数()t给定时,利用凸共轭理论立即可以确定对偶势函数()s,条件(6)保证了()()2min,rnv RJ xJ xxR=?(7)从而将(4)中的最小化问题转化为()()2,min,.nrx Rv Rx vJ x=?(8)对于不同的问题,二次函数 Q 可以取两种形式,分别是加性形式和乘性形式。我们将对两种形式下对应图像复原方程组的预处理矩阵进行研究。2.2.加性形式
19、中的方程组加性形式中的方程组 Q 的加性形式为26,()()21,2Q t ststR sR=(9)此时,使用牛顿法求解(8)中的最小化问题,其迭代形式为,11,kkkkkxxd+=+(10)在每次牛顿迭代中,我们需要求解一个 2 2 块的结构化线性方程组,其中 dk是线性方程组的解,()(),kkkkkH xdJ x=?(11)这里(),kkJ x?的 Hessian 矩阵如下,()()TTT111221222,kkkHHA AG GGH xHHG+=(12)其中()k是一个对角矩阵,其对角元为()0,1,iir=?。2.3.乘性形式中的方程组乘性形式中的方程组 Q 项的乘法形式为9 27,
20、()21,2Q t st s tR sR+=(13)在每次牛顿迭代中,我们需要求解一个 22 块的结构化线性方程组()111211212222,kkkHHdrH xdrHHdr=(14)其中 d 是线性方程组的解。对应(),kkJ x?的 Hessian 矩阵为,()()()()()()TTT1112212222,2kkkkA AGGGGxHHH xGx GHH+=(15)其中()k是对角矩阵,(),kkHH x是对称矩阵,1122,HH是对称正定的,并满足TA A是可逆的且()0t对于tR 成立。孙舒恩 等 DOI:10.12677/aam.2024.131019 163 应用数学进展 3.
21、预处理方法预处理方法 针对半二次图像复原模型的加性形式和乘性形式,本部分关于其中的结构化方程组,分别整理了相应的预处理方法,并从不同侧面进行了对比分析。3.1.加性形式加性形式 3.1.1.预处理形式及性质预处理形式及性质 关于方程组(11),Huang 和 Lu 11提出了两个块预处理矩阵。第一个块预处理矩阵为,1112112122211112,HHMHHH HH=+(16)它具有以下的分解形式,11111121121112200.00IHIHHMH HIHI=(17)理论分析显示了预处理矩阵1M的谱性质。定理定理 1 预处理矩阵11HM至少有2n个单位特征值和2n个单位特征值对应的线性无关
22、的特征向量。11HM其他的特征值分布在1,1,其中()()1max 1kv=+。类似地,第二个块预处理矩阵构建如下,1111222211222122,HH HHHMHH+=(18)具有以下分解形式,11112222122222100.00HIIH HMHHHII=(19)预处理矩阵2M具有以下谱性质。定理定理2 预处理矩阵12HM至少有22n个单位特征值和22n个单位特征值对应的线性无关的特征向量。12HM其他的特征值分布在1,1,其中()()1max 1kv=+。Wang 等28基于 Hessian 矩阵 H 的分解形式,对 H11的 Schur 补 S1的逆矩阵进行近似,构建出第一个预处理
23、矩阵 P1,其逆矩阵形式如下,11111111211121111000.0SHIIHHPH HII=(20)其中()11221221221SHTH=,1112212221111222TH H HH H=,因 H 为对称正定的,显然 S1为对称正定矩阵。而近似Schur 补的逆通过取其泰勒展开式的线性部分近似111111222221111222SHHH HH H=+。预处理矩阵 P1具有以下谱性质。定理定理 3 预处理矩阵11HP至少有2n个单位特征值和2n个单位特征值对应的线性无关的特征向量。11HP其他的特征值分布在211,,其中()()1max 1kv=+。类似地,对 H22的 Schur
24、 补 S2的逆矩阵进行近似,得到第二个预处理矩阵 P2其逆矩阵形式如下,1111222221122212200.00IIH HPHHIIHS=(21)孙舒恩 等 DOI:10.12677/aam.2024.131019 164 应用数学进展 其中()11222112111SHTH=,1112221112222111TH H HH H=,因 H 为对称正定的,显然 S2为对称正定矩阵。而近似Schur 补的逆通过取其泰勒展开式的线性部分实现111112111112222111HHHSHH H=+。预处理矩阵 P2具有以下谱性质。定理定理 4 预处理矩阵12HP至少有22n个单位特征值和22n个单
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 二次 图像 复原 结构 方程组 预处理 方法 研究
1、咨信平台为文档C2C交易模式,即用户上传的文档直接被用户下载,收益归上传人(含作者)所有;本站仅是提供信息存储空间和展示预览,仅对用户上传内容的表现方式做保护处理,对上载内容不做任何修改或编辑。所展示的作品文档包括内容和图片全部来源于网络用户和作者上传投稿,我们不确定上传用户享有完全著作权,根据《信息网络传播权保护条例》,如果侵犯了您的版权、权益或隐私,请联系我们,核实后会尽快下架及时删除,并可随时和客服了解处理情况,尊重保护知识产权我们共同努力。
2、文档的总页数、文档格式和文档大小以系统显示为准(内容中显示的页数不一定正确),网站客服只以系统显示的页数、文件格式、文档大小作为仲裁依据,个别因单元格分列造成显示页码不一将协商解决,平台无法对文档的真实性、完整性、权威性、准确性、专业性及其观点立场做任何保证或承诺,下载前须认真查看,确认无误后再购买,务必慎重购买;若有违法违纪将进行移交司法处理,若涉侵权平台将进行基本处罚并下架。
3、本站所有内容均由用户上传,付费前请自行鉴别,如您付费,意味着您已接受本站规则且自行承担风险,本站不进行额外附加服务,虚拟产品一经售出概不退款(未进行购买下载可退充值款),文档一经付费(服务费)、不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
4、如你看到网页展示的文档有www.zixin.com.cn水印,是因预览和防盗链等技术需要对页面进行转换压缩成图而已,我们并不对上传的文档进行任何编辑或修改,文档下载后都不会有水印标识(原文档上传前个别存留的除外),下载后原文更清晰;试题试卷类文档,如果标题没有明确说明有答案则都视为没有答案,请知晓;PPT和DOC文档可被视为“模板”,允许上传人保留章节、目录结构的情况下删减部份的内容;PDF文档不管是原文档转换或图片扫描而得,本站不作要求视为允许,下载前自行私信或留言给上传者【自信****多点】。
5、本文档所展示的图片、画像、字体、音乐的版权可能需版权方额外授权,请谨慎使用;网站提供的党政主题相关内容(国旗、国徽、党徽--等)目的在于配合国家政策宣传,仅限个人学习分享使用,禁止用于任何广告和商用目的。
6、文档遇到问题,请及时私信或留言给本站上传会员【自信****多点】,需本站解决可联系【 微信客服】、【 QQ客服】,若有其他问题请点击或扫码反馈【 服务填表】;文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“【 版权申诉】”(推荐),意见反馈和侵权处理邮箱:1219186828@qq.com;也可以拔打客服电话:4008-655-100;投诉/维权电话:4009-655-100。