即插即用型ADMM应用于图像超分

2024-01-24 21:48

本文主要是介绍即插即用型ADMM应用于图像超分,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Plug-and-Play优化公式

x ^ = arg min ⁡ x f ( x ) + λ g ( x ) \hat{x}=\argmin_{x} f(x)+\lambda g(x) x^=xargminf(x)+λg(x) (1)

首先这是一个最大后验的问题,我们可以用ADMM方法转化为下面的算式:

{ x ( k + 1 ) = arg min ⁡ x f ( x ) + ρ 2 ∣ ∣ x − v ( k ) + u ( k ) ∣ ∣ 2 v ( k + 1 ) = D σ k ( x ( k + 1 ) + u ( k ) ) u ( k + 1 ) = u ( k ) + ( x ( k + 1 ) − v ( k + 1 ) ) \begin{cases} x^{(k+1)} = \argmin_{x}f(x)+\frac{\rho}{2}||x-v^{(k)}+u^{(k)}||^2\\ v^{(k+1)}=D_{\sigma_{k}}(x^{(k+1)}+u^{(k)})\\ u^{(k+1)}=u^{(k)}+(x^{(k+1)}-v^{(k+1)})\end{cases} x(k+1)=xargminf(x)+2ρxv(k)+u(k)2v(k+1)=Dσk(x(k+1)+u(k))u(k+1)=u(k)+(x(k+1)v(k+1)) (2)

在超分问题的应用

在超分辨率问题中,函数 f ( x ) f(x) f(x)拥有二次项的形式:

f ( x ) = ∣ ∣ S H x − y ∣ ∣ 2 f(x)=||SHx-y||^2 f(x)=SHxy2(3)

这里 H ∈ R n × n H\in R^{n\times n} HRn×n是一个循环矩阵,用于对抗混叠滤波器进行卷积。

循环矩阵有一个重要的性质:可以被离散傅里叶变换矩阵对角化

公式为: X = c ( x ) = F ⋅ d i a g ( F ( x ) ) ⋅ F H X=c(x)=F\cdot diag(\mathscr{F}(x))\cdot F^H X=c(x)=Fdiag(F(x))FH,其中 F ( ⋅ ) \mathscr{F}(\cdot) F()表示离散傅里叶变换, F F F表示DFT矩阵。 F F H = F H F = I FF^H=F^HF=I FFH=FHF=I,这是一个酉矩阵。之所以把它叫做DFT矩阵是因为一个信号的DFT变换可以由和这个矩阵相乘得到。 x x x表示构成循环矩阵的向量 x = [ x 0 x 1 x 2 ] x=\begin{bmatrix}x_0&x_1&x_2\end{bmatrix} x=[x0x1x2]

下面为循环矩阵的例子:

X = c ( x ) = [ x 0 x 1 x 2 x 2 x 0 x 1 x 1 x 2 x 0 ] X=c(x)=\begin{bmatrix}x_0 & x_1&x_2\\x_2&x_0&x_1\\x_1&x_2&x_0\end{bmatrix} X=c(x)=x0x2x1x1x0x2x2x1x0

而均值滤波的高斯模糊滤波器的形式是: X = 1 9 [ 1 1 1 1 1 1 1 1 1 ] X=\frac{1}{9}\begin{bmatrix}1&1&1\\1&1&1\\1&1&1\end{bmatrix} X=91111111111显然这是一个循环矩阵(还有一种在降采样中常用的高斯模糊核,因为它不是循环矩阵所以不能用我们这种方法)。

继续超分问题的分析

H是一个循环矩阵,S是一个降采样矩阵,我们定义 G : = S H G:=SH G:=SH。带入(2)式,我们得到下面的优化方程:
x ^ = arg min ⁡ x ∈ R n ∣ ∣ G x − y ∣ ∣ 2 + ρ 2 ∣ ∣ x − x ~ ∣ ∣ 2 \hat{x}=\argmin_{x\in R^n}||Gx-y||^2+\frac{\rho}{2}||x-\widetilde{x}||^2 x^=xRnargminGxy2+2ρxx 2.(4)
这个方程有闭式解:
x ^ = ( G T G + ρ I ) − 1 ( G T y + ρ x ~ ) \hat{x}=(G^TG+\rho I)^{-1}(G^Ty+\rho \widetilde{x}) x^=(GTG+ρI)1(GTy+ρx ).(5)
但是这个闭式解含有伪逆运算,所以运算速度比较慢。

  1. G = S H G=SH G=SH时,由于 H T S T S H H^TS^TSH HTSTSH既不是对角矩阵也不可以通过傅里叶变换对角化,所以它的解是非平凡的解。我们可以使用多变量分割的方法或者直接通过共轭梯度法对方程求解,但是多变量分割的方法需要拉格朗日乘子和内部变量,所以运算速度也很慢。
  2. S S S是标准的K倍降采样算符,H是循环卷积时我们有机会得到闭式解。下面展示如何使用傅里叶变换的方式加快运算。

通过傅里叶变换求闭式解

首先我们需要使用Woodbury Matrix Identity and Sherman-Morrison Formula(伍德伯里恒等式)来改写(5)式为:
x ^ = ρ − 1 b − ρ − 1 G T ( ρ I + G G T ) − 1 G b \hat{x}=\rho^{-1}b-\rho^{-1}G^T(\rho I+GG^T)^{-1}Gb x^=ρ1bρ1GT(ρI+GGT)1Gb,(6)
这里 b : = G T y + ρ x ~ b:=G^Ty+\rho \tilde{x} b:=GTy+ρx~.
更加关键的步骤在于下面的发现:
G G T = S H H T S T GG^T=SHH^TS^T GGT=SHHTST.
因为 S S S是一个K倍降采样算符,那么 S T S^T ST就是一个K倍升采样算符。定义 H ~ = H H T \tilde{H}=HH^T H~=HHT,这可以解释为在模糊核h和它的时间反演之间的卷积。那么 S T H ~ S S^T\tilde{H}S STH~S就是一种升采样-滤波器-降采样结构,如下图:
在这里插入图片描述
接下来使用数字信号处理中的多项分解及Z变换的技术,实现傅里叶变换形式的闭式解如下:
x = ρ − 1 b − ρ − 1 G T ( F − 1 { F ( G b ) ∣ F ( h 0 ~ ) ∣ 2 + ρ } ) x=\rho^{-1}b-\rho^{-1}G^T(\mathscr{F}^{-1} \lbrace \frac{\mathscr{F}(Gb)}{|\mathscr{F}(\tilde{h_0})|^2+\rho}\rbrace) x=ρ1bρ1GT(F1{F(h0~)2+ρF(Gb)}).(7)
其中 b = G T y + ρ x ~ b=G^Ty+\rho\tilde{x} b=GTy+ρx~

参考文献

[1]:Plug-and-Play ADMM for Image Restoration:Fixed Point Convergence and Applications

这篇关于即插即用型ADMM应用于图像超分的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/641115

相关文章

中文分词jieba库的使用与实景应用(一)

知识星球:https://articles.zsxq.com/id_fxvgc803qmr2.html 目录 一.定义: 精确模式(默认模式): 全模式: 搜索引擎模式: paddle 模式(基于深度学习的分词模式): 二 自定义词典 三.文本解析   调整词出现的频率 四. 关键词提取 A. 基于TF-IDF算法的关键词提取 B. 基于TextRank算法的关键词提取

基于人工智能的图像分类系统

目录 引言项目背景环境准备 硬件要求软件安装与配置系统设计 系统架构关键技术代码示例 数据预处理模型训练模型预测应用场景结论 1. 引言 图像分类是计算机视觉中的一个重要任务,目标是自动识别图像中的对象类别。通过卷积神经网络(CNN)等深度学习技术,我们可以构建高效的图像分类系统,广泛应用于自动驾驶、医疗影像诊断、监控分析等领域。本文将介绍如何构建一个基于人工智能的图像分类系统,包括环境

水位雨量在线监测系统概述及应用介绍

在当今社会,随着科技的飞速发展,各种智能监测系统已成为保障公共安全、促进资源管理和环境保护的重要工具。其中,水位雨量在线监测系统作为自然灾害预警、水资源管理及水利工程运行的关键技术,其重要性不言而喻。 一、水位雨量在线监测系统的基本原理 水位雨量在线监测系统主要由数据采集单元、数据传输网络、数据处理中心及用户终端四大部分构成,形成了一个完整的闭环系统。 数据采集单元:这是系统的“眼睛”,

csu 1446 Problem J Modified LCS (扩展欧几里得算法的简单应用)

这是一道扩展欧几里得算法的简单应用题,这题是在湖南多校训练赛中队友ac的一道题,在比赛之后请教了队友,然后自己把它a掉 这也是自己独自做扩展欧几里得算法的题目 题意:把题意转变下就变成了:求d1*x - d2*y = f2 - f1的解,很明显用exgcd来解 下面介绍一下exgcd的一些知识点:求ax + by = c的解 一、首先求ax + by = gcd(a,b)的解 这个

hdu1394(线段树点更新的应用)

题意:求一个序列经过一定的操作得到的序列的最小逆序数 这题会用到逆序数的一个性质,在0到n-1这些数字组成的乱序排列,将第一个数字A移到最后一位,得到的逆序数为res-a+(n-a-1) 知道上面的知识点后,可以用暴力来解 代码如下: #include<iostream>#include<algorithm>#include<cstring>#include<stack>#in

zoj3820(树的直径的应用)

题意:在一颗树上找两个点,使得所有点到选择与其更近的一个点的距离的最大值最小。 思路:如果是选择一个点的话,那么点就是直径的中点。现在考虑两个点的情况,先求树的直径,再把直径最中间的边去掉,再求剩下的两个子树中直径的中点。 代码如下: #include <stdio.h>#include <string.h>#include <algorithm>#include <map>#

【区块链 + 人才服务】可信教育区块链治理系统 | FISCO BCOS应用案例

伴随着区块链技术的不断完善,其在教育信息化中的应用也在持续发展。利用区块链数据共识、不可篡改的特性, 将与教育相关的数据要素在区块链上进行存证确权,在确保数据可信的前提下,促进教育的公平、透明、开放,为教育教学质量提升赋能,实现教育数据的安全共享、高等教育体系的智慧治理。 可信教育区块链治理系统的顶层治理架构由教育部、高校、企业、学生等多方角色共同参与建设、维护,支撑教育资源共享、教学质量评估、

AI行业应用(不定期更新)

ChatPDF 可以让你上传一个 PDF 文件,然后针对这个 PDF 进行小结和提问。你可以把各种各样你要研究的分析报告交给它,快速获取到想要知道的信息。https://www.chatpdf.com/

【区块链 + 人才服务】区块链集成开发平台 | FISCO BCOS应用案例

随着区块链技术的快速发展,越来越多的企业开始将其应用于实际业务中。然而,区块链技术的专业性使得其集成开发成为一项挑战。针对此,广东中创智慧科技有限公司基于国产开源联盟链 FISCO BCOS 推出了区块链集成开发平台。该平台基于区块链技术,提供一套全面的区块链开发工具和开发环境,支持开发者快速开发和部署区块链应用。此外,该平台还可以提供一套全面的区块链开发教程和文档,帮助开发者快速上手区块链开发。

【C++高阶】C++类型转换全攻略:深入理解并高效应用

📝个人主页🌹:Eternity._ ⏩收录专栏⏪:C++ “ 登神长阶 ” 🤡往期回顾🤡:C++ 智能指针 🌹🌹期待您的关注 🌹🌹 ❀C++的类型转换 📒1. C语言中的类型转换📚2. C++强制类型转换⛰️static_cast🌞reinterpret_cast⭐const_cast🍁dynamic_cast 📜3. C++强制类型转换的原因📝