Multi-Stage Progressive Image Restoration
1. 论文的研究目标与意义
1.1 研究目标
论文旨在解决图像恢复(Image Restoration) 中空间细节与高层上下文信息的平衡问题。传统单阶段方法难以同时保留局部纹理和全局语义,导致恢复结果存在模糊或伪影。具体任务包括:
- 去雨(Deraining):去除雨滴/雨线
- 去模糊(Deblurring):消除运动模糊
- 去噪(Denoising):抑制传感器噪声
1.2 实际意义
- 移动设备成像:智能手机在弱光、动态场景中易产生退化,影响用户体验。
- 安防与医疗:清晰图像对目标识别(如监控摄像头)和医学诊断(如MRI)至关重要。
- 产业价值:据论文引用,智能手机摄影市场快速增长,高效恢复算法可提升产品竞争力(如华为、苹果的 computational photography 技术)。
以下是对论文创新方法(第2部分)的详细解读,严格采用三级标题体系,结合论文图表、公式及实验数据深入分析:
2. 创新方法:MPRNet 模型
2.1 核心架构:多阶段互补设计
核心思想:通过三阶段渐进式处理平衡上下文信息(Contextual Information)与空间细节(Spatial Details):
- Stage 1–2:采用编码器-解码器(U-Net) 提取多尺度上下文信息(大感受野)。
- Stage 3:引入原始分辨率子网络(ORSNet) 避免下采样,保留像素级细节。
注:粉色虚线表示跨阶段特征融合(CSFF),SAM模块位于阶段间。
优势:
- 互补性:U-Net捕获语义全局信息(如去雨时雨线分布),ORSNet恢复高频纹理(如建筑边缘)。
- 消融实验佐证(表6):
阶段组合 PSNR (dB) U-Net + U-Net 29.40 ORSNet + ORSNet 29.53 U-Net + ORSNet 30.49
2.2 监督注意力模块(SAM)
2.2.1 机制设计
输入:前一阶段特征 F in ∈ R H × W × C F_{\text{in}} \in \mathbb{R}^{H \times W \times C} Fin∈RH×W×C
输出:校准后的特征 F out F_{\text{out}} Fout
流程:
- 生成残差图像: R S = Conv 1 × 1 ( F in ) R_S = \text{Conv}_{1\times1}(F_{\text{in}}) RS=Conv1×1(Fin)
- 恢复图像: X S = I + R S X_S = I + R_S XS=


967

被折叠的 条评论
为什么被折叠?



