【阅读笔记】《RefineNet: Multi-Path Refinement Networks for High-Resolution Semantic Segmentation》

本文主要是介绍【阅读笔记】《RefineNet: Multi-Path Refinement Networks for High-Resolution Semantic Segmentation》，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

本文记录了博主阅读论文《RefineNet: Multi-Path Refinement Networks for High-Resolution Semantic Segmentation》的笔记，代码，更新于2019.05.21。

文章目录

Abstract
Introduction
- Related Work
Background
Proposed Method
- Multi-Path Refinement
- RefineNet
- Identity Mappings in RefineNet
Experiments
- Object Parsing
- Semantic Segmentation
- Variants of cascaded RefineNet
Conclusion

Abstract

最近，深度卷积神经网络（CNNs）在诸如语义分割等目标分类问题上展现出了非凡的能力。但是，重复的下采样（如池化或带步长的卷积）操作却使得深度卷积神经网络在原始图像分辨率上产生了严重的损失。这篇文章中提出了RefineNet，一个生成性（generic）多通道恢复网络，主要探索了在下采样过程中可得到的所有信息，从而通过long-range残差连接恢复高分辨率估计。这样一来，获取高层语义特征的更深的层也可以直接通过从前层得到的fine-grained特征得到恢复。

Introduction

在这里插入图片描述

Related Work

Background

Proposed Method

本文提出了一种用多通道连接不同分辨率下的信息并通过潜在长程联系用生成模型吸收的网络——RefineNet。下图是一种用于语义分割的可能的网络结构。
在这里插入图片描述

Multi-Path Refinement

如前文所述，本文旨在探索一种多层特征用于带长程残差连接的高分辨率估计。RefineNet提供一种生成式的方法融合原始高层语义特征和更精细化的低层特征，从而生成更高分辨率的语义特征图。

在本文标准多通道网络结构中，作者将预训练的ResNet（以ImageNet初始化）按照分辨率分成了4个模块，随后级联了4个RefineNet单元，每个都直接和ResNet模块的输出连在一起。

用RefineNet-m表示连接在ResNet第m个模块上的RefineNet模块。在具体应用中，每个ResNet的输出都通过了一个卷积层来适应维度。

RefineNet

下图是RefineNet模块。模块可以通过调整适应任意特征图个数、分辨率和网络深度。
在这里插入图片描述
Residual convolution unit
这一部分首先用来调整预训练的ResNet的权重来适应当前任务。每条通路经过两层级联的残差卷积单元（RCU，Residual convolution units）。该单元是原始ResNet中的卷几单元的简化版本，移除了batch-normalization层。