对FCN U-Net ,SegNet的介绍

2024-05-15 00:48
文章标签 介绍 net fcn segnet

本文主要是介绍对FCN U-Net ,SegNet的介绍,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

https://blog.csdn.net/qq_34606546/article/details/89434487

语义分割—对FCN、U-Net、SegNet的一点理解

最近在看语义分割的论文,有很多高级的方法,今天再回味了一下语义分割元老级的一些方法,在这里只写大概的理解,详细内容还是建议看论文
FCN

FCN是元老,提出了全卷积网络,将原本网络顶层的全连接结构用卷积结构代替。这样就将原本输出的一维向量改为二维特征图的形式,保存了二维信息。实现语义分割还需将特征图上采样到与原图对应的size,这里问题就出现了。

FCN-8s:为了解决FCN直接上采样的问题,FCN-32s、-16s、-8s采用反卷积的方法,一步步对特征图进行上采样,并且借鉴特征提取部分相应尺度的特征图(这里的借鉴操作为:特征图copy过来、与刚刚进行过deconv的特征图进行对应像素add)
在这里插入图片描述
FCN-32s:deconv(featureMap16_16, stride=32) --> output: 512_512
在这里插入图片描述
FCN-16s:temp = add(deconv(featureMap16_16, stride=2),pool4)
deconv(16s:temp, stride=16) --> output: 512_512在这里插入图片描述
FCN-8s:
temp1 = add(deconv(featureMap16_16, stride=2),pool4)
temp2=add(deconv(temp1, stride=2), pool3)
deconv(temp, stride=8) --> output: 512_512在这里插入图片描述

通过add的方法借鉴了之前特征提取的信息,来给上采样提供更多的辅助信息,8s较32s效果提升很多,但是依然比较模糊,对图像的细节不敏感。
U-Net

U-Net采用图像patches进行训练,部分解决了标注数据不足的问题,
其实容易引起过拟合的,这里不多说了,与FCN的不同在于,同样的目的:给decode上采样更多信息,使其更加锐化,恢复图像细节),这里依然借鉴网络前端特征提取时保存的信息,不同于FCN,U-Net的借鉴方法为(特征concat)
在这里插入图片描述
将前层对应尺度特征图与deconv后的相同size特征图进行concat,在通过卷积组合特征,送人下一个deconv层。
所以与FCN其实差不多的,这里的主要区别是借鉴方式
SegNet

在这里插入图片描述
这位语义分割的小元老依然致力于解决上采样中回复信息不足的问题,不同于FCN、U-Net,这里借鉴方式为(pooling indices)
因为在pooling时丢失了位置信息,这里在上采样时借鉴之前保存的pooling indices恢复特征值(max values在max pooling)的位置信息。如下图:左边是pooling indices的方法
在这里插入图片描述
这种基于pooling indices的上采样方法更加锐化了边缘,同时存储空间的需求大大减小了,这里借鉴东西是需要内存滴呀(之前FCN要保留特征图,SegNet只保存indices就可以了)

总结:
语义分割主要解决的问题是在前端backbone提取丰富的特征信息的基础上如何恢复原图相应的细节信息,来给每个像素分类。通过FCN、U-net、SegNet的深入理解,也能够帮助我们掌握add、 concat的区别,更重要的是,对于一个问题的解决,我们能够看到解决问题思路的过程(各种解决方案),并且引发我们的思考。
https://blog.csdn.net/qq_34606546/article/details/89434487

 

这篇关于对FCN U-Net ,SegNet的介绍的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/990333

相关文章

zookeeper端口说明及介绍

《zookeeper端口说明及介绍》:本文主要介绍zookeeper端口说明,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、zookeeper有三个端口(可以修改)aVNMqvZ二、3个端口的作用三、部署时注意总China编程结一、zookeeper有三个端口(可以

Python中win32包的安装及常见用途介绍

《Python中win32包的安装及常见用途介绍》在Windows环境下,PythonWin32模块通常随Python安装包一起安装,:本文主要介绍Python中win32包的安装及常见用途的相关... 目录前言主要组件安装方法常见用途1. 操作Windows注册表2. 操作Windows服务3. 窗口操作

c++中的set容器介绍及操作大全

《c++中的set容器介绍及操作大全》:本文主要介绍c++中的set容器介绍及操作大全,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录​​一、核心特性​​️ ​​二、基本操作​​​​1. 初始化与赋值​​​​2. 增删查操作​​​​3. 遍历方

解决未解析的依赖项:‘net.sf.json-lib:json-lib:jar:2.4‘问题

《解决未解析的依赖项:‘net.sf.json-lib:json-lib:jar:2.4‘问题》:本文主要介绍解决未解析的依赖项:‘net.sf.json-lib:json-lib:jar:2.4... 目录未解析的依赖项:‘net.sf.json-lib:json-lib:jar:2.4‘打开pom.XM

HTML img标签和超链接标签详细介绍

《HTMLimg标签和超链接标签详细介绍》:本文主要介绍了HTML中img标签的使用,包括src属性(指定图片路径)、相对/绝对路径区别、alt替代文本、title提示、宽高控制及边框设置等,详细内容请阅读本文,希望能对你有所帮助... 目录img 标签src 属性alt 属性title 属性width/h

javax.net.ssl.SSLHandshakeException:异常原因及解决方案

《javax.net.ssl.SSLHandshakeException:异常原因及解决方案》javax.net.ssl.SSLHandshakeException是一个SSL握手异常,通常在建立SS... 目录报错原因在程序中绕过服务器的安全验证注意点最后多说一句报错原因一般出现这种问题是因为目标服务器

MybatisPlus service接口功能介绍

《MybatisPlusservice接口功能介绍》:本文主要介绍MybatisPlusservice接口功能介绍,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友... 目录Service接口基本用法进阶用法总结:Lambda方法Service接口基本用法MyBATisP

MySQL复杂SQL之多表联查/子查询详细介绍(最新整理)

《MySQL复杂SQL之多表联查/子查询详细介绍(最新整理)》掌握多表联查(INNERJOIN,LEFTJOIN,RIGHTJOIN,FULLJOIN)和子查询(标量、列、行、表子查询、相关/非相关、... 目录第一部分:多表联查 (JOIN Operations)1. 连接的类型 (JOIN Types)

java中BigDecimal里面的subtract函数介绍及实现方法

《java中BigDecimal里面的subtract函数介绍及实现方法》在Java中实现减法操作需要根据数据类型选择不同方法,主要分为数值型减法和字符串减法两种场景,本文给大家介绍java中BigD... 目录Java中BigDecimal里面的subtract函数的意思?一、数值型减法(高精度计算)1.

Pytorch介绍与安装过程

《Pytorch介绍与安装过程》PyTorch因其直观的设计、卓越的灵活性以及强大的动态计算图功能,迅速在学术界和工业界获得了广泛认可,成为当前深度学习研究和开发的主流工具之一,本文给大家介绍Pyto... 目录1、Pytorch介绍1.1、核心理念1.2、核心组件与功能1.3、适用场景与优势总结1.4、优