【图像处理】均值漂移(mean shift)及深度学习超分辨代码中的mean shift

2024-02-25 06:50

本文主要是介绍【图像处理】均值漂移(mean shift)及深度学习超分辨代码中的mean shift,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

均值漂移(mean shift)

均值漂移是一种聚类算法,常用于特征点聚类、图像分割、对象轮廓检验、目标跟踪等。这里简单直观介绍一下这个算法大概是怎么回事。

基本概念

基本概念可以看下面这个图。左面是一堆像素点特征的分布(其实也不用管他是啥,只要当成一堆点就好了),我们可以看到这堆点有的地方密集,有的地方稀疏。把点的密度分布可视化之后就是右边这个图,大概可以理解为点的密度函数三维可视化。这样就可以看到,会存在几个极值点,也就是红色的点。
好,看到这里你其实就已经理解这个算法的一大半了。
这个算法的操作直观来讲就是,你每拿出一个点来,就把它移动到离它最近的一个极值点。(如图白色点所示,白色点是初始位置,这个点最终应该移动到右上角最高的那个红色点)。
也就是在图中任意一个点,它的类别与密度函数中离它最近的一个极大值点相同。
在这里插入图片描述
做完的结果大概是这样:
在这里插入图片描述

操作过程

讲完基本概念,我们来看如何找到某个点离拿个极大值点最近。操作过程就解释了为什么这个算法叫均值漂移。

  1. 首先找到一个你要聚类的点,如图红色点所示,我们称作sample pixel。
  2. 接着你需要一个window width,也就是你需要一个范围值,这个值就是这个算法很重要的一个参数。找到width范围内的所有点,如图蓝色圈所示。
  3. 接着计算出圈内所有点的均值。均值计算方法可以是直接平均,也可以是加权平均(这个不影响理解)。均值点如图绿色点所示。
  4. 接着将sample pixel移到绿色点,作为新的sample pixel点,
    在这里插入图片描述
  5. 接着以新的点为起始点,重复上述操作,直到sample pixel点和均值点重合或者距离小于某个值,就停止操作,认为这个点归属到了它应该属于的类别。在这里插入图片描述

这是英文版的算法过程,和我讲的意思大概差不多,感兴趣的朋友可以看看。
在这里插入图片描述

均值漂移用于图像分割

对于均值漂移,我们需要给定w,也就是上面讲的蓝色圈圈的范围。
在这里插入图片描述

参考视频

图片来源于这个视频,讲的很不错。感兴趣的朋友可以去看看。https://www.youtube.com/watch?v=PCNz_zttmtA

深度学习超分辨代码中的mean shift

最近在看RCAN的代码,结果点开就懵逼了,里面来了一个meanshift,了解完meanshift感觉它代码干的也不是这事情啊…
RCAN这部分代码大概长这样。

class MeanShift(nn.Conv2d):def __init__(self, rgb_range, rgb_mean, rgb_std, sign=-1):super(MeanShift, self).__init__(3, 3, kernel_size=1)std = torch.Tensor(rgb_std)self.weight.data = torch.eye(3).view(3, 3, 1, 1) # 第一维为输出通道,第二维为输入通道self.weight.data.div_(std.view(3, 1, 1, 1)) # torch.eye(3).view(3, 3, 1, 1) / std.view(3, 1, 1, 1)self.bias.data = sign * rgb_range * torch.Tensor(rgb_mean)self.bias.data.div_(std) # sign * rgb_range * torch.Tensor(rgb_mean) / std# (w*x+b)/stdself.requires_grad = False
# parameter of DIV2K
rgb_mean = (0.4488, 0.4371, 0.4040)
rgb_std = (1.0, 1.0, 1.0)
sub_mean = MeanShift(255, rgb_mean, rgb_std)
add_mean = MeanShift(255, rgb_mean, rgb_std, sign=1)

解释

这个其实是一个图像预处理过程。这个过程是将数据集中的每个样本都减去数据集的均值。(训练集,测试集肯定不能混进来算)

原因: 我们默认自然图像是一类平稳的数据分布(即数据每一维的统计都服从相同分布),在每个样本上减去数据的统计平均值可以凸显出个体差异。

参考博客: https://www.pythonf.cn/read/149532

指导老师

徐放、周鹏程、肖彦洋
对生物医学图像感兴趣的朋友欢迎了解 中国科学院深圳先进技术研究院脑信息中心。
实验室主页: http://icbi.siat.ac.cn/xu-lab/

这篇关于【图像处理】均值漂移(mean shift)及深度学习超分辨代码中的mean shift的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/744695

相关文章

深度解析Java DTO(最新推荐)

《深度解析JavaDTO(最新推荐)》DTO(DataTransferObject)是一种用于在不同层(如Controller层、Service层)之间传输数据的对象设计模式,其核心目的是封装数据,... 目录一、什么是DTO?DTO的核心特点:二、为什么需要DTO?(对比Entity)三、实际应用场景解析

深度解析Java项目中包和包之间的联系

《深度解析Java项目中包和包之间的联系》文章浏览阅读850次,点赞13次,收藏8次。本文详细介绍了Java分层架构中的几个关键包:DTO、Controller、Service和Mapper。_jav... 目录前言一、各大包1.DTO1.1、DTO的核心用途1.2. DTO与实体类(Entity)的区别1

Java中调用数据库存储过程的示例代码

《Java中调用数据库存储过程的示例代码》本文介绍Java通过JDBC调用数据库存储过程的方法,涵盖参数类型、执行步骤及数据库差异,需注意异常处理与资源管理,以优化性能并实现复杂业务逻辑,感兴趣的朋友... 目录一、存储过程概述二、Java调用存储过程的基本javascript步骤三、Java调用存储过程示

Visual Studio 2022 编译C++20代码的图文步骤

《VisualStudio2022编译C++20代码的图文步骤》在VisualStudio中启用C++20import功能,需设置语言标准为ISOC++20,开启扫描源查找模块依赖及实验性标... 默认创建Visual Studio桌面控制台项目代码包含C++20的import方法。右键项目的属性:

深度解析Python装饰器常见用法与进阶技巧

《深度解析Python装饰器常见用法与进阶技巧》Python装饰器(Decorator)是提升代码可读性与复用性的强大工具,本文将深入解析Python装饰器的原理,常见用法,进阶技巧与最佳实践,希望可... 目录装饰器的基本原理函数装饰器的常见用法带参数的装饰器类装饰器与方法装饰器装饰器的嵌套与组合进阶技巧

深度解析Spring Boot拦截器Interceptor与过滤器Filter的区别与实战指南

《深度解析SpringBoot拦截器Interceptor与过滤器Filter的区别与实战指南》本文深度解析SpringBoot中拦截器与过滤器的区别,涵盖执行顺序、依赖关系、异常处理等核心差异,并... 目录Spring Boot拦截器(Interceptor)与过滤器(Filter)深度解析:区别、实现

MySQL数据库的内嵌函数和联合查询实例代码

《MySQL数据库的内嵌函数和联合查询实例代码》联合查询是一种将多个查询结果组合在一起的方法,通常使用UNION、UNIONALL、INTERSECT和EXCEPT关键字,下面:本文主要介绍MyS... 目录一.数据库的内嵌函数1.1聚合函数COUNT([DISTINCT] expr)SUM([DISTIN

深度解析Spring AOP @Aspect 原理、实战与最佳实践教程

《深度解析SpringAOP@Aspect原理、实战与最佳实践教程》文章系统讲解了SpringAOP核心概念、实现方式及原理,涵盖横切关注点分离、代理机制(JDK/CGLIB)、切入点类型、性能... 目录1. @ASPect 核心概念1.1 AOP 编程范式1.2 @Aspect 关键特性2. 完整代码实

Java实现自定义table宽高的示例代码

《Java实现自定义table宽高的示例代码》在桌面应用、管理系统乃至报表工具中,表格(JTable)作为最常用的数据展示组件,不仅承载对数据的增删改查,还需要配合布局与视觉需求,而JavaSwing... 目录一、项目背景详细介绍二、项目需求详细介绍三、相关技术详细介绍四、实现思路详细介绍五、完整实现代码

SpringBoot开发中十大常见陷阱深度解析与避坑指南

《SpringBoot开发中十大常见陷阱深度解析与避坑指南》在SpringBoot的开发过程中,即使是经验丰富的开发者也难免会遇到各种棘手的问题,本文将针对SpringBoot开发中十大常见的“坑... 目录引言一、配置总出错?是不是同时用了.properties和.yml?二、换个位置配置就失效?搞清楚加