【干货】The Fast Bilateral Solver 双边算子原理

2023-10-22 03:50

本文主要是介绍【干货】The Fast Bilateral Solver 双边算子原理,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

The Fast Bilateral Solver 双边算子原理

双边算子原理来自Google Research Jon Barron的ECCV2016论文The Fast Bilateral Solver,该论文获得了ECCV 2016年度最佳论文亚军,非常不错论文。

双边算子假设图像平滑区域必然在内部密切相关,并且认为在计算这些区域中的某些视觉任务时必须存在一致性或逐渐变化。

上述假设用于改善各种视觉任务,例如平滑区域中通常一致的颜色(可用于改善图像着色)和渐进深度变化(可用于提高深度超分辨率,立体声)视力)。

通常来自同一个对象(可用于改进语义分割),运动一致(可用于改善光流计算)等。

由于它可以极大地改善各种视觉任务,而且速度超快,比同类算法的计算速度快10到1000倍,并且很快引起了业界和学术界的关注。它在短短半年内被引用了21次。

在谷歌发布的全景相机Jump中,光学算子用于计算光流,用于细化瓦片光流上采样的结果,大大提高了光流计算结果。

让我们看看它的主要架构思想:

如上所述,a是已经计算的感兴趣的量(图例是计算出的图像深度,例如kinect的输出,或其他任务的结果,例如光流,语义分割标签等),c是 它的置信度图,大小相同,

c中的元素越接近1,a中相应元素的正确概率就越高。

d是原始图像的RGB像素图,从中我们可以看到有多个具有相似颜色的平坦区域。以上三个数字是输入图,b是双边算子最终计算的结果。

双边算子可以表示为上述公式(1)的优化问题,x是变量,c是置信度图,t是上图a,i,j是x的像素下标,最终结果 x是上面的b图。上述公式的前半部分是双边平滑术语。

控制优化的结果保证是双边平滑的,后半部分是保真度项。控制优化的结果不能偏离a太远,Wij表示像素i,j的相似性,并且较大的ci表示原始a中的像素。保留。

这是一个最小化问题,这意味着改变x的大小以最小化下面的公式的结果,双边和x类似于a。

双边平滑期中Wij的计算如下:

Px,py是坐标,pl,pu和pv分别表示转换成YUV的图像像素的三个分量。上述公式表示在计算图像像素之间的相似度的平滑程度时联合确定位置和YUV分量。

双边运营商被广泛使用。上述框架在不同问题上是相同的,除了特定问题中的图的计算方法不同于与其相关的置信图c的计算方法。

让我们看看双边运营商的巨大魔力。

下图a是通过使用MC-CNN技术获得的深度估计图。深度用颜色表示,相似的颜色代表相似的深度。在下图中,图片是原始结果,可以清楚地看到一些不自然的斑块。

采用三个小变焦变焦,很明显是深度估计误差。

下面的图b显示了双边运营商处理的结果图。可以看出,算法会自动删除大多数明显的缺陷。

在Jump系统的基于瓦片的光流的计算中,粗粒度光流被输入到双边算子中,并且双边算子在时间维度上被扩展以确保相同的时域并输出最终的光流.

论文和源码地址:关注微信公众号:“图像算法”或者微信搜索imalg_cn 可获取

这篇关于【干货】The Fast Bilateral Solver 双边算子原理的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/258899

相关文章

从原理到实战深入理解Java 断言assert

《从原理到实战深入理解Java断言assert》本文深入解析Java断言机制,涵盖语法、工作原理、启用方式及与异常的区别,推荐用于开发阶段的条件检查与状态验证,并强调生产环境应使用参数验证工具类替代... 目录深入理解 Java 断言(assert):从原理到实战引言:为什么需要断言?一、断言基础1.1 语

MySQL中的表连接原理分析

《MySQL中的表连接原理分析》:本文主要介绍MySQL中的表连接原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、环境3、表连接原理【1】驱动表和被驱动表【2】内连接【3】外连接【4编程】嵌套循环连接【5】join buffer4、总结1、背景

深度解析Spring AOP @Aspect 原理、实战与最佳实践教程

《深度解析SpringAOP@Aspect原理、实战与最佳实践教程》文章系统讲解了SpringAOP核心概念、实现方式及原理,涵盖横切关注点分离、代理机制(JDK/CGLIB)、切入点类型、性能... 目录1. @ASPect 核心概念1.1 AOP 编程范式1.2 @Aspect 关键特性2. 完整代码实

Java Stream的distinct去重原理分析

《JavaStream的distinct去重原理分析》Javastream中的distinct方法用于去除流中的重复元素,它返回一个包含过滤后唯一元素的新流,该方法会根据元素的hashcode和eq... 目录一、distinct 的基础用法与核心特性二、distinct 的底层实现原理1. 顺序流中的去重

Spring @Scheduled注解及工作原理

《Spring@Scheduled注解及工作原理》Spring的@Scheduled注解用于标记定时任务,无需额外库,需配置@EnableScheduling,设置fixedRate、fixedDe... 目录1.@Scheduled注解定义2.配置 @Scheduled2.1 开启定时任务支持2.2 创建

Spring Boot 实现 IP 限流的原理、实践与利弊解析

《SpringBoot实现IP限流的原理、实践与利弊解析》在SpringBoot中实现IP限流是一种简单而有效的方式来保障系统的稳定性和可用性,本文给大家介绍SpringBoot实现IP限... 目录一、引言二、IP 限流原理2.1 令牌桶算法2.2 漏桶算法三、使用场景3.1 防止恶意攻击3.2 控制资源

Python中使用uv创建环境及原理举例详解

《Python中使用uv创建环境及原理举例详解》uv是Astral团队开发的高性能Python工具,整合包管理、虚拟环境、Python版本控制等功能,:本文主要介绍Python中使用uv创建环境及... 目录一、uv工具简介核心特点:二、安装uv1. 通过pip安装2. 通过脚本安装验证安装:配置镜像源(可

Mysql的主从同步/复制的原理分析

《Mysql的主从同步/复制的原理分析》:本文主要介绍Mysql的主从同步/复制的原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录为什么要主从同步?mysql主从同步架构有哪些?Mysql主从复制的原理/整体流程级联复制架构为什么好?Mysql主从复制注意

Nacos注册中心和配置中心的底层原理全面解读

《Nacos注册中心和配置中心的底层原理全面解读》:本文主要介绍Nacos注册中心和配置中心的底层原理的全面解读,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录临时实例和永久实例为什么 Nacos 要将服务实例分为临时实例和永久实例?1.x 版本和2.x版本的区别

apache的commons-pool2原理与使用实践记录

《apache的commons-pool2原理与使用实践记录》ApacheCommonsPool2是一个高效的对象池化框架,通过复用昂贵资源(如数据库连接、线程、网络连接)优化系统性能,这篇文章主... 目录一、核心原理与组件二、使用步骤详解(以数据库连接池为例)三、高级配置与优化四、典型应用场景五、注意事