【光流】——liteflownet2论文与代码浅析

2024-06-13 08:08

本文主要是介绍【光流】——liteflownet2论文与代码浅析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

光流,liteflownet
code from:mmflow

在这里插入图片描述
上图就是光流中的核心三大件:

  • feature warp
  • corse to fine infer
  • flow regularization

1. 训练细节

主要的深度学习网络都是所有模块一起训练的,光流训练比较困难,在训练技巧上可做的技巧比较多。

采用分阶段的训练,一个模块一个模块的训练。

  1. 先训练NetC和NetE中的 M 6 : S 6 M_{6}:S_{6} M6:S6 300k个迭代
  2. R 6 R_{6} R6和前面已经训练好部分在训练300个迭代
  3. k ∈ [ 5 , 2 ] , M k : S k a n d R k k \in[5, 2], M_{k}:S_{k} and R_{k} k[5,2],Mk:SkandRk 每次加一个level到前面已经训练好的网络上,这部分共训练240k个迭代
  4. 最后的剩下的网络模块加上之后训练300k个迭代
  • liteflownet2用了5.5天,liteflownet则用了8天。
  • 采用这种one block by one block的训练,liteflownet2的精度比liteflownet更好
  • 6至4、3和2级的学习率最初分别设置为1e-4、5e-5和4e-5。从120K、160K、200K和240K迭代开始,我们将其减少了2倍。我们使用相同的批大小8、数据集分辨率(随机裁剪:448×320)、损失权重(级别6到2:0.32、0.08、0.02、0.01、0.0.05)、训练损失(L2流误差)、Adam优化(γ=0.5、权重衰减=4e-4)、数据增强(包括噪声注入)、扩展地面真实流(1/20倍)作为FlowNet2[1]。此外,我们对每个推断的流场都使用一个训练损失。

总结

总体是在liteflownet的基础上对网络的channel数等结构进行简单的调整,在网络训练上做了很多技巧干货的尝试。

这篇关于【光流】——liteflownet2论文与代码浅析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1056736

相关文章

SpringCloud集成AlloyDB的示例代码

《SpringCloud集成AlloyDB的示例代码》AlloyDB是GoogleCloud提供的一种高度可扩展、强性能的关系型数据库服务,它兼容PostgreSQL,并提供了更快的查询性能... 目录1.AlloyDBjavascript是什么?AlloyDB 的工作原理2.搭建测试环境3.代码工程1.

Java调用Python代码的几种方法小结

《Java调用Python代码的几种方法小结》Python语言有丰富的系统管理、数据处理、统计类软件包,因此从java应用中调用Python代码的需求很常见、实用,本文介绍几种方法从java调用Pyt... 目录引言Java core使用ProcessBuilder使用Java脚本引擎总结引言python

Java中ArrayList的8种浅拷贝方式示例代码

《Java中ArrayList的8种浅拷贝方式示例代码》:本文主要介绍Java中ArrayList的8种浅拷贝方式的相关资料,讲解了Java中ArrayList的浅拷贝概念,并详细分享了八种实现浅... 目录引言什么是浅拷贝?ArrayList 浅拷贝的重要性方法一:使用构造函数方法二:使用 addAll(

JAVA利用顺序表实现“杨辉三角”的思路及代码示例

《JAVA利用顺序表实现“杨辉三角”的思路及代码示例》杨辉三角形是中国古代数学的杰出研究成果之一,是我国北宋数学家贾宪于1050年首先发现并使用的,:本文主要介绍JAVA利用顺序表实现杨辉三角的思... 目录一:“杨辉三角”题目链接二:题解代码:三:题解思路:总结一:“杨辉三角”题目链接题目链接:点击这里

SpringBoot使用注解集成Redis缓存的示例代码

《SpringBoot使用注解集成Redis缓存的示例代码》:本文主要介绍在SpringBoot中使用注解集成Redis缓存的步骤,包括添加依赖、创建相关配置类、需要缓存数据的类(Tes... 目录一、创建 Caching 配置类二、创建需要缓存数据的类三、测试方法Spring Boot 熟悉后,集成一个外

轻松掌握python的dataclass让你的代码更简洁优雅

《轻松掌握python的dataclass让你的代码更简洁优雅》本文总结了几个我在使用Python的dataclass时常用的技巧,dataclass装饰器可以帮助我们简化数据类的定义过程,包括设置默... 目录1. 传统的类定义方式2. dataclass装饰器定义类2.1. 默认值2.2. 隐藏敏感信息

opencv实现像素统计的示例代码

《opencv实现像素统计的示例代码》本文介绍了OpenCV中统计图像像素信息的常用方法和函数,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一... 目录1. 统计像素值的基本信息2. 统计像素值的直方图3. 统计像素值的总和4. 统计非零像素的数量

IDEA常用插件之代码扫描SonarLint详解

《IDEA常用插件之代码扫描SonarLint详解》SonarLint是一款用于代码扫描的插件,可以帮助查找隐藏的bug,下载并安装插件后,右键点击项目并选择“Analyze”、“Analyzewit... 目录SonajavascriptrLint 查找隐藏的bug下载安装插件扫描代码查看结果总结Sona

Python开发围棋游戏的实例代码(实现全部功能)

《Python开发围棋游戏的实例代码(实现全部功能)》围棋是一种古老而复杂的策略棋类游戏,起源于中国,已有超过2500年的历史,本文介绍了如何用Python开发一个简单的围棋游戏,实例代码涵盖了游戏的... 目录1. 围棋游戏概述1.1 游戏规则1.2 游戏设计思路2. 环境准备3. 创建棋盘3.1 棋盘类

Java实现批量化操作Excel文件的示例代码

《Java实现批量化操作Excel文件的示例代码》在操作Excel的场景中,通常会有一些针对Excel的批量操作,这篇文章主要为大家详细介绍了如何使用GcExcel实现批量化操作Excel,感兴趣的可... 目录前言 | 问题背景什么是GcExcel场景1 批量导入Excel文件,并读取特定区域的数据场景2