FMR-NET:用于弱光图像增强的快速多尺度残差网络(已更新三类预训练模型)

本文主要是介绍FMR-NET:用于弱光图像增强的快速多尺度残差网络(已更新三类预训练模型),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

之前上传的代码存在一定问题,目前已重新更新并上传了三类新的预训练模型供大家使用

paper     Github     CSDN下载

动机:

不按摘要来形式来写,本文的动机在于一个,减少模型参数量,加快运行速度,以及取得还不错的效果。因此,就存在两个方面的技术问题:第一,如何降低参数量;第二,如何降低内存访问的次数(这个观点从FasterNET就可以看出,很多文章也在提这个点);第三,如何取得还不错的增强效果。

因此,我自己思考的是两个:第一个是输入通道的通道数量应该小(特征冗余很多;相较于FasterNet的局部卷积;直接减少通道感觉也行);第二个在于特征提取的能力必须很强(1.基本会使用大量残差,但是残差其实是加大了内存访问次数的,因此也不能太多;2.必须加入多尺度的环节,但是许多的多尺度卷积会增大整个网络的复杂度);第三个是推理速度的问题(合理的残差结构和通道叠加,拓扑推理速度会很快)

所以,我们提出了如下的网络结构:

网络结构

对于整个网络而言,最关键的技术,在于MRB这个模块的构建。因此我们后面做了消融实验去验证它。首先,这个模块有两类思想:1.特征叠加的思想。单一通道的并联操作,在拓扑推理中运行速度是按照推理计算最大的卷积核为标准的,因此可以并联许多不同类型的核;2.双重的残差设计。具体可以看一下原文。

为了尽可能地轻量化,我们做了一个非常简略的通道注意力模块,同时,在MMFF-NET这篇文章中,虽然利用特征点成作增亮效果更好;但是为了更加迅速,Zero-DCE的操作蚕食FLOPs最小的。因此我们还是使用的这类策略。

整个网络非常简单,非常方便训练和改造,也非常方便大家部署+即插即用。

展示效果:

我们全新的代码中,提供了3类全新的预训练模型。分别是使用LOL,FiveK(艺术家C)和LOL+FiveK,三个版本。具体效果如下:

原图如下:

三类预训练的效果其实都还不错。主要看您针对于什么模型。如果您需要自己训练模型,直接使用自己的有监督学习数据集即可。

对比实验

实验部分我们做了两类实验。一个是MRB的消融实验。这里的消融实验我感觉更多是做的模块性能的一个对比试验。在这里我们比较了不同常用多尺度模块的性能,并且使用PSNR/SSIM比较了谁更牛逼。(肯定是我们的模块最好了=_=)同时我们还和其他算法进行了比较。

欢迎引用我的算法+代码:

感谢各位的支持。

Chen, Yuhan, et al. "FMR-Net: a fast multi-scale residual network for low-light image enhancement." Multimedia Systems 30.2 (2024): 73.

这篇关于FMR-NET:用于弱光图像增强的快速多尺度残差网络(已更新三类预训练模型)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/835478

相关文章

使用Python快速实现链接转word文档

《使用Python快速实现链接转word文档》这篇文章主要为大家详细介绍了如何使用Python快速实现链接转word文档功能,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 演示代码展示from newspaper import Articlefrom docx import

如何通过海康威视设备网络SDK进行Java二次开发摄像头车牌识别详解

《如何通过海康威视设备网络SDK进行Java二次开发摄像头车牌识别详解》:本文主要介绍如何通过海康威视设备网络SDK进行Java二次开发摄像头车牌识别的相关资料,描述了如何使用海康威视设备网络SD... 目录前言开发流程问题和解决方案dll库加载不到的问题老旧版本sdk不兼容的问题关键实现流程总结前言作为

0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型的操作流程

《0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeekR1模型的操作流程》DeepSeekR1模型凭借其强大的自然语言处理能力,在未来具有广阔的应用前景,有望在多个领域发... 目录0基础租个硬件玩deepseek,蓝耘元生代智算云|本地部署DeepSeek R1模型,3步搞定一个应

Deepseek R1模型本地化部署+API接口调用详细教程(释放AI生产力)

《DeepseekR1模型本地化部署+API接口调用详细教程(释放AI生产力)》本文介绍了本地部署DeepSeekR1模型和通过API调用将其集成到VSCode中的过程,作者详细步骤展示了如何下载和... 目录前言一、deepseek R1模型与chatGPT o1系列模型对比二、本地部署步骤1.安装oll

Spring AI Alibaba接入大模型时的依赖问题小结

《SpringAIAlibaba接入大模型时的依赖问题小结》文章介绍了如何在pom.xml文件中配置SpringAIAlibaba依赖,并提供了一个示例pom.xml文件,同时,建议将Maven仓... 目录(一)pom.XML文件:(二)application.yml配置文件(一)pom.xml文件:首

如何在本地部署 DeepSeek Janus Pro 文生图大模型

《如何在本地部署DeepSeekJanusPro文生图大模型》DeepSeekJanusPro模型在本地成功部署,支持图片理解和文生图功能,通过Gradio界面进行交互,展示了其强大的多模态处... 目录什么是 Janus Pro1. 安装 conda2. 创建 python 虚拟环境3. 克隆 janus

本地私有化部署DeepSeek模型的详细教程

《本地私有化部署DeepSeek模型的详细教程》DeepSeek模型是一种强大的语言模型,本地私有化部署可以让用户在自己的环境中安全、高效地使用该模型,避免数据传输到外部带来的安全风险,同时也能根据自... 目录一、引言二、环境准备(一)硬件要求(二)软件要求(三)创建虚拟环境三、安装依赖库四、获取 Dee

DeepSeek模型本地部署的详细教程

《DeepSeek模型本地部署的详细教程》DeepSeek作为一款开源且性能强大的大语言模型,提供了灵活的本地部署方案,让用户能够在本地环境中高效运行模型,同时保护数据隐私,在本地成功部署DeepSe... 目录一、环境准备(一)硬件需求(二)软件依赖二、安装Ollama三、下载并部署DeepSeek模型选

Golang的CSP模型简介(最新推荐)

《Golang的CSP模型简介(最新推荐)》Golang采用了CSP(CommunicatingSequentialProcesses,通信顺序进程)并发模型,通过goroutine和channe... 目录前言一、介绍1. 什么是 CSP 模型2. Goroutine3. Channel4. Channe

Redis缓存问题与缓存更新机制详解

《Redis缓存问题与缓存更新机制详解》本文主要介绍了缓存问题及其解决方案,包括缓存穿透、缓存击穿、缓存雪崩等问题的成因以及相应的预防和解决方法,同时,还详细探讨了缓存更新机制,包括不同情况下的缓存更... 目录一、缓存问题1.1 缓存穿透1.1.1 问题来源1.1.2 解决方案1.2 缓存击穿1.2.1