语义分割离线数据增强——Albumentations实现

2024-04-07 16:28

本文主要是介绍语义分割离线数据增强——Albumentations实现,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

该脚本实现了一个图像及其对应掩模的离线数据增强流程,旨在通过引入多种变换增强图像多样性,以提高深度学习模型的泛化能力。主要技术要点如下:

1.使用 Albumentations 库进行数据增强

:Albumentations 是一个强大的 Python 库,专门用于图像预处理和数据增强。它提供了丰富的图像变换操作,支持多种深度学习框架。在本脚本中,通过定义 A.Compose 对象 aug 集成了多种增强操作。

2.定义增强配置:

A.HorizontalFlip(p=0.8) 和 A.VerticalFlip(p=0.7):分别以 80% 和 70% 的概率水平翻转和垂直翻转图像及掩模,增加图像的方向性变化。
A.Resize(height=512, width=512, interpolation=cv.INTER_CUBIC, always_apply=False, p=1):始终将图像和掩模统一缩放到 512x512 大小,使用三次插值法保持图像质量。
A.ShiftScaleRotate(shift_limit=0.0625, scale_limit=0.2, rotate_limit=15, p=0.8):以 80% 的概率对图像和掩模进行随机平移(最大移动图像尺寸的 1/16)、缩放(最大放大20%或缩小至80%)和旋转(最大±15度),模拟真实世界中的视角变化和物体位置、大小的差异。
A.Transpose(always_apply=False, p=1):始终对图像和掩模进行转置(水平与垂直方向交换),增加图像的空间布局变化。
A.GridDistortion(num_steps=10, distort_limit=0.3, border_mode=cv.BORDER_CONSTANT, always_apply=False, p=1):始终对图像和掩模应用网格失真变形,模拟镜头畸变或物体表面不规则情况。

3.数据集准备与目录结构:

image_dir、mask_dir 存储原始图像和掩模文件,分别对应图像和其对应的彩色掩模。
aug_image_dir、aug_mask_dir 分别为增强后图像和掩模的输出目录,确保其存在并创建(若不存在)。

4.遍历图像与掩模文件:

从 image_dir 和 mask_dir 中获取相同数量的图像和掩模文件列表,确保二者一一对应。
使用 zip 函数同时遍历 image_files 和 mask_files,对每一对图像和掩模进行后续处理。

5.生成增强版本:

读取指定路径下的原始图像和彩色掩模。
对每对图像-掩模组合应用增强配置 aug 进行100次随机增强。
从增强结果中提取增强后的图像 image_aug 和掩模 mask_aug。

6.保存增强结果:

构建增强后图像和掩模的新文件名,格式为原始文件名(去除扩展名)+ 序号(0~99)+ 扩展名(.jpg 或 .png)。将增强后的图像和掩模保存到对应的输出目录 aug_image_dir 和 aug_mask_dir。

总之,此脚本利用 Albumentations 库对给定图像及其彩色掩模进行一系列几何变换和像素级失真操作,生成大量增强后的图像-掩模对,旨在提升模型训练时的数据多样性,进而增强模型的泛化能力。每个原始图像-掩模对将产生100个不同的增强版本,增强了数据集的规模和复杂性。

import os
import cv2 as cv
import albumentations as A# 定义增强配置
aug = A.Compose([A.HorizontalFlip(p=0.8),A.VerticalFlip(p=0.7),A.Resize(height=512, width=512, interpolation=cv.INTER_CUBIC, always_apply=False, p=1),A.ShiftScaleRotate(shift_limit=0.0625, scale_limit=0.2, rotate_limit=15, p=0.8),A.Transpose(always_apply=False, p=1),A.GridDistortion(num_steps=10, distort_limit=0.3, border_mode=cv.BORDER_CONSTANT, always_apply=False, p=1),
])# load dataset
image_dir = './dataset/image'
mask_dir = './dataset/mask'
aug_image_dir = './aug/image'
aug_mask_dir = './aug/mask'# 确保输出目录存在
os.makedirs(aug_image_dir, exist_ok=True)
os.makedirs(aug_mask_dir, exist_ok=True)# 获取图像和掩模文件列表
image_files = [f for f in os.listdir(image_dir) if f.endswith('.jpg') or f.endswith('.png')]
mask_files = [f for f in os.listdir(mask_dir) if f.endswith('.jpg') or f.endswith('.png')]assert len(image_files) == len(mask_files), "Number of images and masks don't match"for image_file, mask_file in zip(image_files, mask_files):# 读取原始图像和掩模image_path = os.path.join(image_dir, image_file)mask_path = os.path.join(mask_dir, mask_file)image = cv.imread(image_path)mask = cv.imread(mask_path, cv.IMREAD_COLOR)  # 读取彩色掩模# 为当前图像和掩模生成多个增强版本(共100个)for i in range(100):augmented = aug(image=image, mask=mask)image_aug = augmented["image"]mask_aug = augmented["mask"]# 为增强结果构建新的文件名output_image_name = f'{image_file[:-4]}_{i}.jpg'  # 假设原始图像为 .jpg 格式output_mask_name = f'{mask_file[:-4]}_{i}.png'  # 假设原始掩模为 .png 格式# 保存增强后的图像和掩模output_image_path = os.path.join(aug_image_dir, output_image_name)output_mask_path = os.path.join(aug_mask_dir, output_mask_name)cv.imwrite(output_image_path, image_aug)cv.imwrite(output_mask_path, mask_aug)

这篇关于语义分割离线数据增强——Albumentations实现的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/883087

相关文章

Python在二进制文件中进行数据搜索的实战指南

《Python在二进制文件中进行数据搜索的实战指南》在二进制文件中搜索特定数据是编程中常见的任务,尤其在日志分析、程序调试和二进制数据处理中尤为重要,下面我们就来看看如何使用Python实现这一功能吧... 目录简介1. 二进制文件搜索概述2. python二进制模式文件读取(rb)2.1 二进制模式与文本

基于C++的UDP网络通信系统设计与实现详解

《基于C++的UDP网络通信系统设计与实现详解》在网络编程领域,UDP作为一种无连接的传输层协议,以其高效、低延迟的特性在实时性要求高的应用场景中占据重要地位,下面我们就来看看如何从零开始构建一个完整... 目录前言一、UDP服务器UdpServer.hpp1.1 基本框架设计1.2 初始化函数Init详解

Java中Map的五种遍历方式实现与对比

《Java中Map的五种遍历方式实现与对比》其实Map遍历藏着多种玩法,有的优雅简洁,有的性能拉满,今天咱们盘一盘这些进阶偏基础的遍历方式,告别重复又臃肿的代码,感兴趣的小伙伴可以了解下... 目录一、先搞懂:Map遍历的核心目标二、几种遍历方式的对比1. 传统EntrySet遍历(最通用)2. Lambd

springboot+redis实现订单过期(超时取消)功能的方法详解

《springboot+redis实现订单过期(超时取消)功能的方法详解》在SpringBoot中使用Redis实现订单过期(超时取消)功能,有多种成熟方案,本文为大家整理了几个详细方法,文中的示例代... 目录一、Redis键过期回调方案(推荐)1. 配置Redis监听器2. 监听键过期事件3. Redi

SpringBoot全局异常拦截与自定义错误页面实现过程解读

《SpringBoot全局异常拦截与自定义错误页面实现过程解读》本文介绍了SpringBoot中全局异常拦截与自定义错误页面的实现方法,包括异常的分类、SpringBoot默认异常处理机制、全局异常拦... 目录一、引言二、Spring Boot异常处理基础2.1 异常的分类2.2 Spring Boot默

基于SpringBoot实现分布式锁的三种方法

《基于SpringBoot实现分布式锁的三种方法》这篇文章主要为大家详细介绍了基于SpringBoot实现分布式锁的三种方法,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 目录一、基于Redis原生命令实现分布式锁1. 基础版Redis分布式锁2. 可重入锁实现二、使用Redisso

SpringBoo WebFlux+MongoDB实现非阻塞API过程

《SpringBooWebFlux+MongoDB实现非阻塞API过程》本文介绍了如何使用SpringBootWebFlux和MongoDB实现非阻塞API,通过响应式编程提高系统的吞吐量和响应性能... 目录一、引言二、响应式编程基础2.1 响应式编程概念2.2 响应式编程的优势2.3 响应式编程相关技术

C#实现将XML数据自动化地写入Excel文件

《C#实现将XML数据自动化地写入Excel文件》在现代企业级应用中,数据处理与报表生成是核心环节,本文将深入探讨如何利用C#和一款优秀的库,将XML数据自动化地写入Excel文件,有需要的小伙伴可以... 目录理解XML数据结构与Excel的对应关系引入高效工具:使用Spire.XLS for .NETC

C++ 右值引用(rvalue references)与移动语义(move semantics)深度解析

《C++右值引用(rvaluereferences)与移动语义(movesemantics)深度解析》文章主要介绍了C++右值引用和移动语义的设计动机、基本概念、实现方式以及在实际编程中的应用,... 目录一、右值引用(rvalue references)与移动语义(move semantics)设计动机1

Nginx更新SSL证书的实现步骤

《Nginx更新SSL证书的实现步骤》本文主要介绍了Nginx更新SSL证书的实现步骤,包括下载新证书、备份旧证书、配置新证书、验证配置及遇到问题时的解决方法,感兴趣的了解一下... 目录1 下载最新的SSL证书文件2 备份旧的SSL证书文件3 配置新证书4 验证配置5 遇到的http://www.cppc