【退役之重学Java】Redis 持久化机制及其选择

2024-05-12 03:12

本文主要是介绍【退役之重学Java】Redis 持久化机制及其选择,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、RDB

RDB 持久化机制,对 Redis 中的数据执行周期性的持久化

二、AOF

AOF 机制对每条写入命令最为日志,以 append-only 的模式写入一个日志文件中,在 Redis 重启的时候,可以通过回放 AOF 日志中的写入指令,来重新构建整个数据集

分析

  • 如果我们想要 Redis 仅仅作为纯内存的缓存使用,那么可以禁止 RDB 和 AOF 所有的持久化机制
  • 通过 RDB 或 AOF,都可以将 Redis 内存中的数据给持久化到磁盘上来然后可以将这些数据备份到别的地方去,比如说云服务
  • 如果 Redis挂了,服务器上的内存和磁盘上的数据都丢了,可以从云服务上拷贝回来之前的数据,放到指定的目录中,然后重新启动 Redis,Redis就会自动根据持久化数据文件中的数据,去回复内存中的数据,继续对外提供服务
  • 如果同时使用 RDB 和 AOF 两种持久化机制,那么在 Redis 重启的时候,会使用 AOF 来重新构建数据,因为 AOF 中的数据更加完整

RDB 持久化机制的优点

  1. RDB 会生成多个数据文件,每个数据文件都代表了某一时刻中 Redis 的数据,这种多个数据文件的方式,非常适合做冷备,可以将这种完整的数据文件发送到一些远程的安全存储上去,比如 Amazon 的s3 云服务上去,在国内可以使阿里云的ODPS 分布式存储上,以预定号的备份策略来定期备份 Redis中的数据
  2. RDB 对 Redis 对外提供的读写服务,影响非常小,可以让 Redis 保持高性能,因为 Redis 主进程只需要 fork 一个子进程,让子进程执行磁盘 IO 操作来进行 RDB 持久化即可
  3. 相对于 AOF 持久化机制来说,直接基于RDB 数据文件来重启和恢复 Redis 进程,更加快速

RDB 持久化机制的缺点

  1. 如果想要在 Redis 故障时,尽可能少的丢失数据,那么RDB没有 AOF 好,一般来说, RDB数据快照文件,都是每隔 5 分钟,或者更长时间生成一次,这个时候就得接受一点 Redis 进程宕机,那么会就是最近 5 分钟的数据
  2. RDB 每次在 fork 子进程来执行 RDB 快照数据文件生成的时候,如果数据文件特别大,可能会导致对客户端提供的服务暂停数毫秒,甚至数秒

AOF 持久化机制的优点

  1. AOF 可以更好的保护数据不丢失,一般 AOF会每隔1秒,通过一个后台线程执行一次 fsync 操作,最多丢失 1s 的数据
  2. AOF 日志文件以 append-only 模式写入,所以没有任何磁盘寻址的开销,写入性能非常高,而且文件不容易破损,即使文件尾部破损,也很容易修复
  3. AOF 日志文件即使过大的时候,出现后台重写操作,也不会影响客户端的读写,因为在 rewrite log 的时候,会对其中的指导进行压缩,创建出一份需要回复数据的最小日志出来。创建新日志文件的时候 ,老的日志文件还是照常写入。当新的 merge 后的日志文件 ready 的时候,再交换新老日志文件即可。
  4. AOF 日志文件的命令通过非常刻度的方式进行记录,这个特性非常适合做灾难性的误删除的紧急恢复。

AOF 持久化机制的缺点

  1. 对于同一根数据来说,AOF 日志文件通常比 RDB 数据快照文件更大
  2. AOF 开启后,支持的写 QPS 回避 RDB 支持的写QPS 低,因为 AOF 一般会配置成每秒一次 fsync ,性能也是非常高的
  3. 以前 AOF 发生过 bug,就是通过 AOF记录的日子,进行数据恢复的时候,没有恢复成一模一样的数据出来,所以说,类似 AOF这类比较复杂的基于命令日志/merge/回放的方式,比基于 RDB 每次持久化一根万传给你的数据快照文件的方式,更加脆弱一些,容易有bug。不过 AOF 为了避免 rewrite 郭传给你导致的 bug, 因此每次 rewrite 并不是基于就的指令日志进行 merge 的,而是基于当时内存中的数据进行指令的重新构建,这样健壮性会好很多。

RDB 和 AOF 到底该如何选择

  1. 不要仅仅使用 RDB,那样会导致你丢失很多数据
  2. 也不要仅仅使用 AOF, 因为那样有两个问题
    • 通过 AOF 做冷备,没有 RDB 做冷备来得恢复速度更快
    • RDB 每次简单粗暴生成数据快照,更加健壮,可以避免 AOF 这种复杂的备份和恢复机制的bug
  3. 综合使用 AOF 和RDB 两种持久化机制
    • 用 AOF 保证数据不丢失,作为数据恢复的第一选择
    • 用 RDB 来做不同程度的冷备,在 AOF 文件都丢失或损坏不可用的时候,还可以使用 RDB 来进行快速的数据恢复

此系列博客,为学习笔记,若有侵权,请联系我删除

这篇关于【退役之重学Java】Redis 持久化机制及其选择的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/981443

相关文章

Java实现Excel与HTML互转

《Java实现Excel与HTML互转》Excel是一种电子表格格式,而HTM则是一种用于创建网页的标记语言,虽然两者在用途上存在差异,但有时我们需要将数据从一种格式转换为另一种格式,下面我们就来看看... Excel是一种电子表格格式,广泛用于数据处理和分析,而HTM则是一种用于创建网页的标记语言。虽然两

java图像识别工具类(ImageRecognitionUtils)使用实例详解

《java图像识别工具类(ImageRecognitionUtils)使用实例详解》:本文主要介绍如何在Java中使用OpenCV进行图像识别,包括图像加载、预处理、分类、人脸检测和特征提取等步骤... 目录前言1. 图像识别的背景与作用2. 设计目标3. 项目依赖4. 设计与实现 ImageRecogni

Java中Springboot集成Kafka实现消息发送和接收功能

《Java中Springboot集成Kafka实现消息发送和接收功能》Kafka是一个高吞吐量的分布式发布-订阅消息系统,主要用于处理大规模数据流,它由生产者、消费者、主题、分区和代理等组件构成,Ka... 目录一、Kafka 简介二、Kafka 功能三、POM依赖四、配置文件五、生产者六、消费者一、Kaf

Java访问修饰符public、private、protected及默认访问权限详解

《Java访问修饰符public、private、protected及默认访问权限详解》:本文主要介绍Java访问修饰符public、private、protected及默认访问权限的相关资料,每... 目录前言1. public 访问修饰符特点:示例:适用场景:2. private 访问修饰符特点:示例:

详解Java如何向http/https接口发出请求

《详解Java如何向http/https接口发出请求》这篇文章主要为大家详细介绍了Java如何实现向http/https接口发出请求,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 用Java发送web请求所用到的包都在java.net下,在具体使用时可以用如下代码,你可以把它封装成一

SpringBoot使用Apache Tika检测敏感信息

《SpringBoot使用ApacheTika检测敏感信息》ApacheTika是一个功能强大的内容分析工具,它能够从多种文件格式中提取文本、元数据以及其他结构化信息,下面我们来看看如何使用Ap... 目录Tika 主要特性1. 多格式支持2. 自动文件类型检测3. 文本和元数据提取4. 支持 OCR(光学

Java内存泄漏问题的排查、优化与最佳实践

《Java内存泄漏问题的排查、优化与最佳实践》在Java开发中,内存泄漏是一个常见且令人头疼的问题,内存泄漏指的是程序在运行过程中,已经不再使用的对象没有被及时释放,从而导致内存占用不断增加,最终... 目录引言1. 什么是内存泄漏?常见的内存泄漏情况2. 如何排查 Java 中的内存泄漏?2.1 使用 J

JAVA系统中Spring Boot应用程序的配置文件application.yml使用详解

《JAVA系统中SpringBoot应用程序的配置文件application.yml使用详解》:本文主要介绍JAVA系统中SpringBoot应用程序的配置文件application.yml的... 目录文件路径文件内容解释1. Server 配置2. Spring 配置3. Logging 配置4. Ma

Java 字符数组转字符串的常用方法

《Java字符数组转字符串的常用方法》文章总结了在Java中将字符数组转换为字符串的几种常用方法,包括使用String构造函数、String.valueOf()方法、StringBuilder以及A... 目录1. 使用String构造函数1.1 基本转换方法1.2 注意事项2. 使用String.valu

java脚本使用不同版本jdk的说明介绍

《java脚本使用不同版本jdk的说明介绍》本文介绍了在Java中执行JavaScript脚本的几种方式,包括使用ScriptEngine、Nashorn和GraalVM,ScriptEngine适用... 目录Java脚本使用不同版本jdk的说明1.使用ScriptEngine执行javascript2.