【退役之重学Java】Redis 持久化机制及其选择

2024-05-12 03:12

本文主要是介绍【退役之重学Java】Redis 持久化机制及其选择,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、RDB

RDB 持久化机制,对 Redis 中的数据执行周期性的持久化

二、AOF

AOF 机制对每条写入命令最为日志,以 append-only 的模式写入一个日志文件中,在 Redis 重启的时候,可以通过回放 AOF 日志中的写入指令,来重新构建整个数据集

分析

  • 如果我们想要 Redis 仅仅作为纯内存的缓存使用,那么可以禁止 RDB 和 AOF 所有的持久化机制
  • 通过 RDB 或 AOF,都可以将 Redis 内存中的数据给持久化到磁盘上来然后可以将这些数据备份到别的地方去,比如说云服务
  • 如果 Redis挂了,服务器上的内存和磁盘上的数据都丢了,可以从云服务上拷贝回来之前的数据,放到指定的目录中,然后重新启动 Redis,Redis就会自动根据持久化数据文件中的数据,去回复内存中的数据,继续对外提供服务
  • 如果同时使用 RDB 和 AOF 两种持久化机制,那么在 Redis 重启的时候,会使用 AOF 来重新构建数据,因为 AOF 中的数据更加完整

RDB 持久化机制的优点

  1. RDB 会生成多个数据文件,每个数据文件都代表了某一时刻中 Redis 的数据,这种多个数据文件的方式,非常适合做冷备,可以将这种完整的数据文件发送到一些远程的安全存储上去,比如 Amazon 的s3 云服务上去,在国内可以使阿里云的ODPS 分布式存储上,以预定号的备份策略来定期备份 Redis中的数据
  2. RDB 对 Redis 对外提供的读写服务,影响非常小,可以让 Redis 保持高性能,因为 Redis 主进程只需要 fork 一个子进程,让子进程执行磁盘 IO 操作来进行 RDB 持久化即可
  3. 相对于 AOF 持久化机制来说,直接基于RDB 数据文件来重启和恢复 Redis 进程,更加快速

RDB 持久化机制的缺点

  1. 如果想要在 Redis 故障时,尽可能少的丢失数据,那么RDB没有 AOF 好,一般来说, RDB数据快照文件,都是每隔 5 分钟,或者更长时间生成一次,这个时候就得接受一点 Redis 进程宕机,那么会就是最近 5 分钟的数据
  2. RDB 每次在 fork 子进程来执行 RDB 快照数据文件生成的时候,如果数据文件特别大,可能会导致对客户端提供的服务暂停数毫秒,甚至数秒

AOF 持久化机制的优点

  1. AOF 可以更好的保护数据不丢失,一般 AOF会每隔1秒,通过一个后台线程执行一次 fsync 操作,最多丢失 1s 的数据
  2. AOF 日志文件以 append-only 模式写入,所以没有任何磁盘寻址的开销,写入性能非常高,而且文件不容易破损,即使文件尾部破损,也很容易修复
  3. AOF 日志文件即使过大的时候,出现后台重写操作,也不会影响客户端的读写,因为在 rewrite log 的时候,会对其中的指导进行压缩,创建出一份需要回复数据的最小日志出来。创建新日志文件的时候 ,老的日志文件还是照常写入。当新的 merge 后的日志文件 ready 的时候,再交换新老日志文件即可。
  4. AOF 日志文件的命令通过非常刻度的方式进行记录,这个特性非常适合做灾难性的误删除的紧急恢复。

AOF 持久化机制的缺点

  1. 对于同一根数据来说,AOF 日志文件通常比 RDB 数据快照文件更大
  2. AOF 开启后,支持的写 QPS 回避 RDB 支持的写QPS 低,因为 AOF 一般会配置成每秒一次 fsync ,性能也是非常高的
  3. 以前 AOF 发生过 bug,就是通过 AOF记录的日子,进行数据恢复的时候,没有恢复成一模一样的数据出来,所以说,类似 AOF这类比较复杂的基于命令日志/merge/回放的方式,比基于 RDB 每次持久化一根万传给你的数据快照文件的方式,更加脆弱一些,容易有bug。不过 AOF 为了避免 rewrite 郭传给你导致的 bug, 因此每次 rewrite 并不是基于就的指令日志进行 merge 的,而是基于当时内存中的数据进行指令的重新构建,这样健壮性会好很多。

RDB 和 AOF 到底该如何选择

  1. 不要仅仅使用 RDB,那样会导致你丢失很多数据
  2. 也不要仅仅使用 AOF, 因为那样有两个问题
    • 通过 AOF 做冷备,没有 RDB 做冷备来得恢复速度更快
    • RDB 每次简单粗暴生成数据快照,更加健壮,可以避免 AOF 这种复杂的备份和恢复机制的bug
  3. 综合使用 AOF 和RDB 两种持久化机制
    • 用 AOF 保证数据不丢失,作为数据恢复的第一选择
    • 用 RDB 来做不同程度的冷备,在 AOF 文件都丢失或损坏不可用的时候,还可以使用 RDB 来进行快速的数据恢复

此系列博客,为学习笔记,若有侵权,请联系我删除

这篇关于【退役之重学Java】Redis 持久化机制及其选择的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/981443

相关文章

Java 8 Stream filter流式过滤器详解

《Java8Streamfilter流式过滤器详解》本文介绍了Java8的StreamAPI中的filter方法,展示了如何使用lambda表达式根据条件过滤流式数据,通过实际代码示例,展示了f... 目录引言 一.Java 8 Stream 的过滤器(filter)二.Java 8 的 filter、fi

Java中实现订单超时自动取消功能(最新推荐)

《Java中实现订单超时自动取消功能(最新推荐)》本文介绍了Java中实现订单超时自动取消功能的几种方法,包括定时任务、JDK延迟队列、Redis过期监听、Redisson分布式延迟队列、Rocket... 目录1、定时任务2、JDK延迟队列 DelayQueue(1)定义实现Delayed接口的实体类 (

springboot的调度服务与异步服务使用详解

《springboot的调度服务与异步服务使用详解》本文主要介绍了Java的ScheduledExecutorService接口和SpringBoot中如何使用调度线程池,包括核心参数、创建方式、自定... 目录1.调度服务1.1.JDK之ScheduledExecutorService1.2.spring

将java程序打包成可执行文件的实现方式

《将java程序打包成可执行文件的实现方式》本文介绍了将Java程序打包成可执行文件的三种方法:手动打包(将编译后的代码及JRE运行环境一起打包),使用第三方打包工具(如Launch4j)和JDK自带... 目录1.问题提出2.如何将Java程序打包成可执行文件2.1将编译后的代码及jre运行环境一起打包2

Java使用Tesseract-OCR实战教程

《Java使用Tesseract-OCR实战教程》本文介绍了如何在Java中使用Tesseract-OCR进行文本提取,包括Tesseract-OCR的安装、中文训练库的配置、依赖库的引入以及具体的代... 目录Java使用Tesseract-OCRTesseract-OCR安装配置中文训练库引入依赖代码实

Java中对象的创建和销毁过程详析

《Java中对象的创建和销毁过程详析》:本文主要介绍Java中对象的创建和销毁过程,对象的创建过程包括类加载检查、内存分配、初始化零值内存、设置对象头和执行init方法,对象的销毁过程由垃圾回收机... 目录前言对象的创建过程1. 类加载检查2China编程. 分配内存3. 初始化零值4. 设置对象头5. 执行

SpringBoot整合easy-es的详细过程

《SpringBoot整合easy-es的详细过程》本文介绍了EasyES,一个基于Elasticsearch的ORM框架,旨在简化开发流程并提高效率,EasyES支持SpringBoot框架,并提供... 目录一、easy-es简介二、实现基于Spring Boot框架的应用程序代码1.添加相关依赖2.添

通俗易懂的Java常见限流算法具体实现

《通俗易懂的Java常见限流算法具体实现》:本文主要介绍Java常见限流算法具体实现的相关资料,包括漏桶算法、令牌桶算法、Nginx限流和Redis+Lua限流的实现原理和具体步骤,并比较了它们的... 目录一、漏桶算法1.漏桶算法的思想和原理2.具体实现二、令牌桶算法1.令牌桶算法流程:2.具体实现2.1

SpringBoot中整合RabbitMQ(测试+部署上线最新完整)的过程

《SpringBoot中整合RabbitMQ(测试+部署上线最新完整)的过程》本文详细介绍了如何在虚拟机和宝塔面板中安装RabbitMQ,并使用Java代码实现消息的发送和接收,通过异步通讯,可以优化... 目录一、RabbitMQ安装二、启动RabbitMQ三、javascript编写Java代码1、引入

spring-boot-starter-thymeleaf加载外部html文件方式

《spring-boot-starter-thymeleaf加载外部html文件方式》本文介绍了在SpringMVC中使用Thymeleaf模板引擎加载外部HTML文件的方法,以及在SpringBoo... 目录1.Thymeleaf介绍2.springboot使用thymeleaf2.1.引入spring