HBase原理 | HBase Region 运行状态学习

2024-06-12 21:48

本文主要是介绍HBase原理 | HBase Region 运行状态学习,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

HBase为每个Region维护一个状态,并将该状态保留在hbase:meta中。hbase:meta本身的Region状态保留在ZooKeeper中。可以在Master Web UI中查看Region的过渡状态。以下是可能的Region状态列表。

1. 状态机中包括下面几种状态:

  • offline:region离线没有开启。

  • opening:region正在被打开。

  • open:region正在打开,并且region server通知了master。

  • failed_open:regionserver打开失败。

  • closing:region正在被关闭。

  • closed:regionserver正在关闭,并且已经通知了master。

  • failed_close:regionserver关闭失败了。

  • splitting:region server通知master,region正在被切分。

  • split:region server通知master,region已经被切分完了。

  • spliting_new:region是切分过程中新建的文件。

  • merging:regionserver通知master region正在合并。

  • merged:regionserver通知master region合并完了。

  • merging_new:region是合并新建出来的。

2. 不同的颜色是不同含义:

  • 棕色:离线状态,属于一种短暂的瞬间状态(比如关闭后开启的中间状态)、停止状态或者初始化的时候的状态。

  • 绿色:正常的状态,可以支持请求访问。

  • 蓝色:短暂的状态。

  • 红色:失败。

  • 黄色:合并或者切分的状态。

  • 灰色:刚开始的状态。

3. 各个序号代表不同的操作场景:

  • Master向region server发起region从offline到openning的状态请求,regionserver如果没有收到,master会尝试重试几次。RegionServer接收到请求后,regin状态变成opening。

  • 如果Master发起的open请求超过次数,那么无论region server是否已经打开region,master都会命令region server关闭文件,状态变为closing。

  • 当region server打开region后,会尝试通知master,让它把region状态修改为open,并通知regsion server。这样region才能变为open状态。

  • 如果region server打开失败,会尝试通知master。master会把region的状态变更为closed,并且尝试去其他的region server打开region。

  • 如果master尝试几次后,都没有打开region,就会把状态变更为failed_open。

  • master通知region server关闭region,如果没有反应,会重试。

  • 如果region server没有在线,会抛出异常。然后region的状态会变成closing。

  • 如果region server在线,但是好几次都没响应,就会更新状态为failed_close。

  • 如果region server收到请求,并且关闭了region,那么会通知master把region状态修改为closed。并且把region分配给其他的server。

  • 在分配之前,master会先把region从closed状态转换为offline。

  • 如果region server正在切分region,会通知master。master把region状态由open变为splitting,并且把新增两个region的信息,这两个region都是splitting_new状态。

  • 如果region切分成功,当前的region状态从splitting变成split;新增的两个region状态从splitting_new变成open。

  • 如果切分失败,状态从splitting回到open,两个region也从splitting_new变成offline。

  • 如果region server想要合并两个region,那么也会先通知master。master把两个region从open变成merging,然后增加一个新的region,状态为merging_new。

  • 如果合并成功, 旧的region从merging变为merged,新的region从merging_new变为open。

  • 如果合并失败,region的状态从merging变回open,新建的一个region状态又变成offline。

  • 如果管理员通过hbase shell操作分配region,master会尝试把失败的状态变成close。

4. 参考

http://hbase.apache.org/2.2/book.html#regions.arch

 

往期推荐

1、Hudi原理 | Apache Hudi 典型应用场景介绍

2、HBase实践 | HBase内核优化与吞吐能力建设

3、Hadoop社区比 Ozone 更重要的事情

4、Hive on Spark 运行于Yarn模式下如何调优

这篇关于HBase原理 | HBase Region 运行状态学习的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1055431

相关文章

从原理到实战深入理解Java 断言assert

《从原理到实战深入理解Java断言assert》本文深入解析Java断言机制,涵盖语法、工作原理、启用方式及与异常的区别,推荐用于开发阶段的条件检查与状态验证,并强调生产环境应使用参数验证工具类替代... 目录深入理解 Java 断言(assert):从原理到实战引言:为什么需要断言?一、断言基础1.1 语

MySQL中的表连接原理分析

《MySQL中的表连接原理分析》:本文主要介绍MySQL中的表连接原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、环境3、表连接原理【1】驱动表和被驱动表【2】内连接【3】外连接【4编程】嵌套循环连接【5】join buffer4、总结1、背景

深度解析Spring AOP @Aspect 原理、实战与最佳实践教程

《深度解析SpringAOP@Aspect原理、实战与最佳实践教程》文章系统讲解了SpringAOP核心概念、实现方式及原理,涵盖横切关注点分离、代理机制(JDK/CGLIB)、切入点类型、性能... 目录1. @ASPect 核心概念1.1 AOP 编程范式1.2 @Aspect 关键特性2. 完整代码实

Java Stream的distinct去重原理分析

《JavaStream的distinct去重原理分析》Javastream中的distinct方法用于去除流中的重复元素,它返回一个包含过滤后唯一元素的新流,该方法会根据元素的hashcode和eq... 目录一、distinct 的基础用法与核心特性二、distinct 的底层实现原理1. 顺序流中的去重

k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)

《k8s上运行的mysql、mariadb数据库的备份记录(支持x86和arm两种架构)》本文记录在K8s上运行的MySQL/MariaDB备份方案,通过工具容器执行mysqldump,结合定时任务实... 目录前言一、获取需要备份的数据库的信息二、备份步骤1.准备工作(X86)1.准备工作(arm)2.手

Spring @Scheduled注解及工作原理

《Spring@Scheduled注解及工作原理》Spring的@Scheduled注解用于标记定时任务,无需额外库,需配置@EnableScheduling,设置fixedRate、fixedDe... 目录1.@Scheduled注解定义2.配置 @Scheduled2.1 开启定时任务支持2.2 创建

Spring Boot 实现 IP 限流的原理、实践与利弊解析

《SpringBoot实现IP限流的原理、实践与利弊解析》在SpringBoot中实现IP限流是一种简单而有效的方式来保障系统的稳定性和可用性,本文给大家介绍SpringBoot实现IP限... 目录一、引言二、IP 限流原理2.1 令牌桶算法2.2 漏桶算法三、使用场景3.1 防止恶意攻击3.2 控制资源

Python中使用uv创建环境及原理举例详解

《Python中使用uv创建环境及原理举例详解》uv是Astral团队开发的高性能Python工具,整合包管理、虚拟环境、Python版本控制等功能,:本文主要介绍Python中使用uv创建环境及... 目录一、uv工具简介核心特点:二、安装uv1. 通过pip安装2. 通过脚本安装验证安装:配置镜像源(可

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

Mysql的主从同步/复制的原理分析

《Mysql的主从同步/复制的原理分析》:本文主要介绍Mysql的主从同步/复制的原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录为什么要主从同步?mysql主从同步架构有哪些?Mysql主从复制的原理/整体流程级联复制架构为什么好?Mysql主从复制注意