本文主要是介绍Hadoop-2.4.1学习之使用Quorum Journal Manager的HDFS的高可用性(三),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
在学习了如何配置HA后,接下来是启动和管理HA。要启动HA集群,首先要在所有运行JournalNode的主机上启动JournalNodes守护进程,可以在每台主机上执行命令hdfs journalnode启动journalnode守护进程。在journalnode守护进程启动完成之后,必须首先同步两个 NameNode硬盘上的元数据,具体如下:
- 如果正在搭建全新的HDFS集群,应该首先在其中一个NameNode上执行format命令:hdfs namenode –format。
- 如果有已经格式化了的NameNode,或者将一个非HA集群转换为HA集群,需要将已格式化的NameNode的元数据目录中的内容拷贝到未格式化的另一个NameNode上,这一点可以在未格式化的NameNode上使用命令hdfs namenode –bootstrapStandby实现。运行该命令之前需要确保JournalNodes(由dfs.namenode.shared.edits.dir配置)包含足够的edits事务能够启动两个NameNode。
- 如果将一个非HANameNode转换为HA,应该运行hdfs namenode –initializeSharedEdits,该命令将使用本地NameNode edits目录中的edits数据初始化JournalNodes。
完成上述步骤后,可以像通常启动NameNode那样启动HA的NameNodes。可以使用配置的http地址分别访问每个NameNode的web页面,在该页面可以看到NameNode的HA状态(active或者st
这篇关于Hadoop-2.4.1学习之使用Quorum Journal Manager的HDFS的高可用性(三)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!