本文主要是介绍Hadoop3.2 集群搭建 (免密登录),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
首页下载APP
Hadoop3.2 集群搭建
Hadoop3.2 集群新版本的搭建详细讲解过程,从下面第一张官方的图来看,最新版是3.2,所以大猪将使用3.2的版本来演示,过程中遇到的坑留给自己,把路留给你们,IT之路还有大猪。
大猪 为了把文章压缩极简方便小伙伴阅读,将使用root帐号进行所有操作。
准备两台主机
10.211.55.11
、10.211.55.12
对应的hostname为
m1.example.com
、m2.example.com
具体命令操作如下
主机免密钥登录
同步hosts
下载 jdk1.8
配置Java环境
环境变量生效 source /etc/profile
两台主机创建好hadoop的文件夹
环境配置 hadoop-3.2.0.tar.gz
参数配置
运行用户操作,添加如下几句到 /soft/hadoop/etc/hadoop/hadoop-env.sh
环境变量生效 source /etc/profile
hadoop 配置文件
core-site.xml 配置
hdfs-site.xml 配置
yarn-site.xml 配置
mapred-site.xml 配置
格式化name文件夹 hadoop namenode -format
启动 start-all.sh
成功结果如下
访问 http://m1.example.com:8088/cluster
心明眼亮的你、从此刻开始。
这篇关于Hadoop3.2 集群搭建 (免密登录)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!