本文主要是介绍超详Windows系统下eclipse远程hadoop环境搭建,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
一.JAVA环境配置
-
JDK安装(小伙伴们上网找压缩包即可)
-
JDK环境变量配置
- 新建一个系统变量
变量名:JAVA_HOME
变量值:根据自己JDK安装实际路径填写
- 新建一个系统变量
变量名:CLASSPATH
变量值:%JAVA_HOME%\lib\dt.jar;%JAVA_HOME%\lib\tools.jar;.
- 修改系统变量
变量名:PATH
变量值:%JAVA_HOME%bin; (该项在前面添加 )
验证是否成功
打开cmd命令窗口输入 java -version 结果如下图则成功
二.下载Eclipse并配置(JavaSE版本、JavaEE版本均可)
找到Eclipse安装路径,在该路径下创建HadoopWorkspace文件夹
启动Eclipse,将工作空间设定在刚建立的HadoopWorkspace目录
下载并解压下图文件,将解压后文件复制到eclipse的相应目录plugins下
解压之后=>
三.windows系统中安装Hadoop2.7.3
将Hadoop2.7.3.tar.gz解压(这里需要解压缩两次)到指定位置:D:\hadoop-2.7.3
经过1次解压缩=>
再次解压=>
配置环境变量:
新建系统变量
变量名:HADOOP_HOME
值为:D:\hadoop-2.7.3
修改系统变量
变量名:PATH
变量值:%HADOOP_HOME%bin; (该项在前面添加 )
修改D:\hadoop-2.7.3\etc\hadoop\hadoop-env.cmd
修改set JAVA_HOME=C:\Progra~1\Java\jdk1.8.0_144
注意1:写自己安装的jdk目录
注意2:和作者路径一样的小伙伴 Program Files 由于有空格命令无法执行所以要改成Progra~1
验证hadoop是否安装好
在命令行提示符下输入:hadoop version
重启eclipse后在windows==>preference==>Hadoop Map/Reduce设置hadoop的安装目录
注:安装目录根据自己hadoop实际路径写,作者为D:\hadoop-2.7.3
四.下载安装windows系统编译好的Hadoop2.7.1
解压hadoop-2.7.1.tar 到D:\hadoop-2.7.1
打开hadoop-2.7.1
1.将文件winutil.exe复制到D:\hadoop-2.7.3\bin 注:这里复制到自己hadoop-2.7.3bin目录下
2.将文件hadoop.dll复制到c:\windows\system32
五.Eclipse内部配置
- 重启Eclipse 添加并打开Map/Reduce视图
windows==>Show View==>选择Map/Reduce Locations
- 点击图中箭头位置,填写弹出新建Hadoop连接窗口
- 填写相应的配置项内容
location name:Hadoop //自定义一个名字
Map/Reduce master //yarn_site.xml
Host:192.168.118.129 //填自己虚拟机master的IP
Port:18040 //固定
DFS Master //core_site.xml
Host:192.168.118.129 //填自己虚拟机master的IP
Port:9000 //固定
- 到这里我们的所有配置就完成了,我们可以在Eclipse看到虚拟机里HDFS文件系统的文件情况
这篇关于超详Windows系统下eclipse远程hadoop环境搭建的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!