本文主要是介绍pig安装及其过程中一个啼笑皆非的问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
pig的安装和配置大概是我见过的最简单的了
先说一下大环境
Ubuntu1604
hadoop2.7.2
pig-0.17.0
安装和配置
1.下载pig源码
http://mirror.bit.edu.cn/apache/pig/
pig-0.17.0.tar.gz
2.将pig源码导入Ubuntu,解压
tar-zxvf pig-0.17.0.tar.gz
3.hadoop用户配置环境变量
vim ~/.profile//注意一定是hadoop用户,root用户和hadoop用户打开的配置文件的内容不同,打开之后添加以下内容export PIG_HOME=/home/hadoop/hadoop_home/pig-0.17.0//我的是这个路径,具体路径按实际情况配置
export PIG_CLASSPATH=$HADOOP_HOME/etc/hadoop//连接hadoop分布式平台
export PATH=$PATH:$PIG_HOME/binsource~/.profile
4.pig的两种模式
输入pig -x local,开启pig本地模式
输入pig -x mapreduce,开启mapreduce模式
题外话:
小可昨日安装pig时遇到一个让我啼笑皆非的问题
在配置环境变量的时候,配成了这样
export PIG_HOME=/home/Hadoop/hadoop_home/pig-0.17.0
是的,有一个字母大写了!!!
然后就出现了这个问题:
提示安装一个bsdgames,等我安装之后,启动pig还是失败,等我发现配置文件出问题并修改后依旧无法正常启动pig,最后是卸载了bsdgames才恢复的!
至于这个bsdgames,好像是个游戏的包,知道的大佬能够解释一下也是极好的!!!
这篇关于pig安装及其过程中一个啼笑皆非的问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!