在Hadoop集群之上搭建pig组件

1、下载安装pig文件包
前往http://mirror.bit.edu.cn/apache/pig/下载相应的pig版本,然后解压
2、设置环境变量

vim /etc/profile  
export PIG_HOME=/lighttrace/pig-0.16.0   (替换成你的目录)  
export PATH=$PATH:$PIG_HOME/bin:$PIG_HOME/conf  
export PIG_CLASSPATH=$HADOOP_HOME/etc/hadoop
source /etc/profile

3、然后验证

pig --help

4、pig本地启动:pig -x local

pig MapReduce启动:
1、start-all.sh启动hadoop集群
2、mr-jobhistory-daemon.sh start historyserver开启作业历史服务
3、输入jps指令查看:


4、输入pig或者pig -x mapreduce启动pig

 

版权声明:本文为weixin_44753820原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_44753820/article/details/104290543