此文章是vip文章,如何查看?  

1,点击链接获取密钥 http://nicethemes.cn/product/view29882.html

2,在下方输入文章查看密钥即可立即查看当前vip文章


pig的安装配置

  • 时间:
  • 浏览:
  • 来源:互联网

    在大数据的生态环境中,做数据分析引擎的技术有Hive、Pig、SparkSQL等,今天就先来做pig的安装配置,hive的安装比pig复杂些,后面再做整理。

  1. 安装和配置
    1. 上传pig-0.17.0.tar.gz 到服务器
    2. 设置环境变量
      PIG_HOME=/root/training/pig-0.17.0
      export PIG_HOME
      PATH=$PIG_HOME/bin:$PATH
      export PATH
  2. pig操作的两种模式
    1. 本地模式:操作的是linux的文件

      启动命令:pig -x local
      启动后打印的日志中有如下的内容:Connection to hadoop file sysetm at: file

    2. 集群模式:操作的是hdfs文件,所以需要先启动hdfs,同时要设置一个环境变量PIG_CLASSPATH=$HADOOP_HOME/etc/hadoop //Hadoop配置文件所在的目录
      export PIG_CLASSPATH
      启动命令:pig
      启动后打印的日志:Connection to Hadoop file system at : hdfs://bigdata111:9000
    3. 退出命令:quit

本文链接http://element-ui.cn/news/show-576914.aspx