日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

HADOOP__PIG安装与配置

發布時間:2023/12/10 编程问答 36 豆豆
生活随笔 收集整理的這篇文章主要介紹了 HADOOP__PIG安装与配置 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

PIG安裝與配置

前提

  已成功安裝好Hadoop集群。

  詳見:http://www.cnblogs.com/freeideas/archive/2013/04/16/3023287.html

  以下只在一個結點做,PIG可以直接調用整個集群。此處我選擇了獨立于其他節點的Server(CentOS)節點。

安裝要求:

  Server節點要求。

  ①已安裝JDK。

  ②已有HADOOP目錄,并且其中的maters,slaves文件已做好配置.

  (最好可以直接拷貝集群中一個節點的HADOOP目錄)

  PIG安裝是比較容易的,相對于其他項目而言。

(一)下載解壓PIG

  Pig下載路徑,下載0.9.2(之前嘗試了其他版本報錯了:failed to create DataStorage嘗試比較低的版本,

  詳見:http://www.cnblogs.com/freeideas/archive/2013/04/22/3036690.html)

http://apache.dataguru.cn/pig/pig-0.9.2/pig-0.9.2.tar.gz

  將下載好的文件放到 /usr/hadoop/目錄下并解壓:

tar -zxvf?pig-0.9.2.tar.gz

(二)配置PIG環境

  配置用戶的環境變量:

vi ~/.bash_profile

  添加如下內容:

PATH=$PATH:/usr/hadoop/pig-0.9.2/bin:$HOME/bin
HADOOP_HOME=/usr/hadoop

export PATH
export HADOOP_HOME

  為什么這么設置: 將PIG的bin目錄添加到PATH中,可以直接在shell中敲入PIG命令進入程序,而非進入目錄再執行。PIG在執行的時候會自動讀取當前環境變量中的  HADOOP_HOME,從找到對應的HADOOP目錄,也會讀取JAVA_HOME來找到要使用的JAVA環境。
  注意:
  如果JDK沒有在/etc/profile中export的話,請在此處做一次export(JAVA_HOME是PIG中必須的一個變量)。

JAVA_HOME=/usr/jdk
export JAVA_HOME

  做好配置之后:

source ~/.bash_profile

  來執行這個文件,使剛配置好的環境變量生效

(三)運行PIG

  在shell中:

pig -x local

  進入本地模式

  之間鍵入:

pig

  進入集群模式

轉載于:https://www.cnblogs.com/freeideas/archive/2013/04/22/3036668.html

總結

以上是生活随笔為你收集整理的HADOOP__PIG安装与配置的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。