日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當(dāng)前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Hadoop安装过程

發(fā)布時間:2024/10/12 编程问答 31 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Hadoop安装过程 小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.

1、安裝JDK

apt-get install openjdk-7-jdk

2、配置環(huán)境變量

vim /etc/profile

編輯:

export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64(jdk安裝位置)

export JRE_HOME=$JAVA_HOME/jre

export CLASSPATH=$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH

export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH

讓配置生效:

source /etc/profile

3、配置Hadoop

3.1 下載Hadoop:

wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz

?

3.2 放到/opt/下

root@imooc:~# mv hadoop-1.2.1.tar.gz /opt/

3.3 解壓:

root@imooc:/opt# tar -zxvf?hadoop-1.2.1.tar.gz

3.4 配置文件:

root@imooc:/opt# cd hadoop-1.2.1/conf/

需要修改的有四個文件:mapred-site.xml ? ?core-site.xml ? ?hdfs-site.xml ? ?hadoop-env.sh

3.4.1 vim hadoop-env.sh

修改JAVA_HOME配置(可用echo $JAVA_HOME查看JAVA_HOME位置)

export JAVA_HOME=/usr/lib/jvm/java-7-openjdk-amd64

3.4.2 vim core-site.xml
<configuration><!-- hadoop工作目錄 --><property><name>hadoop.tmp.dir</name><value>/hadoop</value></property><!-- namenode所有元數(shù)據(jù)目錄 --><property><name>dfs.name.dir</name><value>/hadoop/name</value></property><!-- 文件系統(tǒng)namenode改如何訪問,其中imooc為host的name --><property><name>fs.default.dir</name><value>hdfs://imooc:9000</value></property> </configuration>
3.4.3 vim hdfs-site.xml
<configuration><!-- 文件系統(tǒng)數(shù)據(jù)存放目錄 --><property><name>dfs.data.dir</name><value>/hadoop/data</value></property> </configuration>
3.4.4 vim?mapred-site.xml
<configuration><property><!-- 配置任務(wù)調(diào)度器改如何訪問,其中imooc為主機(jī)名 --><name>mapred.job.tracker</name><value>imooc:9001</value></property> </configuration>

3.5 配置hadoop環(huán)境變量

vim /etc/profile

加上 export HADOOP_HOME=/opt/hadoop-1.2.1

PATH加上$HADOOP_HOME/bin

生效 source /etc/profile

執(zhí)行hadoop命令,如果有改命令則配置成功,改命令在 /opt/hadoop-1.2.1/bin/ 下。

4、啟動hadoop

啟動之前先對namenode進(jìn)行格式化:hadoop namenode -format

啟動:start-all.sh(改命令在 /opt/hadoop-1.2.1/bin/ 下),期間需要輸出幾次密碼

執(zhí)行jps,如果看到JobTracker ? Jps ?DataNode ? TaskTracker ? NameNode ? SecondaryNameNode說明hadoop正常運(yùn)行

?

轉(zhuǎn)載于:https://www.cnblogs.com/LinKArftc/p/4933020.html

總結(jié)

以上是生活随笔為你收集整理的Hadoop安装过程的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯,歡迎將生活随笔推薦給好友。