*實(shí)驗(yàn)環(huán)境：
*********************************************************************************
hadoop集群（virtualBox虛擬機(jī)，CentOS6.4）
hadoop1 192.168.100.171（hadoop master、secondaryname、zookeeper、hbase HMaster）
hadoop2 192.168.100.172（zookeeper、hbase HRegion、Hive Shell）
hadoop3 192.168.100.173（hadoop slave、zookeeper、hbase HRegion）
hadoop4 192.168.100.174（hadoop slave、zookeeper、hbase HRegion）
hadoop5 192.168.100.175（hadoop slave、zookeeper、hbase HRegion）
dataserver 192.168.100.141（Hive metastore、MySQL Server、Oracle）
安裝文檔： hadoop2.2.0測(cè)試環(huán)境搭建 ?
*********************************************************************************
本次測(cè)試在dataserver進(jìn)行

#yum install gcc-gfortran????????????? #否則報(bào)”configure: error: No F77 compiler found”錯(cuò)誤

#yum install gcc gcc-c++????????????? #否則報(bào)”configure: error: C++ preprocessor “/lib/cpp” fails sanity check”錯(cuò)誤

#yum install readline-devel????????? #否則報(bào)”–with-readline=yes (default) and headers/libs are not available”錯(cuò)誤

#yum install libXt-devel???????????????? #否則報(bào)”configure: error: –with-x=yes (default) and X11 headers/libs are not available”錯(cuò)誤

1：下載RHadoop相關(guān)軟件包，放置在/mnt/mydisk/R/目錄下
http://www.r-project.org/
R語(yǔ)言包
https://github.com/RevolutionAnalytics/RHadoop/wiki/Downloads
rhdfs? ???R使用HDFS相關(guān)軟件包
rmr? ? R使用MapReduce相關(guān)軟件包
rhbase? ? R使用Hbase相關(guān)軟件包
?

2：安裝R語(yǔ)言
[root@dataserver app]# tar zxf /mnt/mydisk/soft/R/R-3.0.2.tar.gz?
[root@dataserver app]# cd R-3.0.2
[root@dataserver R-3.0.2]# yum install readline-devel?
[root@dataserver R-3.0.2]# yum install libXt-devel?
[root@dataserver R-3.0.2]# ./configure --enable-R-shlib?
[root@dataserver R-3.0.2]# make?
[root@dataserver R-3.0.2]# make install
其中readline-devel、libXt-devel在編譯R的時(shí)候需要，而--enable-R-shlib是安裝R的共享庫(kù)，在安裝Rstudio需要。

3：確認(rèn)Java環(huán)境變量
RHadoop依賴(lài)于rJava包，安裝rJava前確認(rèn)已經(jīng)配置了Java環(huán)境變量，然后進(jìn)行R對(duì)jvm建立連接。
[root@dataserver R-3.0.2]# cat /etc/profile
export JAVA_HOME=/usr/lib/jdk1.7.0_21
export JRE_HOME=/usr/lib/jdk1.7.0_21/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib/tools.jar
export PATH=${JAVA_HOME}/bin:${JRE_HOME}/bin:$PATH

[root@dataserver R-3.0.2]# R CMD javareconf

4：安裝相關(guān)的依賴(lài)包，確保RHadoop軟件包能正常使用
[root@dataserver R-3.0.2]# R?
> install.packages("rJava")?
> install.packages("reshape2")?
> install.packages("Rcpp")?
> install.packages("iterators")?
> install.packages("itertools")?
> install.packages("digest")?
> install.packages("RJSONIO")?
> install.packages("functional")?
> install.packages("bitops")?
> quit()

5：安裝RHadoop軟件包
[root@dataserver R-3.0.2]# export HADOOP_CMD=/app/hadoop/hadoop220/bin/hadoop
[root@dataserver R-3.0.2]# export HADOOP_STREAMING=/app/hadoop/hadoop220/share/hadoop/tools/lib/hadoop-streaming-2.2.0.jar
[root@dataserver R-3.0.2]# R CMD INSTALL /mnt/mydisk/soft/R/rhdfs_1.0.8.tar.gz
[root@dataserver R-3.0.2]# R CMD INSTALL /mnt/mydisk/soft/R/rmr2_2.3.0.tar.gz

**************************************************************************************************
HADOOP_CMD=/app/hadoop/hadoop220/bin/hadoop
HADOOP_STREAMING=/app/hadoop/hadoop220/share/hadoop/tools/lib/hadoop-streaming-2.2.0.jar
加入/etc/profile或用戶(hù)的.bashrc中
**************************************************************************************************

6：使用RHadoop軟件包
[root@dataserver R-3.0.2]# R?
> library(rhdfs)
> hdfs.init()?
> hdfs.ls("/")
?

7：安裝Rstudio
[root@dataserver R-3.0.2]# cd ..
[root@dataserver app]# rm -rf R-3.0.2
[root@dataserver app]# tar -zxf /mnt/mydisk/soft/R/rstudio-0.98.484-x86_64-fedora.tar.gz

8：TIPS
A：R相關(guān)的軟件包安裝在/usr/local/lib64/R/library下，可以在該目錄下查看是否已經(jīng)安裝了相應(yīng)的軟件包。
B：如果安裝的時(shí)候不是用root身份安裝，則R安裝的軟件包會(huì)在用戶(hù)目錄上，其他用戶(hù)將使用不了軟件包。
C：如果使用的hadoop集群是hadoop1.2.0,則配置參數(shù)為：
export HADOOP_CMD=/app/hadoop/hadoop120/bin/hadoop
export HADOOP_STREAMING=/app/hadoop/hadoop120/contrib/streaming/hadoop-streaming-1.2.0.jar

D：在安裝rhbase軟件需要安裝thrift，在后面章節(jié)介紹。

*實(shí)驗(yàn)環(huán)境：
**************************************************************************************
hadoop集群（virtualBox虛擬機(jī)，CentOS6.4）
hadoop1 192.168.100.171（hadoop master、secondaryname、zookeeper、hbase HMaster）
hadoop2 192.168.100.172（zookeeper、hbase HRegion、Hive Shell）
hadoop3 192.168.100.173（hadoop slave、zookeeper、hbase HRegion）
hadoop4 192.168.100.174（hadoop slave、zookeeper、hbase HRegion）
hadoop5 192.168.100.175（hadoop slave、zookeeper、hbase HRegion）
dataserver 192.168.100.141（Hive metastore、MySQL Server、Oracle）
相關(guān)的安裝文檔：hadoop2.2.0測(cè)試環(huán)境搭建?????Hbase0.96.0 +hadoop2.2.0安裝?????RHadoop搭建(HDFS+MapReduce)?
**************************************************************************************
本次測(cè)試在dataserver進(jìn)行

1：安裝thrift0.9.1
[root@dataserver app]# sudo yum install automake libtool flex bison pkgconfig gcc-c++ boost-devel libevent-devel zlib-devel python-devel ruby-devel
[root@dataserver app]# tar zxf /mnt/mydisk/soft/program/thrift-0.9.1.tar.gz
[root@dataserver app]# cd thrift-0.9.1
[root@dataserver thrift-0.9.1]# ./configure
**************************************************************************************

?注意安裝thrift安裝上要使用Python庫(kù)，如果要使用其他語(yǔ)言就安裝上相應(yīng)的語(yǔ)言庫(kù)
**************************************************************************************
[root@dataserver thrift-0.9.1]# make
**************************************************************************************
?注意如果要編譯C++庫(kù)的話(huà)，會(huì)出現(xiàn)上面的錯(cuò)誤，原因是編譯文件路徑有問(wèn)題，可以將已經(jīng)編譯的test/cpp/*.o復(fù)制到test/cpp/.libs后，繼續(xù)編譯就可以了。當(dāng)然不怕麻煩的話(huà)，可以修改一下編譯文件。
[root@dataserver thrift-0.9.1] cd test/cpp
[root@dataserver cpp]# cp *.o .libs/
**************************************************************************************
[root@dataserver thrift-0.9.1]# make install
[root@dataserver thrift-0.9.1]# thrift --version

2：安裝rhase
[root@dataserver /]# export PKG_CONFIG_PATH=$PKG_CONFIG_PATH:/usr/local/lib/pkgconfig/
[root@dataserver /]# pkg-config --cflags thrift
**************************************************************************************
正確的返回結(jié)果是：
-I/usr/local/include/thrift
如果是：
-I/usr/local/include
則：
[root@dataserver /]# vi /usr/local/lib/pkgconfig/thrift.pc
Cflags: -I${includedir}/thrift
**************************************************************************************
[root@dataserver lib]# cp /usr/local/lib/libthrift-0.9.1.so /usr/lib/
[root@dataserver lib]# /sbin/ldconfig /usr/lib/libthrift-0.9.1.so
**************************************************************************************
注意要將動(dòng)態(tài)鏈接庫(kù)libthrift-0.9.1.so為系統(tǒng)所共享，不然會(huì)出現(xiàn)類(lèi)似unable to load shared object '/usr/lib64/R/library/rhbase/libs/rhbase.so':libthrift-0.9.1.so: cannot open shared object file的錯(cuò)誤
**************************************************************************************
[root@dataserver usr]# R CMD INSTALL /mnt/mydisk/soft/R/rhbase_1.2.0.tar.gz?


3：啟動(dòng)hadoop集群、zookeeper集群、HBase集群

4：rhbase測(cè)試

總結(jié)

以上是生活随笔為你收集整理的RHadoop安装的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。