日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

离线在CentOS上安装CDH

發布時間:2025/5/22 32 豆豆
生活随笔 收集整理的這篇文章主要介紹了 离线在CentOS上安装CDH 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

前兩天裝了一個5節點的CDH5.7.0測試環境,因為管理員不給開互聯網連接,所以只能離線本地安裝。記錄了一下大概的安裝步驟。因為過了兩天,按照回憶寫的,部分步驟可能不全。
1、 準備工作
操作系統:CentOS6.4,設置本地YUM源。

5個節點
XXX.XXX.XXX.11 cdh1(namenode)
XXX.XXX.XXX.12 cdh2
XXX.XXX.XXX.13 cdh3
XXX.XXX.XXX.14 cdh4
XXX.XXX.XXX.15 cdh5

關閉所有節點防火墻

sudo service iptables stopsudo chkconfig iptables offsudo vi /etc/selinux/config SELINUX=disabled

在 namenode節點安裝http服務并啟動

yum install httpdservice httpd startchkconfig httpd on

配置所有節點hosts文件

vi /etc/hosts

內容如下
127.0.0.1 localhost localhost localhost4 localhost44
::1 localhost localhost localhost6 localhost66
XXX.XXX.XXX.11 cdh1
XXX.XXX.XXX.12 cdh2
XXX.XXX.XXX.13 cdh3
XXX.XXX.XXX.14 cdh4
XXX.XXX.XXX.15 cdh5
XXX.XXX.XXX.11 archive.cloudera.com

所有節點安裝ssh
yum install openssh-clients

2、下載cdh5.7.0和cm5.7.0
下載CM5.7.0.:
http://archive.cloudera.com/cm5/cm/5/ cloudera-manager-xenial-cm5.7.0_amd64.tar.gz

下載CDH5.7.0:
http://archive-primary.cloudera.com/cdh5/repo-as-tarball/5.7.0/cdh5.7.0-ubuntu16-04.tar.gz

下載Key
http://archive.cloudera.com/navigator-keytrustee5/redhat/6/x86_64/navigator-keytrustee/5/

將下載的文件解壓至相應目錄如下
mkdir -p /var/www/html/cm5/redhat/6/x86_64/
mkdir -p /var/www/html/cdh5/redhat/6/x86_64/
mkdir -p /var/www/html/navigator-keytrustee5/redhat/6/x86_64/

訪問http://cdh1/cm5/redhat/6/x86_64/cm/5/RPMS/x86_64/驗證是否可以訪問,也可以使用archive.cloudera.com的域名驗證一下

3、配置yum文件
cd /etc/yum.repos.d/
下載數據源的repo文件:
http://archive-primary.cloudera.com/cdh5/redhat/6/x86_64/cdh/cloudera-cdh5.repo
http://archive-primary.cloudera.com/cm5/redhat/6/x86_64/cm/cloudera-manager.repo
http://archive-primary.cloudera.com/navigator-keytrustee5/redhat/6/x86_64/navigator-keytrustee/navigator-keytrustee5.repo

下載下來的文件,baseurl的值都是使用archive.cloudera.com的域名,我們已經在hosts文件中重定向到了namenode節點

4、安裝cm5.7.0
下載cloudera-manager-installer.bin:
http://archive-primary.cloudera.com/cm5/installer/5.7.0/cloudera-manager-installer.bin
給下載下來的文件執行權限
chmod +x cloudera-manager-installer.bin
等待一小會就安裝完成了,即可訪問http://namenode:7180訪問進行cdh的安裝。注意:在此種安裝方法中不需要建立服務器間的互信,也不需要安裝JDK

5、一鍵安裝cdh
登錄頁面,使用 admin/admin登錄,根絕界面提示一步步安裝即可。

在安裝的時候如果提示HTTPS訪問不了,就在NameNode上配置HTTPS服務,如果繼續提示這個HTTPS不安全什么的,就把對HTTPS安全的驗證先關了。

總結

以上是生活随笔為你收集整理的离线在CentOS上安装CDH的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。