日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

杨校老师课堂之Hadoop环境搭建(一)

發布時間:2023/12/20 编程问答 27 豆豆
生活随笔 收集整理的這篇文章主要介紹了 杨校老师课堂之Hadoop环境搭建(一) 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

一、搭建Java開發環境

1. 先查看安裝后的鏡像中是否存在Java

[root@hadoop1 java]# java -versionopenjdk version "1.8.0_181" OpenJDK Runtime Environment (build 1.8.0_181-b13) OpenJDK 64-Bit Server VM (build 25.181-b13, mixed mode)

2. 通過查看,發現原有系統默認安裝了open Jdk ,接下來我們卸載原有的Open JDK,安裝Oracle JDK

  • 2.1 查看java安裝軟件
[root@hadoop1 java]# rpm -qa|grep javapython-javapackages-3.4.1-11.el7.noarch java-1.8.0-openjdk-headless-1.8.0.181-7.b13.el7.x86_64 tzdata-java-2018e-3.el7.noarch java-1.8.0-openjdk-1.8.0.181-7.b13.el7.x86_64 javapackages-tools-3.4.1-11.el7.noarch
  • 2.2 分別卸載java軟件,程序命令:rpm ;卸載參數:e; 解除軟件間的依賴:nodeps
[root@hadoop1 java]# rpm -e --nodeps java-1.8.0-openjdk [root@hadoop1 java]# rpm -e --nodeps javapackages-tools [root@hadoop1 java]# rpm -e --nodeps java-1.8.0-openjdk-headless [root@hadoop1 java]# rpm -e --nodeps tzdata-java
  • 2.3 上傳 Oracle JDK

注意:
如果拖拽不可以完成上傳功能,可能是缺少上傳的插件,執行下方命令在線安裝即可。

yum -y install lrzsz # 上傳的插件

  • 2.4 上傳完成后,查詢文件是否存在,及所在位置命令
[root@hadoop1 java]# ll 總用量 141540 -rw-r--r--. 1 root root 144935989 615 2021 jdk-8u291-linux-x64.tar.gz [root@hadoop1 java]# pwd /usr/local/java

3. 解壓jdk目錄

[root@hadoop1 java]# tar -zxvf jdk-8u291-linux-x64.tar.gz # 解壓后查看 [root@hadoop1 java]# ll 總用量 141540 drwxr-xr-x. 8 10143 10143 273 48 2021 jdk1.8.0_291 -rw-r--r--. 1 root root 144935989 615 2021 jdk-8u291-linux-x64.tar.gz

4. 配置java的環境變量

  • 4.1 采用vim命令編輯/etc/profile文件,在文件末尾加上環境變量參數
# Java Environement Variable export JAVA_HOME=/usr/local/java/jdk1.8.0_291 export PATH=$PATH:$JAVA_HOME/bin export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
  • 4.2 更新環境變量的配置文件/etc/profile,才可以使得上述配置生效:
[root@hadoop1 jdk1.8.0_291]# source /etc/profile

5. 檢驗Java是否配置成功

[root@hadoop1 jdk1.8.0_291]# java -versionjava version "1.8.0_291" Java(TM) SE Runtime Environment (build 1.8.0_291-b10) Java HotSpot(TM) 64-Bit Server VM (build 25.291-b10, mixed mode)

二、 搭建Hadoop環境

1.hadoop下載

點我去下載,或訪問:http://archive.apache.org/dist/hadoop/common/

提示: 我這使用的是2.7.4,利用IDM軟件進行下載,速度會有所提升!

  • Hadoop安裝與配置
    • 2.1 上傳Hadoop安裝包
    [root@hadoop1 hadoop]# ll 總用量 260440 -rw-r--r--. 1 root root 266688029 323 11:57 hadoop-2.7.4.tar.gz[root@hadoop1 hadoop]# pwd /usr/local/hadoop
    • 2.2 解壓Hadoop安裝包
    [root@hadoop1 hadoop]# tar -zxvf hadoop-2.7.4.tar.gz [root@hadoop1 hadoop]# ll 總用量 260440 drwxr-xr-x. 10 20415 101 160 81 2017 hadoop-2.7.4 -rw-r--r--. 1 root root 266688029 323 11:57 hadoop-2.7.4.tar.gz

    3. 配置hadoop的環境變量

    • 3.1 采用vim命令編輯/etc/profile文件,在文件末尾加上環境變量參數
    # Hadoop Environment Variable export HADOOP_HOME=/usr/local/hadoop/hadoop-2.7.4 export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
    • 3.2 更新環境變量的配置文件/etc/profile,才可以使得上述配置生效:
    [root@hadoop1 hadoop]# source /etc/profile

    4. 檢驗Hadoop是否配置成功

    # 需要注意: version前面沒有橫杠哦! “-” [root@hadoop1 hadoop]# hadoop versionHadoop 2.7.4 Subversion https://shv@git-wip-us.apache.org/repos/asf/hadoop.git -r cd915e1e8d9d0131462a0b7301586c175728a282 Compiled by kshvachk on 2017-08-01T00:29Z Compiled with protoc 2.5.0 From source with checksum 50b0468318b4ce9bd24dc467b7ce1148 This command was run using /usr/local/hadoop/hadoop-2.7.4/share/hadoop/common/hadoop-common-2.7.4.jar

    作者: 楊校

    出處: https://mryang.blog.csdn.net

    分享是快樂的,也見證了個人成長歷程,文章大多都是工作經驗總結以及平時學習積累,基于自身認知不足之處在所難免,也請大家指正,共同進步。

    本文版權歸作者所有,歡迎轉載,但未經作者同意必須保留此段聲明,且在文章頁面明顯位置給出, 如有問題, 可郵件(397583050@qq.com)咨詢

    總結

    以上是生活随笔為你收集整理的杨校老师课堂之Hadoop环境搭建(一)的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。