在開始配置前，我們先了解Hadoop的三種運行模式。

Hadoop的三種運行模式

• 獨立（或本地）模式：無需運行任何守護進程，所有程序都在同一個JVM上執行。在獨立模式下測試和調試MapReduce程序很方便，因此該模式在開發階段比較適合。
• **偽分布式模式：**Hadoop守護進程運行在本地機器上，模擬一個小規模的集群。
• **全分布式模式：**Hadoop守護進程運行在一個集群上。

下面我們進入正題，即如何在Windows 7上搭建Hadoop偽分布式環境。

安裝JDK，設置環境變量。
首先，在控制面板上查看自己的操作系統是32位還是64位。
然后，檢查自己的電腦上是否已經具備Java環境。步驟如下：
1）Ctrl+R
2）cmd
3）輸入java -version，若正常顯示java版本，證明本機已安裝java環境，跳到步驟2.若顯示“不是內部或外部命令”，則需要安裝JDK，繼續步驟4）
4） 安裝JDK，樓主用的是jdk-8u131-windows-x64.exe，因為不允許重復上傳CSDN資源，所以樓主無法提供給大家，可以自行下載。說明：只需安裝JDK，不需要安裝JRE。
5）配置Java環境變量，配置路徑：計算機（右鍵）–屬性–高級系統設置—高級–環境變量。
在系統變量處新建，變量名：JAVA_HOME；變量值：你安裝JDK的位置，樓主的是D:\Tools\jdk
修改path：在原有的那串變量值后增加%JAVA_HOME%\bin;…
6）測試Java環境
在cmd窗口：
測試Java環境：
echo %JAVA_HOME%
echo %path%
path
java -version
javac -version

下載Hadoop 2.7.7，這個樓主傳了資源，誠信賺分，哈哈（https://download.csdn.net/download/u013159040/10620584）
下載，解壓到某個文件夾，如D:\Tools\Hadoop

下載window util for hadoop。為了配合hadoop 2.7.7，樓主也上傳了資源（https://download.csdn.net/download/u013159040/10620589），下載后解壓到hadoop2.7.7的bin目錄下，直接覆蓋該目錄下的所有內容。請注意此util與具體的hadoop版本是有關的，如果選用不同的hadoop版本，需要找到正確的util。

添加Hadoop環境變量，參考Java的，新建HADOOP_HOME 變量名同樣是自己存放hadoop的位置，如D:\Tools\Hadoop\hadoop-2.7.7， 并添加path路徑：%HADOOP_HOME%\bin

創建nodename和datanode目錄，用來保存數據，如：
d:\tools\hadoop\data\namenode
d:\tools\hadoop\data\datanode

在D:\Tools\Hadoop\hadoop-2.7.7\etc\hadoop里修改4個配置文件：core-site.xml, hdfs-site.xml, mapred-site.xml, yarn-site.xml

<configuration><property><name>fs.defaultFS</name><value>hdfs://localhost:9000</value></property> </configuration>

hdfs-site.xml（不要直接復制樓主的，要看看自己的namenode和datanode存放的位置是否和樓主一致，不一致的要修改）：

<configuration><property><name>dfs.replication</name><value>1</value></property><property><name>dfs.namenode.name.dir</name><value>/D:/Tools/data/namenode</value></property><property><name>dfs.datanode.data.dir</name><value>/D:/Tools/data/datanode</value></property> </configuration>

mapred-site.xml：

<configuration><property><name>mapreduce.framework.name</name><value>yarn</value></property> </configuration>

yarn-site.xml：

<configuration><!-- Site specific YARN configuration properties --><property><name>yarn.nodemanager.aux-services</name><value>mapreduce_shuffle</value></property><property><name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name><value>org.apache.hadoop.mapred.ShuffleHandler</value></property><property><name>yarn.scheduler.minimum-allocation-mb</name><value>1024</value></property><property><name>yarn.nodemanager.resource.memory-mb</name><value>4096</value></property><property><name>yarn.nodemanager.resource.cpu-vcores</name><value>2</value></property> </configuration>

7.上面步驟完成設置后，就可以試著運行Hadoop了。
Hadoop 啟動命令start -all.cmd
Hadoop 結束命令stop -all.cmd
進入到自己的hadoop sbin目錄（一直cd就行了），啟動start-all.cmd，再jps查看java進程，如下圖

同時，會跳出4個窗口

web方式查看文件系統：http://localhost:50070/
查看mapreduce job：http://localhost:8088
由NameNode（守護進程）服務提供

---

下面可以測試Hadoop自帶的Wordcount

在d盤新建一個txt文件t1.txt

把t1上傳到HDFS: hadoop fs -put d:\t1.txt /t1/t1.txt

cd進到mapreduce，然后可以開始運行wordcount了：
hadoop jar /D:\Application\hadoop-2.7.7\share\hadoop\mapreduce\hadoop-mapreduce-examples-2.7.7.jar wordcount \t1 \output

然后我們可以看到詞頻統計結果：

網頁上查看的如下：

可以下載分布式文件系統上的這個t1.txt文件。

——————————————–歡迎一起學習探討————————————————

總結

以上是生活随笔為你收集整理的Windows 7 64位系统上搭建Hadoop伪分布式环境（很详细）的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。