Eclipse+MapReduce開發環境

集群部署centos+jdk1.8+Hadoop2.7.2；

開發端windows+Eclipse Mars.1 Release (4.5.1)

1）hadoop-eclipse-plugin插件

需要編譯，可用網上現成，這里找到hadoop-eclipse-plugin-2.7.2.jar下載（要注意編譯plugin的jdk版本，后面eclipse環境和centos下jdk環境也要一致），放在eclipse的plugins文件夾。

下載hadoop-2.7.4.tar.gz解壓到D:/dev/hadoop-2.7.4目錄，配置到：

2）插件配置

打開Map/Reduce的Perspective：

點擊小象，設置集群信息：

連接成功：

3）WordCount示例

代碼參考官網，運行時設置：

?備注：提示winutils.exe問題，去下載一個放到hadoop路徑bin下就可以。

總結

以上是生活随笔為你收集整理的【数据平台】Eclipse+MapReduce开发环境(集群运行模式)的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。