日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

【Hadoop】MAC下hadoop2.6安装以及执行wordcount

發布時間:2025/4/5 编程问答 30 豆豆
生活随笔 收集整理的這篇文章主要介紹了 【Hadoop】MAC下hadoop2.6安装以及执行wordcount 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

首先簡單介紹下博主的配置環境

  • MAC 10.10.0
  • hadoop 2.6
  • JDK 1.6(可以在shell里用jdk -version查詢)

hadoop安裝

安裝的話推薦使用mac下面的brew,理由就是用brew安裝的話,它會自動給幫你配置好相應的路徑。當然也可以到官網下載,注意jdk和hadoop版本要對應。

brew install hadoop

安裝好了之后,可以使用brew list hadoop 來查看。
位置應該是在:/usr/local/Cellar/hadoop/
這時候就可以直接在shell里執行hadoop命令,是不是很方便。

執行wordcount

首先說一下,現在要執行的wordcount只是簡單試驗下hadoop是否能工作,并不是多線程的偽分布式,因為還沒有配置,這個下一節會講。

1.首先我們先建立以下數據源
在hadoop根目錄下,建立一個文件夾,叫“input”
在里面放上txt數據,我直接把”readme.txt”copy 進去了
2.這時候我們就可以執行hadoop的自帶命令了
首先要找到 hadoop-mapreduce-examples-2.6.0.jar 這個文件的路徑,因為自帶的例子都是在這個里面的。
jar 命令來執行,因為都是java寫的嘛。

3.執行命令

hadoop jar /usr/local/Cellar/hadoop/2.6.0/libexec/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0.jar wordcount input output 4.效果
這時候你會發現shell蹦出一大串東西
最終會生成一個output文件夾,里面的東西打開,就是wordcount

本文來自博客 “李博Garvin“
轉載請標明出處:http://blog.csdn.net/buptgshengod

總結

以上是生活随笔為你收集整理的【Hadoop】MAC下hadoop2.6安装以及执行wordcount的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。