【Hadoop】MAC下hadoop2.6安装以及执行wordcount
生活随笔
收集整理的這篇文章主要介紹了
【Hadoop】MAC下hadoop2.6安装以及执行wordcount
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
首先簡單介紹下博主的配置環境
- MAC 10.10.0
- hadoop 2.6
- JDK 1.6(可以在shell里用jdk -version查詢)
hadoop安裝
安裝的話推薦使用mac下面的brew,理由就是用brew安裝的話,它會自動給幫你配置好相應的路徑。當然也可以到官網下載,注意jdk和hadoop版本要對應。
brew install hadoop安裝好了之后,可以使用brew list hadoop 來查看。
位置應該是在:/usr/local/Cellar/hadoop/
這時候就可以直接在shell里執行hadoop命令,是不是很方便。
執行wordcount
首先說一下,現在要執行的wordcount只是簡單試驗下hadoop是否能工作,并不是多線程的偽分布式,因為還沒有配置,這個下一節會講。
1.首先我們先建立以下數據源3.執行命令
hadoop jar /usr/local/Cellar/hadoop/2.6.0/libexec/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0.jar wordcount input output 4.效果本文來自博客 “李博Garvin“
轉載請標明出處:http://blog.csdn.net/buptgshengod
總結
以上是生活随笔為你收集整理的【Hadoop】MAC下hadoop2.6安装以及执行wordcount的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: shell启动sublime
- 下一篇: 【LeetCode从零单排】No221.