日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 运维知识 > windows >内容正文

windows

Windows安装hadoop

發布時間:2023/12/18 windows 28 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Windows安装hadoop 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
首先安裝cygwin 見同一目錄下的“下載安裝Cygwin.mht”,或者上谷歌搜索關鍵字“下載安裝Cygwin.mht”。
然后安裝hadoop-0.21.0,步驟如下10步:
?1. 打開cygwin
?進入D盤目錄下的Hadoop文件夾:cd D:/Hadoop
?2. 安裝hadoop:? tar -zvxf hadoop-0.20.1.tar.gz
?3. 解壓完成后進入hadoop-0.20.1的配置目錄,打開core-site.xml,加入以下內容。這里是定義namenode運行地址和端口
?<property>
??<name>fs.default.name</name>
??<value>hdfs://localhost:9000</value>
?? </property>
?4. 打開hdfs-site.xml,加入以下內容
?? <property>
??<name>dfs.replication</name>
??<value>1</value>
?? </property>
??
?? <property>
??<name>dfs.name.dir</name>
??<value>/Hadoop/namenode</value>
?? </property>

?? <property>
??<name>dfs.data.dir</name>
??<value>/Hadoop/datanode</value>
?? </property>
?5. 最后修改hadoop-env.sh,把下面注釋的這行打開,并設置為你的jdk路徑。
??如果你的java在Program Files下,則整個jdk路徑加引號,最好是把jdk目錄設置到如下:D:\Java\jdk1.6.0_26
??但是你可以這么做:
???在Hadoop的配置文件,hadoop-env.sh中,需要添加Java SDK的路徑。
???要知道,Cygwin中并沒有安裝Java,那么只能使用Windows下安裝的JDK。
???看了網上的文章,只是提到說export后面的路徑需要用雙引號括起來,
???因為一般JDK都是安裝在“Program Files”下的。但是我這么添加以后,就是不行,
???報錯“JAVA_HOME is not set”還是“…Program cannot found”來著,不太記得了,
???反正就是啟動Hadoop的時候報錯。經過研究后知道,首先Cygwin下不能使用windows的路徑直接訪問,
???需要是Linux風格的目錄,如果是訪問C盤下安裝的JDK的話,不能使用“C:/Program Files/Java/jdk1.6.0_22”,
???而需要使用這樣“/cygdrive/c/Program Files/Java/jdk1.6.0_22”;其次是hadoop好像不能識別帶空格的目錄路徑,
???那怎么辦呢,想到了符號鏈接,通過在Cygwin下創建一個符號鏈接,指向我的JDK安裝目錄,
???使用這樣的命令:ln “C:/Program Files/Java/jdk1.6.0_22” /usr/local/jdk1.6.0_22.
???這樣就在/usr/local/下創建了一個Windows下JDK目錄的符號鏈接,如果使用:cd /usr/local/jdk1.6.0_22,
???然后ls下,就會發現已經在jdk的安裝目錄下了。然后在hadoop-env.sh中export JAVA_HOME=/usr/local/jdk1.6.0_22,
???這樣就OK了

??因為我安裝的時候,在Program Files中沒有安裝成功。修改為如下內容:
??# The java implementation to use.? Required.
??export JAVA_HOME=/cygdrive/d/Java/jdk1.6.0_26
?6. 在cygwin下進入bin目錄,首先需要格式化namenode
??cd D:\Hadoop\hadoop-0.21.0\bin
??./hadoop namenode -format
??這里會報這個錯:
??java.lang.NoClassDefFoundError: org/apache/hadoop/util/PlatformName
??Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.util.PlatformName
??
???? at java.net.URLClassLoader$1.run(URLClassLoader.java:202)
???? at java.security.AccessController.doPrivileged(Native Method)
???? at java.net.URLClassLoader.findClass(URLClassLoader.java:190)
???? at java.lang.ClassLoader.loadClass(ClassLoader.java:307)
???? at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:301)
???? at java.lang.ClassLoader.loadClass(ClassLoader.java:248)
??Could not find the main class: org.apache.hadoop.util.PlatformName.? Program will exit.
??解決辦法如下:
??只需要將${HADOOP_HOME}/bin/hadoop-config.sh文件中的第190行的一下的內容
??JAVA_PLATFORM=`CLASSPATH=${CLASSPATH} ${JAVA} -Xmx32m ${HADOOP_JAVA_PLATFORM_OPTS} org.apache.hadoop.util.PlatformName | sed -e "s/ /_/g"`
??改成
??JAVA_PLATFORM=`CLASSPATH=${CLASSPATH} ${JAVA} -Xmx32m -classpath ${HADOOP_COMMON_HOME}/hadoop-common-0.21.0.jar org.apache.hadoop.util.PlatformName | sed -e "s/ /_/g"`
?7. 啟動namenode: ./hadoop namenode
?8. 啟動datanode: ./hadoop datanode
?9. 嘗試上傳文件:./hadoop fs -put d:/download/test.rar /tt/vm.rar
??然后list一下
??./hadoop fs -lsr /tt
??結果如下:
??-rw-r--r--?? 1 Administrator supergroup?? 20793970 2010-01-18 15:52 /tt/vm.rar
??可以在本地文件中(記得這個配置吧/Hadoop/datanode?數據文件存放地)
??D:\Hadoop\datanode\current\finalized中看到拷貝的文件,但是文件名是blk_6098310948767462040這種,可以看大小啦。。。
?10. 結束,祝大家成功。

總結

以上是生活随笔為你收集整理的Windows安装hadoop的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。

主站蜘蛛池模板: 一区二区免费av | 人人妻人人藻人人爽欧美一区 | www.av在线播放| 中文字幕视频一区 | 99国产精品自拍 | 天天操天天草 | 99精品国自产在线 | www.国产 | 懂色av蜜臀av粉嫩av喷吹 | 丰满秘书被猛烈进入高清播放在 | 韩日少妇 | 亚洲国产网 | 婷婷久久五月 | 欧美高清久久 | 色噜 | 日本一区二区在线看 | 国产偷人妻精品一区 | 日韩综合在线视频 | 亚洲第一黄色网 | 性一交一乱一色一视频麻豆 | 日本黄色不卡视频 | 日本h片在线观看 | 一级特黄a| 国产精品国产一区二区三区四区 | 国产天堂精品 | xx久久| 天天噜| 国产a自拍 | 成人综合影院 | av番号网 | 国产十八熟妇av成人一区 | 欧美日韩毛片 | 成人在线观看一区二区三区 | 午夜av一区 | 麻豆综合网 | 疯狂揉花蒂控制高潮h | 久色国产 | 日韩视频免费在线播放 | 制服丝袜一区在线 | 天天操网 | 黄色91视频 | 国产网红女主播精品视频 | 手机在线看永久av片免费 | 四虎永久地址 | 一本大道东京热无码 | 亚洲最新av网址 | 在线观看深夜视频 | 伊人久久国产 | 久久精品播放 | 免费观看黄色的网站 | 你懂的网站在线观看 | 久久久久久国产精品免费免费 | 欧美精品欧美精品系列 | 亚洲无限av| 亚洲永久在线观看 | 色视频在线观看 | 国产一区二区三区在线观看视频 | 精品999视频 | 亚洲乱码精品 | 狠狠综合久久av一区二区 | 欧美一线天 | 一区二区毛片 | 亚洲制服另类 | 午夜毛片电影 | 蜜桃视频一区二区三区在线观看 | 99中文字幕在线观看 | 爱操在线 | 中文字幕在线一区二区三区 | 日韩特级 | 天天操天天射天天舔 | 久久综合伊人 | 亚洲无码久久久久 | 欧美成片vs欧美 | 国产女主播一区 | 一区二区三区精品免费视频 | 国产一区二区三区中文字幕 | 欧美另类人妖 | 黄一区二区三区 | 黄色一级片 | 入禽太深免费视频 | 免费黄色网址在线观看 | 日本www高清视频 | 大乳村妇的性需求 | 亚洲涩涩涩 | 看av网址 | 修女也疯狂3免费观看完整版 | 欧美性受xxxx黑人猛交88 | 永久看看免费大片 | 日本学生初尝黑人巨免费视频 | 国产免费一区二区三区 | 国产色婷婷 | 午夜影院欧美 | 国产xxxx孕妇| 91在线精品一区二区 | 久久天天东北熟女毛茸茸 | 欧美熟妇精品久久久久久 | 亚洲av无码国产精品久久久久 | 亚洲www. | 色综合五月婷婷 |