Hadoop端口介紹

9000 namenode的常用端口 給機子
8020 namenode的RPC調用端口（接收Client連接的RPC端口，用于獲取文件系統(tǒng)metadata信息）
50070 namenode http HDFS查看端口 web
50470 https 查看HDFS端口
50090 secondaryNamenode
8088 ResourceManager YARN集群端口
8089 Web Application Proxy web代理
10020 JobHistory(host)
19888 JobHistory (web)
8030-8033 resourcemanage組件

Hadoop各種啟動命令列表

Start-all.sh/Stop-all.sh ??開啟關閉所有進程

Start-dfs.sh ?? 開啟hdfs 進程

Start-yarn.sh ??開啟yarn進程

Hadoop namenode –format?? 對HDFS進行格式化

hadoop-daemon.sh start namenode ?? 單獨啟動namenode

hadoop-daemons.sh start datanode?? 單獨啟動datanode

yarn-daemon.sh start resourcemanager?? 啟動resourcemanager

yarn-daemons.sh start nodemanager?? 啟動nodemanager

yarn-daemon.sh start proxyserver?? 啟動yarn日志代理服務

mr-jobhistory-daemon.sh start historyserver?? 啟動MR的jobhistory服務 歷史服務器開啟

Hadoop的基準測試

Yarn jar hadoop-mapreduce-client-joblient-tests.jar TestDFSIO –write
–nrFiles 10 –size 1000MB
Yarn jar hadoop-mapreduce-client-joblient-tests.jar TestDFSIO –read
–nrFiles 10 –size 1000MB
Yarn jar hadoop-mapreduce-client-joblient-tests.jar TestDFSIO –clean

總結

以上是生活随笔為你收集整理的Hadoop端口介绍及各种启动命令列表的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內容還不錯，歡迎將生活随笔推薦給好友。