日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問(wèn) 生活随笔!

生活随笔

當(dāng)前位置: 首頁(yè) > 编程资源 > 编程问答 >内容正文

编程问答

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

發(fā)布時(shí)間:2023/12/31 编程问答 34 豆豆
生活随笔 收集整理的這篇文章主要介紹了 hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系 小編覺(jué)得挺不錯(cuò)的,現(xiàn)在分享給大家,幫大家做個(gè)參考.

hdfs啟動(dòng)順序:

? ? ?1、namenode

? ? ? 2、datenode

? ? ?3、secondnamenode? ? ? ??

? ? ?4、yarn

webui:?

? ??????? 默認(rèn)為50070端口,dfsheath

? ? ui內(nèi)容講解:

? ??????? ClusterID: namenode格式化時(shí)生成的(hdfs namenode -format)

? ? ? ? ? BlockpoolID:數(shù)據(jù)塊池

? ? ? ? ? ?(為了federation 和內(nèi)存管理使用。)

? ? ? ? ??

? ? ?namenode Journal status:

? ? ? ? ?就是edit日志

? ? ?namenode storage: ? ??

? ? ? ? ? 鏡像文件存儲(chǔ)信息

?????

? ? ? ? ???????

? ? ??????

? ? ? ? ??

? ? ?

啟動(dòng)日志文件目錄 $HADOOP_HOME/logs:

? ? ? x.log: 通過(guò)log4j記錄,記錄大部分應(yīng)用程序的日志信息

? ? ? x.out ?記錄標(biāo)準(zhǔn)輸出和標(biāo)準(zhǔn)錯(cuò)誤日志,少量記錄

日志文件的命名規(guī)則:

? ? ?[ ?框架名稱- 用戶名- 進(jìn)程名- 主機(jī)名--日志格式后綴 ]




Secondary namenode:

? ? ? ? 1、客戶端對(duì)hdfs的操作會(huì)記錄到edits文件中, 即journal 。

? ? ? ? 2、namenode 內(nèi)存中的內(nèi)容為 fsimage+edits

? ? ? ? 3、 namenode 的fsimage和edite文件定時(shí)合并后,同步到secondary namenode上。

? ? ?


總結(jié)

以上是生活随笔為你收集整理的hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò),歡迎將生活随笔推薦給好友。