日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系

發布時間:2025/3/18 编程问答 21 豆豆
生活随笔 收集整理的這篇文章主要介紹了 hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

hdfs啟動順序:

? ? ?1、namenode

? ? ? 2、datenode

? ? ?3、secondnamenode? ? ? ??

? ? ?4、yarn

webui:?

? ??????? 默認為50070端口,dfsheath

? ? ui內容講解:

? ??????? ClusterID: namenode格式化時生成的(hdfs namenode -format)

? ? ? ? ? BlockpoolID:數據塊池

? ? ? ? ? ?(為了federation 和內存管理使用。)

? ? ? ? ??

? ? ?namenode Journal status:

? ? ? ? ?就是edit日志

? ? ?namenode storage: ? ??

? ? ? ? ? 鏡像文件存儲信息

?????

? ? ? ? ???????

? ? ??????

? ? ? ? ??

? ? ?

啟動日志文件目錄 $HADOOP_HOME/logs:

? ? ? x.log: 通過log4j記錄,記錄大部分應用程序的日志信息

? ? ? x.out ?記錄標準輸出和標準錯誤日志,少量記錄

日志文件的命名規則:

? ? ?[ ?框架名稱- 用戶名- 進程名- 主機名--日志格式后綴 ]




Secondary namenode:

? ? ? ? 1、客戶端對hdfs的操作會記錄到edits文件中, 即journal 。

? ? ? ? 2、namenode 內存中的內容為 fsimage+edits

? ? ? ? 3、 namenode 的fsimage和edite文件定時合并后,同步到secondary namenode上。

? ? ?

本文轉自 Wilson9527 51CTO博客,原文鏈接:http://blog.51cto.com/devops9527/1853263,如需轉載請自行聯系原作者

總結

以上是生活随笔為你收集整理的hdfs web_ui深入讲解、服务启动日志分析、NN SNN关系的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。