HDFS的安全模式

HDFS的安全模式

安全模式是HDFS的一種工作狀態(tài)，處于安全模式的狀態(tài)下，只向客戶(hù)端提供文件的只讀視圖，不接受對(duì)命名空間的修改；同時(shí)NameNode節(jié)點(diǎn)也不會(huì)進(jìn)行數(shù)據(jù)塊的復(fù)制或者刪除，如：副本的數(shù)量小于正常水平。

?NameNode啟動(dòng)時(shí)，首先f(wàn)simage載入內(nèi)存，并執(zhí)行編輯日志中的操作。一旦文件系統(tǒng)元數(shù)據(jù)建立成功，便會(huì)創(chuàng)建一個(gè)空的編輯日志。此時(shí)，NameNode開(kāi)始監(jiān)聽(tīng)RPC和Http請(qǐng)求。但是此時(shí)NameNode處于安全模式，只接受客戶(hù)端的讀請(qǐng)求。

?在安全模式下，各個(gè)DataNode會(huì)向NameNode發(fā)送自身的數(shù)據(jù)塊列表，當(dāng)NameNode有足夠的數(shù)據(jù)塊信息后，便在30秒后退出安全模式，若NameNode發(fā)現(xiàn)數(shù)據(jù)節(jié)點(diǎn)過(guò)少會(huì)啟動(dòng)數(shù)據(jù)塊復(fù)制過(guò)程(基本不會(huì))

?當(dāng)hadoop的NameNode節(jié)點(diǎn)啟動(dòng)時(shí)，會(huì)進(jìn)入安全模式階段。在此階段，DataNode會(huì)向NameNode上傳他們數(shù)據(jù)塊的列表，讓NameNode得到數(shù)據(jù)塊的位置信息，并對(duì)每個(gè)文件對(duì)應(yīng)的數(shù)據(jù)塊副本進(jìn)行統(tǒng)計(jì)。當(dāng)最小副本條件滿(mǎn)足時(shí)，即：一定比例的數(shù)據(jù)塊都到達(dá)最小副本數(shù)，系統(tǒng)會(huì)退出安全模式。而這需要一定的延遲時(shí)間。當(dāng)最小的副本條件未達(dá)到要求時(shí)，就會(huì)對(duì)副本數(shù)不足的數(shù)據(jù)塊安排DataNode進(jìn)行復(fù)制，直到達(dá)到最小的副本數(shù)。而在安全模式下，系統(tǒng)會(huì)處于只讀裝態(tài)，NameNode不會(huì)處理任何數(shù)據(jù)塊的復(fù)制和刪除命令。

?在啟動(dòng)一個(gè)剛剛格式化的HDFS時(shí)系統(tǒng)不會(huì)進(jìn)入安全模式，因?yàn)闆](méi)有數(shù)據(jù)塊。

HDFS安全模式相關(guān)的命令

hadoop dfsadmin -safemode leave?? 強(qiáng)制NameNode退出安全模式
hadoop dfsadmin -safemode enter?? 進(jìn)入安全模式
hadoop dfsadmin -safemode get???? 查看安全模式狀態(tài)
hadoop dfsadmin -safemode wait??? 等待一直到安全模式結(jié)束

總結(jié)

以上是生活随笔為你收集整理的HDFS的安全模式的全部?jī)?nèi)容，希望文章能夠幫你解決所遇到的問(wèn)題。

如果覺(jué)得生活随笔網(wǎng)站內(nèi)容還不錯(cuò)，歡迎將生活随笔推薦給好友。