hadoop_namenode如果选择在哪个datanode存储副本
生活随笔
收集整理的這篇文章主要介紹了
hadoop_namenode如果选择在哪个datanode存储副本
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
2019獨角獸企業重金招聘Python工程師標準>>>
需要從可靠性,寫入帶寬,讀取帶寬進行權衡。
第一個block副本放在運行client所在的節點上(如果client不在集群范圍內,則第一個node是隨機選取的)
第二個block副本放置在與第一個節點不同的機架中的node中(隨機選擇)
第三個block副本放置與第二個副本所在節點同一個機架的另一個節點上。
如果還有更多的副本就隨機放在集群的node里,不過系統會盡量避免在同一個機架上放太多副本。
良好的穩定性:數據塊存儲在兩個機架中
寫入帶寬:寫入操作只需要遍歷一個交換機
讀取性能:可以從兩個機架中選擇讀取
集群中塊的均勻分布:客戶端只在本地機架上寫入一個塊。
轉載于:https://my.oschina.net/u/4009325/blog/2396154
總結
以上是生活随笔為你收集整理的hadoop_namenode如果选择在哪个datanode存储副本的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: Linux环境搭建nginx负载
- 下一篇: 多线程基础(一)