Yarn管理界面中各个参数和yarn-site.xml中参数的对应关系
啟動集群后,打開master:8088/cluster/nodes
?
然后打開:
master:8088/cluster/scheduler
上圖中右側的73.2%≈4.39 GB/6GB=0.7316666666
| Web UI界面參數 | yarn-site.xml中的參數 |
| Memory Total | 集群中每臺電腦中yarn.nodemanager.resource.memory-mb的取值累加后的和 |
| VCores Total | 集群中每臺電腦中yarn.nodemanager.resource.cpu-vcores的取值累加后的和 |
| Active Nodes | 集群中電腦的數量,最下面左側Desktop+Laptop加起來就是兩臺電腦 |
| Minimum Allocation-memory | yarn.scheduler.minimum-allocation-mb |
| Minimum Allocation-vCores | yarn.scheduler.minimum-allocation-vcores |
| Maximum Allocation-memory | yarn.scheduler.maximum-allocation-mb |
| Maximum Allocation-vCores | yarn.scheduler.maximum-allocation-vcores |
?
[1]5.Minimum Allocation:最小分配資源,就是說當一個任務向Yarn申請資源的時候,Yarn至少會分配<memory:1024, vCores:1>這個資源給這個任務,這個分配的最小內存和最小核心數可以分別由配置yarn.scheduler.minimum-allocation-mb(默認值是1024MB)和yarn.scheduler.minimum-allocation-vcores(默認值是1)來控制
6.Maximum Allocation:最大分配資源,就是說當一個任務向Yarn申請資源的時候,Yarn最多會分配<memory:1630, vCores:2>這個資源給這個任務,這個分配的最大內存和最多核心數可以分別由配置yarn.scheduler.maximum-allocation-mb(默認值是8192MB)和yarn.scheduler.maximum-allocation-vcores(默認值是32)來控制,當然這兩個值肯定不能比集群管理的資源還要多
?
Reference:
[1]Yarn的WEB UI的詳細說明
創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎總結
以上是生活随笔為你收集整理的Yarn管理界面中各个参数和yarn-site.xml中参数的对应关系的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 嘀嗒出行是滴滴公司的吗(请说一下滴滴出行
- 下一篇: Yarn管理界面中Queue:root和