日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

Yarn管理界面中各个参数和yarn-site.xml中参数的对应关系

發布時間:2023/12/31 编程问答 26 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Yarn管理界面中各个参数和yarn-site.xml中参数的对应关系 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

啟動集群后,打開master:8088/cluster/nodes

?

然后打開:

master:8088/cluster/scheduler

上圖中右側的73.2%≈4.39 GB/6GB=0.7316666666

Web UI界面參數yarn-site.xml中的參數
Memory Total集群中每臺電腦中yarn.nodemanager.resource.memory-mb的取值累加后的和
VCores Total集群中每臺電腦中yarn.nodemanager.resource.cpu-vcores的取值累加后的和
Active Nodes集群中電腦的數量,最下面左側Desktop+Laptop加起來就是兩臺電腦
Minimum Allocation-memoryyarn.scheduler.minimum-allocation-mb
Minimum Allocation-vCoresyarn.scheduler.minimum-allocation-vcores
Maximum Allocation-memoryyarn.scheduler.maximum-allocation-mb
Maximum Allocation-vCoresyarn.scheduler.maximum-allocation-vcores

?

[1]5.Minimum Allocation:最小分配資源,就是說當一個任務向Yarn申請資源的時候,Yarn至少會分配<memory:1024, vCores:1>這個資源給這個任務,這個分配的最小內存和最小核心數可以分別由配置yarn.scheduler.minimum-allocation-mb(默認值是1024MB)和yarn.scheduler.minimum-allocation-vcores(默認值是1)來控制
6.Maximum Allocation:最大分配資源,就是說當一個任務向Yarn申請資源的時候,Yarn最多會分配<memory:1630, vCores:2>這個資源給這個任務,這個分配的最大內存和最多核心數可以分別由配置yarn.scheduler.maximum-allocation-mb(默認值是8192MB)和yarn.scheduler.maximum-allocation-vcores(默認值是32)來控制,當然這兩個值肯定不能比集群管理的資源還要多
?

Reference:

[1]Yarn的WEB UI的詳細說明

創作挑戰賽新人創作獎勵來咯,堅持創作打卡瓜分現金大獎

總結

以上是生活随笔為你收集整理的Yarn管理界面中各个参数和yarn-site.xml中参数的对应关系的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。