日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

CDH 配置YARN动态资源池的计划模式,根据时间划分资源,不同时间不同队列使用不同资源

發布時間:2024/8/23 编程问答 47 豆豆
生活随笔 收集整理的這篇文章主要介紹了 CDH 配置YARN动态资源池的计划模式,根据时间划分资源,不同时间不同队列使用不同资源 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

公平調度配置可參考:http://datamining.blog.csdn.net/article/details/94554469

目錄

計劃模式設置

隊列資源搶占分配


?

計劃模式設置

1.創建計劃規則

?

2.設置白天配置,可以根據業務選擇具體配置計劃,調整資源,選擇每天,就是每天的固定時間范圍。這里選擇每天,時間初步劃分為區分白天和晚上

?3.創建完成后可以看到配置的計劃,然后點擊刷新動態資源池,使配置生效

4. 根據設置的計劃,在資源池中,配置計劃時間需要的資源

?

?5.根據計劃配置具體參數

?6.分配的結果如下

白天 root.test 隊列權重為5,晚上 root.hdfs 隊列權重為5

?

?

7.兩個隊列同時執行任務,白天執行效果(執行一個隊列會把所有資源占用)

?

8.兩個隊列同時執行任務,晚上執行效果(執行一個隊列會把所有資源占用)

?


隊列資源搶占分配

?當資源分配如下圖所示,如只啟動root.hdfs和root.test隊列,權占比大的隊列,會占用其他沒有程序的隊列(root.default),而root.test隊列只使用自己的資源(可能會有部分搶占但是較少),也就是權占比大的隊列,會占用其他未使用資源。

資源分配:

?

隊列資源使用(啟動的任務時相同的操作)?

上圖是三個隊列資源分配,四個隊列同樣是權重大的搶占其他資源多,權重小的基本使用自己資源(搶不過)~?

總結

以上是生活随笔為你收集整理的CDH 配置YARN动态资源池的计划模式,根据时间划分资源,不同时间不同队列使用不同资源的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。