日韩av黄I国产麻豆传媒I国产91av视频在线观看I日韩一区二区三区在线看I美女国产在线I麻豆视频国产在线观看I成人黄色短片

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 >

Hadoop Yarn常用参数配置项整理

發布時間:2025/1/21 104 豆豆
生活随笔 收集整理的這篇文章主要介紹了 Hadoop Yarn常用参数配置项整理 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

(1)Resourcemanager 相關

yarn.resourcemanager.scheduler.client.thread-count ResourceManager 處理調度器請求的線程數量 yarn.resourcemanager.scheduler.class 配置調度器

(2)Nodemanager 相關

yarn.nodemanager.resource.memory-mb NodeManager 使用內存數 yarn.nodemanager.resource.system-reserved-memory-mb NodeManager 為系統保留多少內存,和上一個參數二者取一即可 yarn.nodemanager.resource.cpu-vcores NodeManager 使用 CPU 核數 yarn.nodemanager.resource.count-logical-processors-as-cores 是否將虛擬核數當作 CPU 核數 yarn.nodemanager.resource.pcores-vcores-multiplier 虛擬核數和物理核數乘數,例如:4 核 8 線程,該參數就應設為 2 yarn.nodemanager.resource.detect-hardware-capabilities 是否讓 yarn 自己檢測硬件進行配置 yarn.nodemanager.pmem-check-enabled 是否開啟物理內存檢查限制 container yarn.nodemanager.vmem-check-enabled 是否開啟虛擬內存檢查限制 container yarn.nodemanager.vmem-pmem-ratio 虛擬內存物理內存比例

(3)Container 容器相關

yarn.scheduler.minimum-allocation-mb 容器最小內存 yarn.scheduler.maximum-allocation-mb 容器最大內存 yarn.scheduler.minimum-allocation-vcores 容器最小核數 yarn.scheduler.maximum-allocation-vcores 容器最大核數 與50位技術專家面對面20年技術見證,附贈技術全景圖

總結

以上是生活随笔為你收集整理的Hadoop Yarn常用参数配置项整理的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。