浅析Hadoop的三个作业调度器
生活随笔
收集整理的這篇文章主要介紹了
浅析Hadoop的三个作业调度器
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
目前,Hadoop作業調度器主要有三種:資源調度器FIFO(先進先出)、Capacity Scheduler(容量調度器)和Fair Scheduler(公平調度器)。Hadoop2.7.2默認的資源調度器是Capacity Scheduler。
具體設置詳見:yarn-default.xml文件
<property>
????<description>The class to use as the resource scheduler.</description>
????<name>yarn.resourcemanager.scheduler.class</name>
<value>org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity.CapacityScheduler</value>
</property>
1.先進先出調度器(FIFO),如圖所示
2.容量調度器(Capacity Scheduler),如圖28所示
3.公平調度器(Fair Scheduler),如圖所示
總結:
總結
以上是生活随笔為你收集整理的浅析Hadoop的三个作业调度器的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 大剑无锋之post那么多优点,为什么还用
- 下一篇: 在hive中对日期数据进行处理,毫秒级时