YARN-Capacity Scheduler

  1. 云栖社区>
  2. 博客>
  3. 正文

YARN-Capacity Scheduler

尊渊 2017-08-31 13:22:11 浏览1532
展开阅读全文

原文:http://hadoop.apache.org/docs/r2.6.4/hadoop-yarn/hadoop-yarn-site/CapacityScheduler.html

概览

CapacityScheduler被设计用来以一种操作友好的并且最大化吞吐和集群利用率的方式调度一个共享的、多租户集群从而可以支持运行Hadoop应用程序。

传统情况下,每个组织都有自己的私有计算资源组,其可以保证有效容量能满足组织业务的SLA,即便在峰值或接近峰值的情况下也足够。但这通常会导致很差的平均资源利用率以及很大的集群管理开销,一般每个组织需要一个集群。组织间共享集群是一种降低成本的有效手段,尤其是运行大型的Hadoop程序,因为这使他们获得不需要创建私有集群而带来成本降低。然而组织间也会关注如何共享一个集群,因为它们会担心其它人占用资源而

网友评论

登录后评论
0/500
评论
尊渊
+ 关注