ResourceManager内部组成

简介: <p><img src="http://img.blog.csdn.net/20140927094116390" alt=""></p> <p>1. ClientService</p> <p>应用提交、终止;传递应用、队列、集群统计、ACL信息,初此以外,还负责对连接过来的客户端做验证,一般用kerberos,或这自带的delegation token</p> <p>2. Admin

1. ClientService

应用提交、终止;传递应用、队列、集群统计、ACL信息,初此以外,还负责对连接过来的客户端做验证,一般用kerberos,或这自带的delegation token

2. Adminstration Service

刷新queue;刷新node节点; 添加新的user-to-group映射,包括administration ACL,修改superuser列表

Administration Service与Client Service与ApplicationMaster紧密结合,保证ACL的可靠性。

3. Application ACL Manager

ResourceManager需要保证 user-facing API像client请求与administratio请求,给认证的用户。acl可以通过yarn.acl.enable设置为true开启。

ACL有两种,一个是查看的,另一个是修改的。

每个应用都可以有个ACL,用户可以在提交任务的时,在ApplicationSubmissionContext中附加上ACL信息。之后会由



目录
相关文章
|
资源调度 分布式计算 Java
Yarn资源调度器
Yarn资源调度器
91 0
|
10月前
|
资源调度 分布式计算 监控
YARN【工作机制】
YARN【工作机制】
|
资源调度 调度 容器
Yarn 的工作原理、流程【重要】
Yarn 的工作原理、流程【重要】
190 0
|
资源调度 容器
yarn基本架构和工作机制
yarn基本架构和工作机制
106 0
yarn基本架构和工作机制
|
资源调度 分布式计算 Hadoop
【Hadoop】万字长文详解Yarn资源隔离
【Hadoop】万字长文详解Yarn资源隔离
587 0
【Hadoop】万字长文详解Yarn资源隔离
|
资源调度 分布式计算 监控
工作常用之Yarn详解【五】资源调度与隔离
在YARN中,资源管理由ResourceManager和NodeManager共同完成,其中,ResourceManager中的调度器负责资源的分配,而NodeManager则负责资源的供给和隔离。
776 0
工作常用之Yarn详解【五】资源调度与隔离
|
存储 分布式计算 资源调度
ResourceManager HA 配置
陆续的把Hadoop集群部署、HDFS的HA配置完成,把ResourceManager的HA配置好之后,Hadoop集群配置也算是完整了,可以满足小型中型生产环境Hadoop集群搭建的需要。如果真要搭建超大型的Hadoop集群,这些只能算是参考,还需要修改很多其他参数,使性能更好一些。
1106 0
ResourceManager HA 配置
|
资源调度 分布式计算 Hadoop
CDP中Yarn资源调度与管理
您可以通过调度分配资源、通过配置 cgroup 限制 CPU 使用、使用分区将集群划分为子集群以及在 Docker 容器上启动应用程序来管理集群上运行的应用程序的资源。
876 0
|
存储 资源调度 分布式计算
CDP中Yarn管理队列
YARN Queue Manager 是 Apache Hadoop YARN Capacity Scheduler 的队列管理图形用户界面。您可以使用 YARN 队列管理器 UI 来管理集群容量,使用队列来平衡来自不同用户的多个应用程序的资源需求。使用 YARN 队列管理器 UI,您可以设置调度程序级别属性和队列级别属性。
905 0
CDP中Yarn管理队列
|
资源调度 分布式计算 Hadoop
Yarn管理动态队列
动态队列是在应用程序运行时自动创建的。当 YARN 服务重新启动时,它们将被删除。
907 0
Yarn管理动态队列