《Hadoop MapReduce性能优化》一2.4 用Apache Ambari监测Hadoop

简介:

本节书摘来异步社区《Hadoop MapReduce性能优化》一书中的第2章,第2.4节,作者: 【法】Khaled Tannir 译者: 范欢动 责编: 杨海玲,更多章节内容可以访问云栖社区“异步社区”公众号查看。

2.4 用Apache Ambari监测Hadoop

Hadoop MapReduce性能优化
Apache Ambari项目 简化了Hadoop管理和集群监测,其主要目标是在多实例环境下简化Hadoop集群的部署与管理。

Ambari提供了一组直观、易用的监测Hadoop集群的工具,隐藏了Hadoop框架的复杂性。它通过向管理员暴露RESTful API来允许与其他系统集成。而且,Ambari依赖Ganglia和Nagios的度量结果,在需要时(如节点故障、磁盘空间不足等)使用报警系统发送电子邮件,以引起管理员的注意。除此之外,Ambari通过安装安全(基于Kerberos)的Hadoop集群,提供基于角色的用户认证、授权、审计,并与LDAP和活动目录(Active Directory)集成进行用户管理,为Hadoop安全提供支持。

如果用Apache Ambari构建Hadoop集群,也可以用它构建监测工具,比如Ganglia或者Nagios。

相关文章
|
存储 分布式计算 算法
Hadoop性能优化数据压缩和编码
【6月更文挑战第8天】
196 6
|
存储 分布式计算 算法
|
存储 缓存 分布式计算
Hadoop性能优化网络传输压力
【6月更文挑战第7天】
230 5
|
存储 分布式计算 Hadoop
Hadoop性能优化同机架优先
【6月更文挑战第11天】
178 2
|
存储 分布式计算 监控
|
存储 分布式计算 负载均衡
|
数据采集 分布式计算 资源调度
hadoop性能优化确保数据均匀分布
【6月更文挑战第12天】
243 7
|
SQL 分布式计算 数据处理
|
分布式计算 监控 算法
Hadoop性能优化合适的分区策略
【6月更文挑战第11天】
216 6
|
分布式计算 Java Linux
centos7通过Ambari2.74部署Hadoop
centos7通过Ambari2.74部署Hadoop

相关实验场景

更多

推荐镜像

更多