AI 助理
备案控制台
开发者社区 数据库 文章 正文

hadoop指标项

2018-08-20 3028
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： hadoop指标项
转至元数据结尾 转至元数据起始

系统采用的,hadoop采集metrics接口-每分钟


namenode

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystemState

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeActivity

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=JvmMetrics

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcDetailedActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=FSNamesystem

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcDetailedActivityForPort8022

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort8020

http://%s:50070/jmx?qry=Hadoop:service=NameNode,name=RpcActivityForPort80222

 

hmaster

ht tp://%s:60010/jmx?qry=hadoop:service=Master,name=MasterStatistics

http://%s:60010/jmx?qry=hadoop:service=HBase,name=RPCStatistics-60000

 

 

Regionserver

ht tp://127.0.0.1:60030/jmx?qry=hadoop:service=RegionServer,name=RegionServerDynamicStatistics

ht tp://127.0.0.1:60030/jmx?qry=hadoop:service=RegionServer,name=RegionServerStatistics

ht tp://127.0.0.1:60030/jmx?qry=hadoop:service=HBase,name=RPCStatistics-60020

 

 

 datanode

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=DataNodeActivity-%s-%s 

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=JvmMetrics

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=RpcActivityForPort%s

http://%s:50075/jmx?qry=Hadoop:service=DataNode,name=FSDatasetState-%s

 

resourcemanager

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=ClusterMetrics

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=JvmMetrics

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=QueueMetrics,q0=root

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8030

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8031

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8032

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=RpcDetailedActivityForPort8033

http://%s:8088/jmx?qry=java.lang:type=GarbageCollector,name=ConcurrentMarkSweep

http://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=FSOpDurations

http://%s:8088/ws/v1/cluster/appstatistics

ht tp://%s:8088/jmx?qry=Hadoop:service=ResourceManager,name=EventMetrics

 

 

nodemanager

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=JvmMetrics

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=NodeManagerMetrics

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=RpcActivityForPort8040

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=RpcActivityForPort8041

http://127.0.0.1:8042/jmx?qry=Hadoop:service=NodeManager,name=ShuffleMetrics

 

 

journalnode

http://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=JournalNodeInfo

http://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=JvmMetrics

http://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=RpcDetailedActivityForPort8485

ht tp://127.0.0.1:8480/jmx?qry=Hadoop:service=JournalNode,name=Journal-yiran-data-ns





文章标签：
分布式计算
Hadoop
Hbase
分布式数据库
浦涛
目录
相关文章
武子康
|
3月前
|
SQL 分布式计算 监控
Hadoop-20 Flume 采集数据双写至本地+HDFS中 监控目录变化 3个Agent MemoryChannel Source对比
Hadoop-20 Flume 采集数据双写至本地+HDFS中 监控目录变化 3个Agent MemoryChannel Source对比
武子康
76 3
武子康
|
3月前
|
SQL 分布式计算 Hadoop
Hadoop-19 Flume Agent批量采集数据到HDFS集群 监听Hive的日志 操作则把记录写入到HDFS 方便后续分析
Hadoop-19 Flume Agent批量采集数据到HDFS集群 监听Hive的日志 操作则把记录写入到HDFS 方便后续分析
武子康
58 2
尹正杰
|
4月前
|
分布式计算 资源调度 监控
监控Hadoop指标
详细介绍了Hadoop指标的概念、类型和收集方法，包括JVM、RPC、DFS、YARN以及用户和组指标，以及如何配置Hadoop以收集这些指标，从而帮助监控、调试和优化Hadoop集群的性能。
尹正杰
82 2
监控Hadoop指标
武子康
|
3月前
|
分布式计算 资源调度 数据可视化
Hadoop-06-Hadoop集群 历史服务器配置 超详细 执行任务记录 JobHistoryServer MapReduce执行记录 日志聚合结果可视化查看
Hadoop-06-Hadoop集群 历史服务器配置 超详细 执行任务记录 JobHistoryServer MapReduce执行记录 日志聚合结果可视化查看
武子康
62 1
听风de歌
|
8月前
|
存储 分布式计算 Hadoop
Hadoop节点配置与调整
【5月更文挑战第21天】
听风de歌
118 5
Hadoop节点配置与调整
听风de歌
|
6月前
|
数据采集 分布式计算 监控
Hadoop数据倾斜配置调整
【7月更文挑战第2天】
听风de歌
62 1
听风de歌
|
8月前
|
存储 分布式计算 监控
Hadoop节点设置考虑因素
【5月更文挑战第21天】
听风de歌
66 1
xleesf
|
8月前
|
监控 API Apache
实战！配置DataDog监控Apache Hudi应用指标
实战！配置DataDog监控Apache Hudi应用指标
xleesf
100 0
诸葛子房
|
8月前
|
分布式计算 监控 Hadoop
Hadoop MR 任务运行时日志分析
Hadoop MR 任务运行时日志分析
诸葛子房
91 0
技术内容小助手
|
存储 缓存 监控
Apache Flume- 案例-监控采集文件夹变化（sqoopdir、HDFS）｜学习笔记
快速学习 Apache Flume- 案例-监控采集文件夹变化（sqoopdir、HDFS）
技术内容小助手
302 0
Apache Flume- 案例-监控采集文件夹变化（sqoopdir、HDFS）｜学习笔记

热门文章

最新文章

  • 1
    ToC和ToB有啥区别
  • 2
    多中心容灾实践：如何实现真正的异地多活？
  • 3
    时间序列预测：CNN+LSTM+Attention模型实战
  • 4
    DSP_代码笔记（基于TMS320X281x）
  • 5
    Confluence 6 那些文件需要备份
  • 6
    区块链技术将占据全球金融系统核心地位
  • 7
    一个有味道的函数
  • 8
    ceph启动脚本
  • 9
    [CLR via C#]7. 常量和字段
  • 10
    JSP基础7
  • 1
    PsycoLLM：开源的中文心理大模型，免费 AI 心理医生，支持心理健康评估与多轮对话
    81
  • 2
    KAG：增强 LLM 的专业能力！蚂蚁集团推出专业领域知识增强框架，支持逻辑推理和多跳问答
    95
  • 3
    Gemini Coder：基于 Google Gemini API 的开源 Web 应用生成工具，支持实时编辑和预览
    58
  • 4
    AddressCLIP：一张照片就能准确定位！中科院联合阿里云推出街道级图像地理定位模型
    57
  • 5
    MiniPerplx：基于 Grok 2.0 的开源 AI 搜索引擎，支持网页、学术、视频搜索
    42
  • 6
    CreatiLayout：复旦与字节联合推出布局到图像生成技术，支持高质量图像生成与布局优化
    37
  • 7
    Cosmos：英伟达生成式世界基础模型平台，加速自动驾驶与机器人开发
    44
  • 8
    AIOpsLab：云服务自动化运维 AI，微软开源云服务 AI 框架，覆盖整个生命周期
    47
  • 9
    《docker基础篇：4.Docker镜像》包括是什么、分层的镜像、UnionFS（联合文件系统）、docker镜像的加载原理、为什么docker镜像要采用这种分层结构呢、docker镜像commit
    100
  • 10
    《鸿蒙安全沙箱机制——人工智能应用的安全护盾》
    29

    • 相关课程

    更多
  • Hadoop企业优化及扩展案例

    • 相关电子书

    更多
  • 零基础实现Flume收集网站日志数据到MaxCompute
  • HBase in Practise- 性能、监控和问题排查
  • HBase in Practise: 性能、监控和问题排查
    • 下一篇
    开通oss服务