tencent cloud

腾讯云可观测平台

动态与公告
产品动态
产品简介
产品概述
产品优势
基本功能
基本概念
应用场景
使用限制
购买指南
云产品监控
应用性能监控
终端性能监控
前端性能监控
云拨测
Prometheus 监控服务
Grafana 服务
事件总线
云压测
快速入门
监控概览
实例分组
云产品监控
应用性能监控
云拨测
云压测
Prometheus 监控服务
Grafana 服务
创建 Dashboard
事件总线
告警服务
云产品监控
云产品监控指标
控制台操作指南
云服务器监控组件
云产品监控对接 Grafana
故障处理
实践教程
应用性能监控
应用性能监控简介
接入指南
控制台操作指南
实践教程
参考信息
常见问题
终端性能监控
终端性能监控概述
控制台操作指南
接入指南
实践教程
前端性能监控
前端性能监控简介
控制台操作指南
接入指南
常见问题
云拨测
产品简介
控制台操作指南
常见问题
云压测
云压测概述
控制台操作指南
实践教程
JavaScript API 列表
常见问题
Prometheus 监控
Prometheus 监控简介
接入指南
控制台操作指南
实践教程
Terraform
常见问题
Grafana 服务
产品简介
控制台操作指南
Grafana 平台常用功能指引
常见问题
Dashboard
什么是 Dashboard
控制台操作指南
告警管理
控制台操作指南
故障处理
常见问题
事件总线
事件总线简介
控制台操作指南
实践教程
常见问题
报表管理
常见问题
腾讯云可观测平台常见问题
告警服务相关
一般性问题
监控图表相关
云服务器监控组件相关
动态阈值告警相关
云监控对接 Grafana 相关
文档阅读指南
相关协议
应用性能监控服务等级协议
APM 隐私协议
APM 数据处理和安全协议
前端性能监控服务等级协议
终端性能监控服务等级协议
云拨测服务等级协议
Prometheus 监控服务服务等级协议
Grafana 服务服务等级协议
云压测服务等级协议
云压测使用限制
Cloud Monitor Service Level Agreement
API 文档
History
Introduction
API Category
Making API Requests
Monitoring Data Query APIs
Alarm APIs
Legacy Alert APIs
Notification Template APIs
TMP APIs
Grafana Service APIs
Event Center APIs
TencentCloud Managed Service for Prometheus APIs
Monitoring APIs
Data Types
Error Codes
词汇表

弹性 MapReduce(HDFS)

PDF
聚焦模式
字号
最后更新时间: 2024-01-27 17:58:51

命名空间

Namespace=QCE/TXMR_HDFS

监控指标

弹性 MapReduce(HDFS)提供 HDFS-OverviewHDFS-OverviewAggregationHDFS-NameNodeHDFS-DataNodeHDFS-Journal NodeHDFS-ZKFC 指标。
说明:
维度对应参数,请单击 各维度对应参数总览 查看。

HDFS-Overview

指标英文名
指标中文名
单位
指标含义
维度
EmrHdfsOverview HdfsNnBlockCapacityTotal
集群存储容量_CapacityTotal
GB
集群存储总容量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockCapacityUsed
集群存储容量_CapacityUsed
GB
集群储存已使用容量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockCapacityRemaining
集群存储容量_CapacityRemaining
GB
集群存储剩余容量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockCapacity UsedNonDFS
集群存储容量_CapacityUsedNonDFS
GB
集群非 HDFS 使用容量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockTotalLoad
集群负载_TotalLoad
当前连接数
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockFilesTotal
群文件总数量_FilesTotal
总文件数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockBlockstotal
BLOCKS 数量_BlocksTotal
总 BLOCK 数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockPending ReplicationBlocks
BLOCKS 数量_PendingReplicationBlocks
等待被备份的块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockUnder ReplicatedBlocks
BLOCKS 数量_UnderReplicatedBlocks
副本数不够的块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockBlocksCorruptblocks
BLOCKS 数量_CorruptBlocks
坏块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockScheduled ReplicationBlocks
BLOCKS 数量_ScheduledReplicationBlocks
安排要备份的块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockPending DeletionBlocks
BLOCKS 数量_PendingDeletionBlocks
等待被删除的块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockCorruptblocks
BLOCKS 数量_CorruptBlocks
多于的块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockPostponed MisreplicatedBlocks
BLOCKS 数量_PostponedMisreplicatedBlocks
被推迟处理的异常块数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockBlockCapacity
BLOCK容量_BlockCapacity
BLOCK 容量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockNumLiveDataNodes
集群数据节点_NumLiveDataNodes
个活的数据节点数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockNumDeadDataNodes
集群数据节点_NumDeadDataNodes
已经标记为 Dead 状态的数据节点数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockNum DecomLiveDataNodes
集群数据节点_NumDecomLiveDataNodes
下线且 Live 的节点数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockNum DecomDeadDataNodes
集群数据节点_NumDecomDeadDataNodes
下线且 Dead 的节点数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockNum DecommissioningDataNodes
集群数据节点_NumDecommissioningDataNodes
正在下线的节点数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockNum StaleDataNodes
集群数据节点_NumStaleDataNodes
由于心跳延迟而标记为过期的 DataNodes 当前数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockSnapshots
SNAPSHOT 相关_Snapshots
Snapshots 数量
host4hdfsoverview、 id4hdfsoverview
EmrHdfsOverview HdfsNnBlockVolumeFailuresTotal
磁盘故障_VolumeFailuresTotal
所有 Datanodes 的全故障总数
host4hdfsoverview、 id4hdfsoverview

HDFS-OverviewAggregation

指标英文名
指标中文名
单位
指标含义
维度
EmrHdfsOverview Aggregation HdfsNnBlockCapacityTotal
集群存储容量_CapacityTotal
GB
集群存储总容量
id4hdfsoverview
EmrHdfsOverview Aggregation HdfsNnBlockCapacityUsed
集群存储容量_CapacityUsed
GB
集群储存已使用容量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockCapacityRemaining
集群存储容量_CapacityRemaining
GB
集群存储剩余容量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockCapacity UsedNonDFS
集群存储容量_CapacityUsedNonDFS
GB
集群非 HDFS 使用容量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockTotalLoad
集群负载_TotalLoad
当前连接数
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockFilesTotal
群文件总数量_FilesTotal
总文件数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockBlockstotal
BLOCKS 数量_BlocksTotal
总 BLOCK 数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockPending ReplicationBlocks
BLOCKS 数量_PendingReplicationBlocks
等待被备份的块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockUnder ReplicatedBlocks
BLOCKS 数量_UnderReplicatedBlocks
副本数不够的块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockBlocksCorruptblocks
BLOCKS 数量_CorruptBlocks
坏块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockScheduled ReplicationBlocks
BLOCKS 数量_ScheduledReplicationBlocks
安排要备份的块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockPending DeletionBlocks
BLOCKS 数量_PendingDeletionBlocks
等待被删除的块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockCorruptblocks
BLOCKS 数量_CorruptBlocks
多于的块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockPostponed MisreplicatedBlocks
BLOCKS 数量_PostponedMisreplicatedBlocks
被推迟处理的异常块数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockBlockCapacity
BLOCK容量_BlockCapacity
BLOCK 容量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockNumLiveDataNodes
集群数据节点_NumLiveDataNodes
个活的数据节点数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockNumDeadDataNodes
集群数据节点_NumDeadDataNodes
已经标记为 Dead 状态的数据节点数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockNum DecomLiveDataNodes
集群数据节点_NumDecomLiveDataNodes
下线且 Live 的节点数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockNum DecomDeadDataNodes
集群数据节点_NumDecomDeadDataNodes
下线且 Dead 的节点数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockNum DecommissioningDataNodes
集群数据节点_NumDecommissioningDataNodes
正在下线的节点数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockNum StaleDataNodes
集群数据节点_NumStaleDataNodes
由于心跳延迟而标记为过期的 DataNodes 当前数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockSnapshots
SNAPSHOT 相关_Snapshots
Snapshots 数量
id4hdfsoverview
EmrHdfsOverview AggregationHdfsNn BlockVolumeFailuresTotal
磁盘故障_VolumeFailuresTotal
所有 Datanodes 的全故障总数
id4hdfsoverview

HDFS-NameNode

指标英文名
指标中文名
指标单位
指标含义
维度
HdfsNnPort4007RxtxReceivedbytes
数据流量_ReceivedBytes
Bytes/s
接收数据速率
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007RxtxSentbytes
数据流量_SentBytes
Bytes/s
发送数据速率
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007Qps Rpcqueuetimenumops
QPS_RpcQueueTimeNumOps
次/s
RPC 调用速率
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007RtRpc queuetimeavgtime
请求处理延迟 _RpcQueueTimeAvgTime
ms
RPC 平均延迟时间
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007AuthRpc authenticationfailures
验证和授权 _RpcAuthenticationFailure
RPC 验证失败次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007AuthRpc authenticationsuccesses
验证和授权 _RpcAuthenticationSuccesses
RPC 验证成功次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007AuthRpc authorizationfailures
验证和授权 _RpcAuthorizationFailures
RPC 授权失败次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007AuthRpc authorizationsuccesses
验证和授权 _RpcAuthorizationSuccesses
RPC 授权成功次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007Connections Numopenconnections
当前连接数 _NumOpenConnections
当前链接数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPort4007Queue LenCallqueuelength
RPC 处理队列长度 _CallQueueLength
当前 RPC 处理队列长度
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmMemMemnonheapusedm
JVM 内存 _MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的大小
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmMemMemnon heapcommittedm
JVM 内存 _MemNonHeapCommittedM
MB
JVM 内存
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmMemMemheapusedm
JVM 内存 _MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的大小
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmMem Memheapcommittedm
JVM 内存 _MemHeapCommittedM
MB
JVM HeapMemory 提交大小
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmMemMemheapmaxm
JVM 内存_MemHeapMaxM
MB
JVM 配置的 HeapMemory 的大小
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmMemMemmaxm
JVM 内存_MemMaxM
MB
JVM 运行时的可以使用的最大的内存的大小
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnBlockReportRt Blockreportavgtime
数据块汇报延迟 _BlockReportAvgTime
次/s
每秒处理 DataNode Blcok 平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilGcCountFgc
GC 次数_FGC
次/s
Full GC 次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilGcCountYgc
C 次数_YGC
2次/s
Young GC 次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilGcTimeYgct
GC 时间_YGCT
ms
Young GC 消耗时间
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilGcTimeFgct
GC 时间_FGCT
ms
Full GC 消耗时间
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilGcTimeGct
GC 时间_GCT
ms
垃圾回收时间消耗
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmJavaThreadsThreadsnew
JVM 线程数量 _ThreadsNew
处于新建状态的线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmJavaThreads Threadsrunnable
JVM 线程数量 _ThreadsRunnable
处于可运行状态的线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmJavaThreads Threadsblocked
JVM 线程数量 _ThreadsBlocked
处于阻塞状态的线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmJavaThreads Threadswaiting
JVM 线程数量 _ThreadsWaiting
处于 WAITING 状态的线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmJavaThreads Threadstimedwaiting
JVM 线程数量 _ThreadsTimedWaiting
处于 TIMED WAITING 状态的线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmJavaThreads Threadsterminated
JVM 线程数量 _ThreadsTerminated
处于 Terminated 状态的线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmLogTotalLogfatal
JVM 日志数量_LogFatal
Fatal 日志数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmLogTotalLogerror
JVM 日志数量_LogError
Error 日志数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmLogTotalLogwarn
JVM 日志数量_LogWarn
Warn 日志数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnJvmLogTotalLoginfo
JVM 日志数量_LogInfo
Info 日志数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilMemoryS0
内存区域占比_S0
%
Survivor 0区内存使用占比
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilMemoryS1
内存区域占比_S1
%
Survivor 1区内存使用占比
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilMemoryE
内存区域占比_E
%
Eden 区内存使用占比
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilMemoryO
内存区域占比_O
%
Old 区内存使用占比
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilMemoryM
内存区域占比_M
%
Metaspace 区内存使用占比
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnGcUtilMemoryCcs
内存区域占比_CCS
%
Compressed class space 区内存使用占比
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnStaleStorages CountNumstalestorages
被标记为过期的存储的数量 _NumStaleStorages
由于心跳延迟而标记为过期的 DataNodes 当前数目
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnPendingDatanodeMessage CountPendingdatanode messagecount
备 NN 上挂起的与 BLOCK 相关操作的消息数量 _PendingDataNode MessageCount
个/s
DATANODE 的请求被 QUEUE 在 standby namenode 中的个数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnBlocksMissingNum berofmissingblocks
缺失块统计 _NumberOfMissingBlocks
缺失的数据块数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnBlocksMissingNumberof missingblockswithreplication factorOne
缺失块统计_NumberOf MissingBlocksWithReplication FactorOne
缺失的数据库数量(rf = 1)
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOpsAllowsnapshotops
SNAPSHOT 操作 _AllowSnapshotOps
次/s
每秒执行 AllowSnapshot 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOps Disallowsnapshotops
SNAPSHOT 操作 _DisallowSnapshotOps
次/s
每秒执行 DisallowSnapshot 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOps Createsnapshotops
SNAPSHOT 操作 _CreateSnapshotOps
次/s
每秒执行 CreateSnapshot 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOps Deletesnapshotops
SNAPSHOT 操作 _DeleteSnapshotOps
次/s
每秒执行 DeleteSnapshot 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOps Listsnapshottabledirops
SNAPSHOT 操作_ListSnapshottableDirOps
次/s
每秒执行 ListSnapshottableDir 操作次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOps Snapshotdiffreportops
SNAPSHOT 操作_SnapshotDiffReportOps
次/s
每秒执行 SnapshotDiffReportOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSnapshotOps Renamesnapshotops
SNAPSHOT 操作_RenameSnapshotOps
次/s
每秒执行 RenameSnapshotOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsCreatefileops
文件操作_CreateFileOps
次/s
每秒执行 CreateFile 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsGetlistingops
文件操作_GetListingOps
次/s
每秒执行 GetListing 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsTotalfileops
文件操作_TotalFileOps
次/s
每秒执行 TotalFileOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsDeletefileops
文件操作_DeleteFileOps
次/s
每秒执行 DeleteFile 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsFileinfoops
文件操作_FileInfoOps
次/s
每秒执行 FileInfo 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsGetadditional datanodeops
文件操作 _GetAdditionalDatanodeOps
次/s
每秒执行 GetAdditionalDatanode 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsCreatesymlinkops
文件操作_CreateSymlinkOps
次/s
每秒执行 CreateSymlink 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsGetlinktargetops
文件操作_GetLinkTargetOps
次/s
每秒执行 GetLinkTarget 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnFilesOpsFilesingetlistingops
文件操作 _FilesInGetListingOps
次/s
每秒执行 FilesInGetListing 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnTransactionOps Transactionsnumops
事务操作 _TransactionsNumOps
次/s
每秒处理 Journal transaction 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnTransactionOps Transactionsbatchedinsync
事务操作 _TransactionsBatchedInSync
次/s
每秒批量处理 Journal transaction 操作次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnImageOpsGeteditnumops
镜像操作_GetEditNumOps
次/s
每秒执行 GetEditNumOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnImageOpsGetimagenumops
镜像操作_GetImageNumOps
次/s
每秒执行 GetImageNumOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnImageOpsPutimagenumops
镜像操作_PutImageNumOps
次/s
每秒执行 PutImageNumOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSyncsOpsSyncsnumops
SYNC 操作_SyncsNumOps
次/s
每秒处理 Journal syncs 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnBlocksOpsBlock receivedanddeletedops
数据块操作 _BlockOpsQueued
次/s
每秒执行 BlockReceivedAndDeletedOps 的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnBlocksOpsBlockopsqueued
数据块操作 _BlockOpsQueued
次/s
处理 DataNode Block 上报操作的延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnCacheReportOps Cachereportnumops
缓存汇报 _CacheReportNumOps
次/s
每秒处理 CacheReport 操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnBlockReportOps Blockreportnumops
数据块汇报 _BlockReportNumOps
次/s
每秒处理 DataNode Blcok 上报操作的次数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnSyncsRtSyncsavgtime
SYNCS 操作延迟_SyncsAvgTime
ms
处理 Journal syncs 操作的平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnCacheReportRt Cachereportavgtime
Cache 汇报延迟_CacheReportAvgTime
ms
缓存上报动作平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnImageRtGeteditavgtime
镜像操作延迟 _GetEditAvgTime
ms
读取 Edit 文件操作平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnImageRtGetimageavgtime
镜像操作延迟 _GetImageAvgTime
ms
读取镜像文件平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnImageRtPutimageavgtime
镜像操作延迟 _PutImageAvgTime
ms
写入镜像文件平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnTransactionRt Transactionsavgtime
事务操作延迟 _TransactionsAvgTime
ms
处理 Journal transaction 操作的平均延迟
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnStartTimeStarttime
启动时间_StartTime
ms
进程启动时间
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnStateState
主备情况_State
-
NN 状态
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnThreadCountPeakthreadcount
线程数量_PeakThreadCount
峰值线程数
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnThreadCountThreadcount
线程数量_ThreadCount
线程数量
host4hdfsnamenode、 id4hdfsnamenode
HdfsNnThreadCount Daemonthreadcount
线程数量_DaemonThreadCount
后台线程数量
host4hdfsnamenode、 id4hdfsnamenode

HDFS-DataNode

指标英文名
指标中文名
指标单位
指标含义
维度
HdfsDnXceiverXceivercount
XCEIVER 数量_XceiverCount
Xceiver 数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBytesByteswrittenmb
数据读写速率_BytesReadMB
Bytes/s
写入 DN 的字节速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBytesBytesreadmb
数据读写速率_BytesReadMB
Bytes/s
读取 DN 的字节速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBytesRemotebytesreadmb
数据读写速率 _RemoteBytesReadMB
Bytes/s
远程客户端读取字节速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBytesRemoteby teswrittenmb
数据读写速率 _RemoteBytesWrittenMB
Bytes/s
远程客户端写入字节速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnClientWritesfrom remoteclient
客户端连接数 _WritesFromRemoteClient
来自远程客户端写操作 QPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnClientWritesfromlocalclient
客户端连接数 _WritesFromLocalClient
来自本地客户端写操作 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnClientReadsfrom remoteclient
客户端连接数 _ReadsFromRemoteClient
来自远程客户端读操作 QPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnClientReadsfromlocalclient
客户端连接数 _ReadsFromLocalClient
来自本地客户端读操作 QPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksVerifiedFailures Blockverificationfailures
Block 校验失败 _BlockVerificationFailures
次/s
BLOCK 校验失败数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnVolumeFailures Volumefailures
磁盘故障_VolumeFailures
次/s
磁盘故障次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnNetworkErrors Datanodenetworkerrors
网络错误 _DatanodeNetworkErrors
次/s
网络错误统计
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnHbRtHeartbeatsavgtime
心跳延迟_HeartbeatsAvgTime
ms
心跳接口平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnHbOpsHeartbeatsnumops
心跳 QPS_HeartbeatsNumOps
次/s
心跳接口 QPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnDatapacketAvgtimeSend datapackettransfer nanosavgtime
包传输操作 QPS_SendDataPacketTransfer NanosAvgTime
ms
发送数据包平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsRead blockopnumops
数据块操作 _ReadBlockOpNumOps
次/s
从 DataNode 读取 Block OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsWrite blockopnumops
数据块操作 _WriteBlockOpNumOps
次/s
向 DataNode 写入 Block OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsBlock checksumopnumops
数据块操作 _BlockChecksumOpNumOps
次/s
DataNode 进行 Checksum 操作的 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsCopy blockopnumops
数据块操作 _CopyBlockOpNumOps
次/s
复制 Block 操作的 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsReplace blockopnumops
数据块操作 _ReplaceBlockOpNumOps
次/s
Replace Block 操作的 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsBlock reportsnumops
数据块操作 _BlockReportsNumOps
次/s
BLOCK 汇报动作的 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsIncremental blockreports numops
数据块操作 _IncrementalBlockReports NumOps
次/s
BLOCK 增量汇报的 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsCache reportsnumops
数据块操作 _CacheReportsNumOps
次/s
缓存汇报的 OPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksOpsPacketack roundtriptimenanos numops
数据块操作 _PacketAckRoundTripTimeNanos NumOps
次/s
每秒处理 ACK ROUND TRIP 次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnFsyncOpsFsync nanosnumops
FSYNC 操作 _FsyncNanosNumOps
次/s
FSYNC 次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnFlushOpsFlush nanosnumops
FLUSH 操作 _FlushNanosNumOps
次/s
每秒处理 Flush 操作次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtRead blockopavgtime
数据块操作延迟统计 _ReadBlockOpAvgTime
ms
读取 Block 操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtWrite blockopavgtime
数据块操作延迟统计 _ReplaceBlockOpAvgTime
ms
写 Blcok 操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtBlock checksumopavgtime
数据块操作延迟统计_BlockChecksumOpAvgTime
ms
块校验操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtCopy blockopavgtime
数据块操作延迟统计 _CopyBlockOpAvgTime
ms
复制块操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRt Replaceblockopavgtime
数据块操作延迟统计 _Replaceblockopavgtime
ms
Replace Block 操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtBlock reportsavgtime
数据块操作延迟统计 _BlockReportsAvgTime
ms
块汇报平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtIncremental blockreportsavgtime
数据块操作延迟统计 _IncrementalBlockReportsAvgTime
ms
增量块汇报平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtCache reportsavgtime
数据块操作延迟统计 _CacheReportsAvgTime
ms
缓存汇报平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnBlocksRtPacketack roundtriptimenanos avgtime
数据块操作延迟统计 _PacketAckRoundTripTimeNanos AvgTime
ms
处理 ACK ROUND TRIP 平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnFlushRtFlushnanosavgtime
FLUSH延迟_FlushNanosAvgTime
ms
Flush 操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnFsyncRtFsyncnanosavgtime
FSYNC延迟_FsyncNanosAvgTime
ms
Fsync 操作平均时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOp Ramdiskblockswrite
RAMDISKBlocks_Ram DiskBlocksWrite
块/s
写入内存的块的总数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOp Ramdiskblockswritefallback
RAMDISKBlocks_Ram DiskBlocksWriteFallback
块/s
写入内存但未成功的块总数(故障转移到磁盘)
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOpRamdisk blocksdeletedbeforelazypersisted
RAMDISKBlocks_RamDiskBlocks DeletedBeforeLazyPersisted
块/s
应用程序在被保存到磁盘之前被删除的块的总数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOp Ramdiskblocksreadhits
RAMDISKBlocks_Ram DiskBlocksReadHits
块/s
内存中的块被读取的总次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOp Ramdiskblocksevicted
RAMDISKBlocks_Ram DiskBlocksEvicted
块/s
内存中被清除的块总数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOpRamdisk blocksevictedwithoutread
RAMDISKBlocks_RamDiskBlocks EvictedWithoutRead
块/s
从内存中取出的内存块总数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOp Ramdiskblockslazypersisted
RAMDISKBlocks_RamDisk BlocksLazyPersisted
块/s
惰性写入器写入磁盘的总数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksOp Ramdiskbyteslazypersisted
RAMDISKBlocks_Ram DiskBytesLazyPersisted
Bytes/s
由懒惰写入器写入磁盘的总字节数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRamBlocksBytes Ramdiskbyteswrite
RAMDISK 写入速度_RamDiskBytesWrite
Bytes/s
写入内存的总字节数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmMem Memnonheapusedm
JVM 内存 _MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的大小
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmMem Memnonheapcommittedm
JVM 内存 _MemNonHeapCommittedM
MB
JVM 配置的 NonHeapCommittedM 的大小
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmMemMemheapusedm
JVM 内存 _MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的大小
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmMem Memheapcommittedm
JVM 内存 _MemHeapCommittedM
MB
JVM HeapMemory 提交大小
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmMemMemheapmaxm
JVM 内存 _MemHeapMaxM
MB
JVM 配置的 HeapMemory 的大小
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmMemMemmaxm
JVM 内存 _MemMaxM
MB
JVM 运行时的可以使用的最大的内存的大小
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmJavaThreadsThreadsnew
JVM 线程数量 _ThreadsNew
处于新建状态的线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmJavaThreads Threadsrunnable
JVM 线程数量 _ThreadsRunnable
处于可运行状态的线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmJavaThreads Threadsblocked
JVM线程数量 _ThreadsBlocked
处于阻塞状态的线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmJavaThreads Threadswaiting
JVM 线程数量 _ThreadsWaiting
处于 WAITING 状态的线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmJavaThreads Threadstimedwaiting
JVM 线程数量 _ThreadsTimedWaiting
处于 TIMED WAITING 状态的线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmJavaThreads Threadsterminated
JVM 线程数量 _ThreadsTerminated
处于 Terminated 状态的线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmLogTotalLogfatal
JVM 日志数量_LogFatal
Fatal 日志数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmLogTotalLogerror
JVM 日志数量_LogError
Error 日志数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmLogTotalLogwarn
JVM 日志数量_LogWarn
Warn 日志数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnJvmLogTotalLoginfo
JVM 日志数量_LogInfo
Info 日志数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilMemoryS0
内存区域占比_S0
%
Survivor 0区内存使用占比
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilMemoryS1
内存区域占比_S1
%
Survivor 1区内存使用占比
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilMemoryE
内存区域占比_E
%
Eden 区内存使用占比
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilMemoryO
内存区域占比_O
%
Old 区内存使用占比
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilMemoryM
内存区域占比_M
%
Metaspace 区内存使用占比
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilMemoryCcs
内存区域占比_CCS
%
Compressed class space 区内存使用占比
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilGcCountFgc
GC 次数_FGC
Full GC 次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilGcCountYgc
GC 次数_YGC
Young GC 次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilGcTimeYgct
GC 时间_YGCT
s
Young GC 消耗时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilGcTimeFgct
GC 时间_FGCT
s
Full GC 消耗时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnGcUtilGcTimeGct
GC 时间_GCT
s
垃圾回收时间消耗
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004RxtxReceivedbytes
数据流量_ReceivedBytes
Bytes/s
接收数据速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004RxtxSentbytes
数据流量_SentBytes
Bytes/s
发送数据速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004QpsRpc queuetimenumops
QPS_RpcQueueTimeNumOps
次/s
RPC 调用速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004RtRpc queuetimeavgtime
请求处理延迟 _RpcQueueTimeAvgTime
ms
RPC 平均延迟时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004AuthRpc authenticationfailures
验证和授权 _RpcAuthenticationFailures
次/s
RPC 验证失败次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004AuthRpc authenticationsuccesses
验证和授权 _RpcAuthenticationSuccesses
次/s
RPC 验证成功次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004AuthRpc authorizationfailures
验证和授权 _RpcAuthorizationFailures
次/s
RPC 授权失败次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004AuthRpc authorizationsuccesses
验证和授权 _RpcAuthorizationSuccesses
次/s
RPC 授权成功次数
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004Connections Numopenconnections
当前连接数 _NumOpenConnections
当前链接数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnPort4004QueueLen Callqueuelength
RPC 处理队列长度 _CallQueueLength
当前 RPC 处理队列长度
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnThreadTimeCurrent threadcputime
CPU 时间 _CurrentThreadCpuTime
ms
CPU时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnThreadTimeCurrent threadusertime
CPU 时间 _CurrentThreadUserTime
ms
用户时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnStartTimeStarttime
线程数量 _DaemonThreadCount
s
进程启动时间
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnThreadCount Peakthreadcount
程数量_PeakThreadCount
峰值线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnThreadCount Daemonthreadcount
线程数量_DaemonThreadCount
后台线程数量
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRtWrit
读写延迟_Write
MB/s
磁盘写速率
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnRtRead
读写延迟_Read
次/s
读操作 QPS
id4hdfsdatanode、 host4hdfsdatanode
HdfsDnDatapacketOps Datapacketops
包传输操作 QPS_DataPacketOps
次/s
包传输操作 QPS
id4hdfsdatanode、 host4hdfsdatanode

HDFS-Journal Node

指标英文名
指标中文名
指标单位
指标含义
维度
HdfsJnJvmMemMemnon heapusedm
JVM 内存_MemNonHeapUsedM
MB
JVM 当前已经使用的 NonHeapMemory 的大小
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmMemMemnon heapcommittedm
JVM 内存_MemNonHeapCommittedM
MB
JVM 内存
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmMemMem heapusedm
JVM 内存_MemHeapUsedM
MB
JVM 当前已经使用的 HeapMemory 的大小
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmMemMem heapcommittedm
JVM 内存_MemHeapCommittedM
MB
JVM HeapMemory 提交大小
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmMemMem heapmaxm
JVM 内存_MemHeapMaxM
MB
JVM 配置的 HeapMemory 的大小
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmMemMemmaxm
JVM 内存_MemMaxM
MB
JVM 运行时的可以使用的最大的内存的大小
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmJavaThreads Threadsnew
JVM 线程数量_ThreadsNew
处于新建状态的线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmJavaThreads Threadsrunnable
JVM 线程数量_ThreadsRunnable
处于可运行状态的线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmJavaThreads Threadsblocked
JVM 线程数量_ThreadsBlocked
处于阻塞状态的线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmJavaThreads Threadswaiti
JVM 线程数量_ThreadsWaiting
处于 WAITING 状态的线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmJavaThreads Threadstimedwaiting
JVM 线程数量_ThreadsTimedWaiting
处于 TIMED WAITING 状态的线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmJavaThreads Threadsterminated
JVM 线程数量_ThreadsTerminated
处于 Terminated 状态的线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmLogTotalLogfatal
JVM 日志数量_LogFatal
Fatal 日志数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmLogTotalLogerror
JVM 日志数量_LogError
Error 日志数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmLogTotalLogwarn
JVM 日志数量_LogWarn
Warn 日志数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnJvmLogTotalLoginfo
JVM 日志数量_LogInfo
Info 日志数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilMemoryS0
内存区域占比_S0
%
Survivor 0区内存使用占比
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilMemoryS1
内存区域占比_S1
%
Survivor 1区内存使用占比
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilMemoryE
内存区域占比_E
%
Eden 区内存使用占比
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilMemoryO
内存区域占比_O
%
Old 区内存使用占比
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilMemoryM
内存区域占比_M
%
Metaspace 区内存使用占比
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilMemoryCcs
内存区域占比_CCS
%
Compressed class space 区内存使用占比
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilGcCountFgc
GC 次数_FGC
Full GC 次数
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilGcCountYgc
GC 次数_YGC
Young GC 次数
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilGcTimeYgct
GC 时间_YGCT
s
Young GC 消耗时间
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilGcTimeFgct
GC 时间_FGCT
s
Full GC 消耗时间
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnGcUtilGcTimeGct
GC 时间_GC
s
垃圾回收时间消耗
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005Rxtx Receivedbytes
数据流量_ReceivedBytes
Bytes/s
接收数据速率
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005Rxtx Receivedbytes
数据流量_ReceivedBytes
Bytes/s
发送数据速率
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005QpsRpc queuetimenumops
QPS_RpcQueueTimeNumOps
次/s
RPC 调用速率
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005RtRpc queuetimeavgtime
请求处理延迟_RpcQueueTimeAvgTime
ms
RPC 平均延迟时间
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005AuthRpc authenticationfailures
验证和授权_RpcAuthenticationFailures
次/s
RPC 验证失败次数
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005AuthRpc authorizationsuccesses
验证和授权_RpcAuthorizationSuccesses
次/s
RPC 授权成功次数
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005AuthRpc authenticationsuccesses
验证和授权_RpcAuthenticationSuccesses
次/s
RPC 验证成功次数
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005AuthRpc authorizationfailures
验证和授权_RpcAuthorizationFailures
次/s
RPC 授权失败次数
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005Connections Numopenconnections
当前连接数_NumOpenConnections
当前链接数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnPort4005QueueLen Callqueuelength
RPC 处理队列长度_CallQueueLength
当前 RPC 处理队列长度
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnThreadTimeCurrent threadcputime
CPU 时间_CurrentThreadCpuTime
ms
CPU时间
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnThreadTimeCurrent threadusertime
CPU 时间_CurrentThreadUserTime
ms
用户时间
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnStartTimeStarttime
启动时间_StartTime
s
进程启动时间
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnThreadCount Threadcount
线程数量_ThreadCount
线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnThreadCount Peakthreadcount
线程数量_PeakThreadCount
峰值线程数量
host4hdfsjournalnode、id4hdfsjournalnode
HdfsJnThreadCountDaemon threadcount
线程数量_DaemonThreadCount
后台线程数量
host4hdfsjournalnode、id4hdfsjournalnode

HDFS-ZKFC

指标英文名
指标中文名
指标单位
指标含义
维度
HdfsDfzkGcUtilMemoryS0
内存区域占比_S0
%
Survivor 0区内存使用占比
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilMemoryS1
内存区域占比_S1
%
Survivor 1区内存使用占比
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilMemoryE
内存区域占比_E
%
Eden 区内存使用占比
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilMemoryO
内存区域占比_O
%
Old 区内存使用占比
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilMemoryM
内存区域占比_M
%
Metaspace 区内存使用占比
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilMemoryCcs
内存区域占比_CCS
%
Compressed class space 区内存使用占比
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilGcCountFgc
GC次数_FGC
Full GC 次数
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilGcCountYgc
GC次数_YGC
Young GC 次数
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilGcTimeYgct
GC时间_YGCT
s
Young GC 消耗时间
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilGcTimeFgct
GC时间_FGCT
s
Full GC 消耗时间
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
HdfsDfzkGcUtilGcTimeGct
GC时间_GCT
s
垃圾回收时间消耗
host4hdfszkfailovercontroller、 id4hdfszkfailovercontroller
说明:
每个指标的统计粒度(Period)可取值不一定相同,可通过 DescribeBaseMetrics 接口获取每个指标支持的统计粒度。

各维度对应参数总览

参数名称
维度名称
维度解释
格式
Instances.N.Dimensions.0.Name
id4hdfsoverview
EMR 实例 ID 的维度名称
输入 String 类型维度名称:id4hdfsoverview
Instances.N.Dimensions.0.Value
id4hdfsoverview
EMR 实例具体 ID
输入 EMR 具体实例 ID,例如 :emr-mm8bs222
Instances.N.Dimensions.1.Name
host4hdfsoverview
EMR 实例中节点 IP 的维度名称
输入String 类型维度名称:host4hdfsoverview
Instances.N.Dimensions.1.Value
host4hdfsoverview
EMR 实例中具体节点 IP
输入具体节点 IP ,例如:1.1.1.1
Instances.N.Dimensions.0.Name
id4hdfsnamenode
EMR 实例 ID 的维度名称
输入 String 类型维度名称:id4hdfsnamenode
Instances.N.Dimensions.0.Value
id4hdfsnamenode
EMR 实例具体 ID
输入 EMR 具体实例 ID,例如 :emr-mm8bs222
Instances.N.Dimensions.1.Name
host4hdfsnamenode
EMR 实例中节点 IP 的维度名称
输入String 类型维度名称:host4hdfsnamenode
Instances.N.Dimensions.1.Value
host4hdfsnamenode
EMR 实例中具体节点 IP
输入具体节点 IP ,例如:1.1.1.1
Instances.N.Dimensions.0.Name
id4hdfsdatanode
EMR 实例 ID 的维度名称
输入 String 类型维度名称:id4hdfsdatanode
Instances.N.Dimensions.0.Value
id4hdfsdatanode
EMR 实例具体 ID
输入 EMR 具体实例 ID,例如 :emr-mm8bs222
Instances.N.Dimensions.1.Name
host4hdfsdatanode
EMR 实例中节点 IP 的维度名称
输入String 类型维度名称:host4hdfsdatanode
Instances.N.Dimensions.1.Value
host4hdfsdatanode
EMR 实例中具体节点 IP
输入具体节点 IP ,例如:1.1.1.1
Instances.N.Dimensions.0.Name
id4hdfsjournalnode
EMR 实例 ID 的维度名称
输入 String 类型维度名称:id4hdfsjournalnode
Instances.N.Dimensions.0.Value
id4hdfsjournalnode
EMR 实例具体 ID
输入 EMR 具体实例 ID,例如 :emr-mm8bs222
Instances.N.Dimensions.1.Name
host4hdfsjournalnode
EMR 实例中节点 IP 的维度名称
输入String 类型维度名称:host4hdfsjournalnode
Instances.N.Dimensions.1.Value
host4hdfsjournalnode
EMR 实例中具体节点 IP
输入具体节点 IP ,例如:1.1.1.1
Instances.N.Dimensions.0.Name
id4hdfszkfailovercontroller
EMR 实例 ID 的维度名称
输入 String 类型维度名称:id4hdfszkfailovercontroller
Instances.N.Dimensions.0.Value
id4hdfszkfailovercontroller
EMR 实例具体 ID
输入 EMR 具体实例 ID,例如 :emr-mm8bs222
Instances.N.Dimensions.1.Name
host4hdfszkfailovercontroller
EMR 实例中节点 IP 的维度名称
输入String 类型维度名称:host4hdfszkfailovercontroller
Instances.N.Dimensions.1.Value
host4hdfszkfailovercontroller
EMR 实例中具体节点 IP
输入具体节点 IP ,例如:1.1.1.1

入参说明

弹性 MapReduce(HDFS)支持以下六种维度组合的查询方式,六种入参取值如下:
1. 查询 HDFS-OverviewAggregation 的指标监控数据,入参取值如下: &Namespace=QCE/TXMR_HDFS &Instances.N.Dimensions.0.Name=id4hdfsoverview &Instances.N.Dimensions.0.Value=EMR 实例 ID
2. 查询 HDFS-Overview 的指标监控数据,入参取值如下: &Namespace=QCE/TXMR_HDFS &Instances.N.Dimensions.0.Name=id4hdfsoverview &Instances.N.Dimensions.0.Value=EMR 实例 ID &Instances.N.Dimensions.1.Name=host4hdfsoverview &Instances.N.Dimensions.1.Value=EMR 实例中具体节点 IP
3. 查询 HDFS-NameNode 的指标监控数据,入参取值如下: &Namespace=QCE/TXMR_HDFS &Instances.N.Dimensions.0.Name=id4hdfsnamenode &Instances.N.Dimensions.0.Value=EMR 实例 ID &Instances.N.Dimensions.1.Name=host4hdfsnamenode &Instances.N.Dimensions.1.Value=EMR实例中具体节点 IP
4. 查询 HDFS-DataNode 的指标监控数据,入参取值如下: &Namespace=QCE/TXMR_HDFS &Instances.N.Dimensions.0.Name=id4hdfsdatanode &Instances.N.Dimensions.0.Value=EMR 实例 ID &Instances.N.Dimensions.1.Name=host4hdfsdatanode &Instances.N.Dimensions.1.Value=EMR实例中具体节点 IP
5. 查询 HDFS-Journal Node 的指标监控数据,入参取值如下: &Namespace=QCE/TXMR_HDFS &Instances.N.Dimensions.0.Name=id4hdfsjournalnode &Instances.N.Dimensions.0.Value=EMR 实例具体 ID &Instances.N.Dimensions.1.Name=host4hdfsjournalnode &Instances.N.Dimensions.1.Value=EMR 实例中具体节点 IP
6. 查询 HDFS-ZKFC 的指标监控数据,入参取值如下: &Namespace=QCE/TXMR_HDFS &Instances.N.Dimensions.0.Name=id4hdfszkfailovercontroller &Instances.N.Dimensions.0.Value=EMR 实例具体 ID &Instances.N.Dimensions.1.Name=host4hdfszkfailovercontroller &Instances.N.Dimensions.1.Value=EMR 实例中具体节点 IP

帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈