弹性 MapReduce（HDFS）
最后更新时间：2024-01-27 17:58:51
命名空间
Namespace=QCE/TXMR_HDFS
监控指标
弹性 MapReduce（HDFS）提供 HDFS-Overview、HDFS-OverviewAggregation、HDFS-NameNode、HDFS-DataNode、HDFS-Journal Node 和 HDFS-ZKFC 指标。
说明：
HDFS-Overview
指标英文名 | 指标中文名 | 单位 | 指标含义 | 维度 |
EmrHdfsOverview
HdfsNnBlockCapacityTotal | 集群存储容量_CapacityTotal | GB | 集群存储总容量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockCapacityUsed | 集群存储容量_CapacityUsed | GB | 集群储存已使用容量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockCapacityRemaining | 集群存储容量_CapacityRemaining | GB | 集群存储剩余容量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockCapacity
UsedNonDFS | 集群存储容量_CapacityUsedNonDFS | GB | 集群非 HDFS 使用容量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockTotalLoad | 集群负载_TotalLoad | 个 | 当前连接数 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockFilesTotal | 群文件总数量_FilesTotal | 个 | 总文件数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockBlockstotal | BLOCKS 数量_BlocksTotal | 个 | 总 BLOCK 数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockPending
ReplicationBlocks | BLOCKS 数量_PendingReplicationBlocks | 个 | 等待被备份的块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockUnder
ReplicatedBlocks | BLOCKS 数量_UnderReplicatedBlocks | 个 | 副本数不够的块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockBlocksCorruptblocks | BLOCKS 数量_CorruptBlocks | 个 | 坏块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockScheduled
ReplicationBlocks | BLOCKS 数量_ScheduledReplicationBlocks | 个 | 安排要备份的块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockPending
DeletionBlocks | BLOCKS 数量_PendingDeletionBlocks | 个 | 等待被删除的块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockCorruptblocks | BLOCKS 数量_CorruptBlocks | 个 | 多于的块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockPostponed
MisreplicatedBlocks | BLOCKS 数量_PostponedMisreplicatedBlocks | 个 | 被推迟处理的异常块数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockBlockCapacity | BLOCK容量_BlockCapacity | 个 | BLOCK 容量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockNumLiveDataNodes | 集群数据节点_NumLiveDataNodes | 个 | 个活的数据节点数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockNumDeadDataNodes | 集群数据节点_NumDeadDataNodes | 个 | 已经标记为 Dead 状态的数据节点数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockNum
DecomLiveDataNodes | 集群数据节点_NumDecomLiveDataNodes | 个 | 下线且 Live 的节点数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockNum
DecomDeadDataNodes | 集群数据节点_NumDecomDeadDataNodes | 个 | 下线且 Dead 的节点数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockNum
DecommissioningDataNodes | 集群数据节点_NumDecommissioningDataNodes | 个 | 正在下线的节点数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockNum
StaleDataNodes | 集群数据节点_NumStaleDataNodes | 个 | 由于心跳延迟而标记为过期的 DataNodes 当前数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockSnapshots | SNAPSHOT 相关_Snapshots | 个 | Snapshots 数量 | host4hdfsoverview、
id4hdfsoverview |
EmrHdfsOverview
HdfsNnBlockVolumeFailuresTotal | 磁盘故障_VolumeFailuresTotal | 次 | 所有 Datanodes 的全故障总数 | host4hdfsoverview、
id4hdfsoverview |
HDFS-OverviewAggregation
指标英文名 | 指标中文名 | 单位 | 指标含义 | 维度 |
EmrHdfsOverview
Aggregation
HdfsNnBlockCapacityTotal | 集群存储容量_CapacityTotal | GB | 集群存储总容量 | id4hdfsoverview |
EmrHdfsOverview
Aggregation
HdfsNnBlockCapacityUsed | 集群存储容量_CapacityUsed | GB | 集群储存已使用容量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockCapacityRemaining | 集群存储容量_CapacityRemaining | GB | 集群存储剩余容量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockCapacity UsedNonDFS | 集群存储容量_CapacityUsedNonDFS | GB | 集群非 HDFS 使用容量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockTotalLoad | 集群负载_TotalLoad | 个 | 当前连接数 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockFilesTotal | 群文件总数量_FilesTotal | 个 | 总文件数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockBlockstotal | BLOCKS 数量_BlocksTotal | 个 | 总 BLOCK 数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockPending ReplicationBlocks | BLOCKS 数量_PendingReplicationBlocks | 个 | 等待被备份的块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockUnder ReplicatedBlocks | BLOCKS 数量_UnderReplicatedBlocks | 个 | 副本数不够的块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockBlocksCorruptblocks | BLOCKS 数量_CorruptBlocks | 个 | 坏块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockScheduled ReplicationBlocks | BLOCKS 数量_ScheduledReplicationBlocks | 个 | 安排要备份的块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockPending DeletionBlocks | BLOCKS 数量_PendingDeletionBlocks | 个 | 等待被删除的块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockCorruptblocks | BLOCKS 数量_CorruptBlocks | 个 | 多于的块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockPostponed MisreplicatedBlocks | BLOCKS 数量_PostponedMisreplicatedBlocks | 个 | 被推迟处理的异常块数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockBlockCapacity | BLOCK容量_BlockCapacity | 个 | BLOCK 容量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockNumLiveDataNodes | 集群数据节点_NumLiveDataNodes | 个 | 个活的数据节点数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockNumDeadDataNodes | 集群数据节点_NumDeadDataNodes | 个 | 已经标记为 Dead 状态的数据节点数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockNum DecomLiveDataNodes | 集群数据节点_NumDecomLiveDataNodes | 个 | 下线且 Live 的节点数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockNum DecomDeadDataNodes | 集群数据节点_NumDecomDeadDataNodes | 个 | 下线且 Dead 的节点数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockNum DecommissioningDataNodes | 集群数据节点_NumDecommissioningDataNodes | 个 | 正在下线的节点数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockNum StaleDataNodes | 集群数据节点_NumStaleDataNodes | 个 | 由于心跳延迟而标记为过期的 DataNodes 当前数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockSnapshots | SNAPSHOT 相关_Snapshots | 个 | Snapshots 数量 | id4hdfsoverview |
EmrHdfsOverview
AggregationHdfsNn
BlockVolumeFailuresTotal | 磁盘故障_VolumeFailuresTotal | 次 | 所有 Datanodes 的全故障总数 | id4hdfsoverview |
HDFS-NameNode
指标英文名 | 指标中文名 | 指标单位 | 指标含义 | 维度 |
HdfsNnPort4007RxtxReceivedbytes | 数据流量_ReceivedBytes | Bytes/s | 接收数据速率 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007RxtxSentbytes | 数据流量_SentBytes | Bytes/s | 发送数据速率 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007Qps
Rpcqueuetimenumops | QPS_RpcQueueTimeNumOps | 次/s | RPC 调用速率 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007RtRpc
queuetimeavgtime | 请求处理延迟
_RpcQueueTimeAvgTime | ms | RPC 平均延迟时间 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007AuthRpc
authenticationfailures | 验证和授权
_RpcAuthenticationFailure | 次 | RPC 验证失败次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007AuthRpc
authenticationsuccesses | 验证和授权
_RpcAuthenticationSuccesses | 次 | RPC 验证成功次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007AuthRpc
authorizationfailures | 验证和授权
_RpcAuthorizationFailures | 次 | RPC 授权失败次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007AuthRpc
authorizationsuccesses | 验证和授权
_RpcAuthorizationSuccesses | 次 | RPC 授权成功次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007Connections
Numopenconnections | 当前连接数
_NumOpenConnections | 个 | 当前链接数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPort4007Queue
LenCallqueuelength | RPC 处理队列长度
_CallQueueLength | 个 | 当前 RPC 处理队列长度 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmMemMemnonheapusedm | JVM 内存
_MemNonHeapUsedM | MB | JVM 当前已经使用的 NonHeapMemory 的大小 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmMemMemnon
heapcommittedm | JVM 内存
_MemNonHeapCommittedM | MB | JVM 内存 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmMemMemheapusedm | JVM 内存
_MemHeapUsedM | MB | JVM 当前已经使用的 HeapMemory 的大小 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmMem
Memheapcommittedm | JVM 内存
_MemHeapCommittedM | MB | JVM HeapMemory 提交大小 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmMemMemheapmaxm | JVM 内存_MemHeapMaxM | MB | JVM 配置的 HeapMemory 的大小 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmMemMemmaxm | JVM 内存_MemMaxM | MB | JVM 运行时的可以使用的最大的内存的大小 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnBlockReportRt
Blockreportavgtime | 数据块汇报延迟
_BlockReportAvgTime | 次/s | 每秒处理 DataNode Blcok 平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilGcCountFgc | GC 次数_FGC | 次/s | Full GC 次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilGcCountYgc | C 次数_YGC | 2次/s | Young GC 次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilGcTimeYgct | GC 时间_YGCT | ms | Young GC 消耗时间 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilGcTimeFgct | GC 时间_FGCT | ms | Full GC 消耗时间 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilGcTimeGct | GC 时间_GCT | ms | 垃圾回收时间消耗 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmJavaThreadsThreadsnew | JVM 线程数量
_ThreadsNew | 个 | 处于新建状态的线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmJavaThreads
Threadsrunnable | JVM 线程数量
_ThreadsRunnable | 个 | 处于可运行状态的线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmJavaThreads
Threadsblocked | JVM 线程数量
_ThreadsBlocked | 个 | 处于阻塞状态的线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmJavaThreads
Threadswaiting | JVM 线程数量
_ThreadsWaiting | 个 | 处于 WAITING 状态的线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmJavaThreads
Threadstimedwaiting | JVM 线程数量
_ThreadsTimedWaiting | 个 | 处于 TIMED WAITING 状态的线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmJavaThreads
Threadsterminated | JVM 线程数量
_ThreadsTerminated | 个 | 处于 Terminated 状态的线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmLogTotalLogfatal | JVM 日志数量_LogFatal | 个 | Fatal 日志数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmLogTotalLogerror | JVM 日志数量_LogError | 个 | Error 日志数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmLogTotalLogwarn | JVM 日志数量_LogWarn | 个 | Warn 日志数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnJvmLogTotalLoginfo | JVM 日志数量_LogInfo | 个 | Info 日志数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilMemoryS0 | 内存区域占比_S0 | % | Survivor 0区内存使用占比 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilMemoryS1 | 内存区域占比_S1 | % | Survivor 1区内存使用占比 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilMemoryE | 内存区域占比_E | % | Eden 区内存使用占比 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilMemoryO | 内存区域占比_O | % | Old 区内存使用占比 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilMemoryM | 内存区域占比_M | % | Metaspace 区内存使用占比 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnGcUtilMemoryCcs | 内存区域占比_CCS | % | Compressed class space 区内存使用占比 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnStaleStorages
CountNumstalestorages | 被标记为过期的存储的数量
_NumStaleStorages | 个 | 由于心跳延迟而标记为过期的 DataNodes 当前数目 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnPendingDatanodeMessage
CountPendingdatanode
messagecount | 备 NN 上挂起的与 BLOCK 相关操作的消息数量
_PendingDataNode
MessageCount | 个/s | DATANODE 的请求被 QUEUE 在 standby namenode 中的个数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnBlocksMissingNum
berofmissingblocks | 缺失块统计
_NumberOfMissingBlocks | 个 | 缺失的数据块数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnBlocksMissingNumberof
missingblockswithreplication
factorOne | 缺失块统计_NumberOf
MissingBlocksWithReplication
FactorOne | 个 | 缺失的数据库数量（rf = 1） | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOpsAllowsnapshotops | SNAPSHOT 操作
_AllowSnapshotOps | 次/s | 每秒执行 AllowSnapshot 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOps
Disallowsnapshotops | SNAPSHOT 操作
_DisallowSnapshotOps | 次/s | 每秒执行 DisallowSnapshot 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOps
Createsnapshotops | SNAPSHOT 操作
_CreateSnapshotOps | 次/s | 每秒执行 CreateSnapshot 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOps
Deletesnapshotops | SNAPSHOT 操作
_DeleteSnapshotOps | 次/s | 每秒执行 DeleteSnapshot 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOps
Listsnapshottabledirops | SNAPSHOT 操作_ListSnapshottableDirOps | 次/s | 每秒执行 ListSnapshottableDir 操作次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOps
Snapshotdiffreportops | SNAPSHOT 操作_SnapshotDiffReportOps | 次/s | 每秒执行 SnapshotDiffReportOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSnapshotOps
Renamesnapshotops | SNAPSHOT 操作_RenameSnapshotOps | 次/s | 每秒执行 RenameSnapshotOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsCreatefileops | 文件操作_CreateFileOps | 次/s | 每秒执行 CreateFile 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsGetlistingops | 文件操作_GetListingOps | 次/s | 每秒执行 GetListing 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsTotalfileops | 文件操作_TotalFileOps | 次/s | 每秒执行 TotalFileOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsDeletefileops | 文件操作_DeleteFileOps | 次/s | 每秒执行 DeleteFile 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsFileinfoops | 文件操作_FileInfoOps | 次/s | 每秒执行 FileInfo 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsGetadditional
datanodeops | 文件操作
_GetAdditionalDatanodeOps | 次/s | 每秒执行 GetAdditionalDatanode 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsCreatesymlinkops | 文件操作_CreateSymlinkOps | 次/s | 每秒执行 CreateSymlink 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsGetlinktargetops | 文件操作_GetLinkTargetOps | 次/s | 每秒执行 GetLinkTarget 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnFilesOpsFilesingetlistingops | 文件操作
_FilesInGetListingOps | 次/s | 每秒执行 FilesInGetListing 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnTransactionOps
Transactionsnumops | 事务操作
_TransactionsNumOps | 次/s | 每秒处理 Journal transaction 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnTransactionOps
Transactionsbatchedinsync | 事务操作
_TransactionsBatchedInSync | 次/s | 每秒批量处理 Journal transaction 操作次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnImageOpsGeteditnumops | 镜像操作_GetEditNumOps | 次/s | 每秒执行 GetEditNumOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnImageOpsGetimagenumops | 镜像操作_GetImageNumOps | 次/s | 每秒执行 GetImageNumOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnImageOpsPutimagenumops | 镜像操作_PutImageNumOps | 次/s | 每秒执行 PutImageNumOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSyncsOpsSyncsnumops | SYNC 操作_SyncsNumOps | 次/s | 每秒处理 Journal syncs 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnBlocksOpsBlock
receivedanddeletedops | 数据块操作
_BlockOpsQueued | 次/s | 每秒执行 BlockReceivedAndDeletedOps 的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnBlocksOpsBlockopsqueued | 数据块操作
_BlockOpsQueued | 次/s | 处理 DataNode Block 上报操作的延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnCacheReportOps
Cachereportnumops | 缓存汇报
_CacheReportNumOps | 次/s | 每秒处理 CacheReport 操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnBlockReportOps
Blockreportnumops | 数据块汇报
_BlockReportNumOps | 次/s | 每秒处理 DataNode Blcok 上报操作的次数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnSyncsRtSyncsavgtime | SYNCS 操作延迟_SyncsAvgTime | ms | 处理 Journal syncs 操作的平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnCacheReportRt
Cachereportavgtime | Cache 汇报延迟_CacheReportAvgTime | ms | 缓存上报动作平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnImageRtGeteditavgtime | 镜像操作延迟
_GetEditAvgTime | ms | 读取 Edit 文件操作平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnImageRtGetimageavgtime | 镜像操作延迟
_GetImageAvgTime | ms | 读取镜像文件平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnImageRtPutimageavgtime | 镜像操作延迟
_PutImageAvgTime | ms | 写入镜像文件平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnTransactionRt
Transactionsavgtime | 事务操作延迟
_TransactionsAvgTime | ms | 处理 Journal transaction 操作的平均延迟 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnStartTimeStarttime | 启动时间_StartTime | ms | 进程启动时间 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnStateState | 主备情况_State | - | NN 状态 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnThreadCountPeakthreadcount | 线程数量_PeakThreadCount | 个 | 峰值线程数 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnThreadCountThreadcount | 线程数量_ThreadCount | 个 | 线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HdfsNnThreadCount
Daemonthreadcount | 线程数量_DaemonThreadCount | 个 | 后台线程数量 | host4hdfsnamenode、
id4hdfsnamenode |
HDFS-DataNode
指标英文名 | 指标中文名 | 指标单位 | 指标含义 | 维度 |
HdfsDnXceiverXceivercount | XCEIVER 数量_XceiverCount | 个 | Xceiver 数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBytesByteswrittenmb | 数据读写速率_BytesReadMB | Bytes/s | 写入 DN 的字节速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBytesBytesreadmb | 数据读写速率_BytesReadMB | Bytes/s | 读取 DN 的字节速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBytesRemotebytesreadmb | 数据读写速率
_RemoteBytesReadMB | Bytes/s | 远程客户端读取字节速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBytesRemoteby
teswrittenmb | 数据读写速率
_RemoteBytesWrittenMB | Bytes/s | 远程客户端写入字节速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnClientWritesfrom
remoteclient | 客户端连接数
_WritesFromRemoteClient | 个 | 来自远程客户端写操作 QPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnClientWritesfromlocalclient | 客户端连接数
_WritesFromLocalClient | 个 | 来自本地客户端写操作 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnClientReadsfrom
remoteclient | 客户端连接数
_ReadsFromRemoteClient | 个 | 来自远程客户端读操作 QPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnClientReadsfromlocalclient | 客户端连接数
_ReadsFromLocalClient | 个 | 来自本地客户端读操作 QPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksVerifiedFailures
Blockverificationfailures | Block 校验失败
_BlockVerificationFailures | 次/s | BLOCK 校验失败数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnVolumeFailures
Volumefailures | 磁盘故障_VolumeFailures | 次/s | 磁盘故障次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnNetworkErrors
Datanodenetworkerrors | 网络错误
_DatanodeNetworkErrors | 次/s | 网络错误统计 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnHbRtHeartbeatsavgtime | 心跳延迟_HeartbeatsAvgTime | ms | 心跳接口平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnHbOpsHeartbeatsnumops | 心跳 QPS_HeartbeatsNumOps | 次/s | 心跳接口 QPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnDatapacketAvgtimeSend
datapackettransfer
nanosavgtime | 包传输操作
QPS_SendDataPacketTransfer
NanosAvgTime | ms | 发送数据包平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsRead
blockopnumops | 数据块操作
_ReadBlockOpNumOps | 次/s | 从 DataNode 读取 Block OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsWrite
blockopnumops | 数据块操作
_WriteBlockOpNumOps | 次/s | 向 DataNode 写入 Block OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsBlock
checksumopnumops | 数据块操作
_BlockChecksumOpNumOps | 次/s | DataNode 进行 Checksum 操作的 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsCopy
blockopnumops | 数据块操作
_CopyBlockOpNumOps | 次/s | 复制 Block 操作的 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsReplace
blockopnumops | 数据块操作
_ReplaceBlockOpNumOps | 次/s | Replace Block 操作的 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsBlock
reportsnumops | 数据块操作
_BlockReportsNumOps | 次/s | BLOCK 汇报动作的 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsIncremental
blockreports
numops | 数据块操作
_IncrementalBlockReports
NumOps | 次/s | BLOCK 增量汇报的 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsCache
reportsnumops | 数据块操作
_CacheReportsNumOps | 次/s | 缓存汇报的 OPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksOpsPacketack
roundtriptimenanos
numops | 数据块操作
_PacketAckRoundTripTimeNanos
NumOps | 次/s | 每秒处理 ACK ROUND TRIP 次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnFsyncOpsFsync
nanosnumops | FSYNC 操作
_FsyncNanosNumOps | 次/s | FSYNC 次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnFlushOpsFlush
nanosnumops | FLUSH 操作
_FlushNanosNumOps | 次/s | 每秒处理 Flush 操作次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtRead
blockopavgtime | 数据块操作延迟统计
_ReadBlockOpAvgTime | ms | 读取 Block 操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtWrite
blockopavgtime | 数据块操作延迟统计
_ReplaceBlockOpAvgTime | ms | 写 Blcok 操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtBlock
checksumopavgtime | 数据块操作延迟统计_BlockChecksumOpAvgTime | ms | 块校验操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtCopy
blockopavgtime | 数据块操作延迟统计
_CopyBlockOpAvgTime | ms | 复制块操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRt
Replaceblockopavgtime | 数据块操作延迟统计
_Replaceblockopavgtime | ms | Replace Block 操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtBlock
reportsavgtime | 数据块操作延迟统计
_BlockReportsAvgTime | ms | 块汇报平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtIncremental
blockreportsavgtime | 数据块操作延迟统计
_IncrementalBlockReportsAvgTime | ms | 增量块汇报平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtCache
reportsavgtime | 数据块操作延迟统计
_CacheReportsAvgTime | ms | 缓存汇报平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnBlocksRtPacketack
roundtriptimenanos
avgtime | 数据块操作延迟统计
_PacketAckRoundTripTimeNanos
AvgTime | ms | 处理 ACK ROUND TRIP 平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnFlushRtFlushnanosavgtime | FLUSH延迟_FlushNanosAvgTime | ms | Flush 操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnFsyncRtFsyncnanosavgtime | FSYNC延迟_FsyncNanosAvgTime | ms | Fsync 操作平均时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOp
Ramdiskblockswrite | RAMDISKBlocks_Ram
DiskBlocksWrite | 块/s | 写入内存的块的总数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOp
Ramdiskblockswritefallback | RAMDISKBlocks_Ram
DiskBlocksWriteFallback | 块/s | 写入内存但未成功的块总数（故障转移到磁盘） | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOpRamdisk
blocksdeletedbeforelazypersisted | RAMDISKBlocks_RamDiskBlocks
DeletedBeforeLazyPersisted | 块/s | 应用程序在被保存到磁盘之前被删除的块的总数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOp
Ramdiskblocksreadhits | RAMDISKBlocks_Ram
DiskBlocksReadHits | 块/s | 内存中的块被读取的总次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOp
Ramdiskblocksevicted | RAMDISKBlocks_Ram
DiskBlocksEvicted | 块/s | 内存中被清除的块总数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOpRamdisk
blocksevictedwithoutread | RAMDISKBlocks_RamDiskBlocks
EvictedWithoutRead | 块/s | 从内存中取出的内存块总数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOp
Ramdiskblockslazypersisted | RAMDISKBlocks_RamDisk
BlocksLazyPersisted | 块/s | 惰性写入器写入磁盘的总数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksOp
Ramdiskbyteslazypersisted | RAMDISKBlocks_Ram
DiskBytesLazyPersisted | Bytes/s | 由懒惰写入器写入磁盘的总字节数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRamBlocksBytes
Ramdiskbyteswrite | RAMDISK 写入速度_RamDiskBytesWrite | Bytes/s | 写入内存的总字节数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmMem
Memnonheapusedm | JVM 内存
_MemNonHeapUsedM | MB | JVM 当前已经使用的 NonHeapMemory 的大小 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmMem
Memnonheapcommittedm | JVM 内存
_MemNonHeapCommittedM | MB | JVM 配置的 NonHeapCommittedM 的大小 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmMemMemheapusedm | JVM 内存
_MemHeapUsedM | MB | JVM 当前已经使用的 HeapMemory 的大小 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmMem
Memheapcommittedm | JVM 内存
_MemHeapCommittedM | MB | JVM HeapMemory 提交大小 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmMemMemheapmaxm | JVM 内存
_MemHeapMaxM | MB | JVM 配置的 HeapMemory 的大小 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmMemMemmaxm | JVM 内存
_MemMaxM | MB | JVM 运行时的可以使用的最大的内存的大小 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmJavaThreadsThreadsnew | JVM 线程数量
_ThreadsNew | 个 | 处于新建状态的线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmJavaThreads
Threadsrunnable | JVM 线程数量
_ThreadsRunnable | 个 | 处于可运行状态的线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmJavaThreads
Threadsblocked | JVM线程数量
_ThreadsBlocked | 个 | 处于阻塞状态的线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmJavaThreads
Threadswaiting | JVM 线程数量
_ThreadsWaiting | 个 | 处于 WAITING 状态的线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmJavaThreads
Threadstimedwaiting | JVM 线程数量
_ThreadsTimedWaiting | 个 | 处于 TIMED WAITING 状态的线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmJavaThreads
Threadsterminated | JVM 线程数量
_ThreadsTerminated | 个 | 处于 Terminated 状态的线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmLogTotalLogfatal | JVM 日志数量_LogFatal | 个 | Fatal 日志数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmLogTotalLogerror | JVM 日志数量_LogError | 个 | Error 日志数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmLogTotalLogwarn | JVM 日志数量_LogWarn | 个 | Warn 日志数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnJvmLogTotalLoginfo | JVM 日志数量_LogInfo | 个 | Info 日志数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilMemoryS0 | 内存区域占比_S0 | % | Survivor 0区内存使用占比 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilMemoryS1 | 内存区域占比_S1 | % | Survivor 1区内存使用占比 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilMemoryE | 内存区域占比_E | % | Eden 区内存使用占比 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilMemoryO | 内存区域占比_O | % | Old 区内存使用占比 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilMemoryM | 内存区域占比_M | % | Metaspace 区内存使用占比 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilMemoryCcs | 内存区域占比_CCS | % | Compressed class space 区内存使用占比 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilGcCountFgc | GC 次数_FGC | 次 | Full GC 次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilGcCountYgc | GC 次数_YGC | 次 | Young GC 次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilGcTimeYgct | GC 时间_YGCT | s | Young GC 消耗时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilGcTimeFgct | GC 时间_FGCT | s | Full GC 消耗时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnGcUtilGcTimeGct | GC 时间_GCT | s | 垃圾回收时间消耗 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004RxtxReceivedbytes | 数据流量_ReceivedBytes | Bytes/s | 接收数据速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004RxtxSentbytes | 数据流量_SentBytes | Bytes/s | 发送数据速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004QpsRpc
queuetimenumops | QPS_RpcQueueTimeNumOps | 次/s | RPC 调用速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004RtRpc
queuetimeavgtime | 请求处理延迟
_RpcQueueTimeAvgTime | ms | RPC 平均延迟时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004AuthRpc
authenticationfailures | 验证和授权
_RpcAuthenticationFailures | 次/s | RPC 验证失败次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004AuthRpc
authenticationsuccesses | 验证和授权
_RpcAuthenticationSuccesses | 次/s | RPC 验证成功次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004AuthRpc
authorizationfailures | 验证和授权
_RpcAuthorizationFailures | 次/s | RPC 授权失败次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004AuthRpc
authorizationsuccesses | 验证和授权
_RpcAuthorizationSuccesses | 次/s | RPC 授权成功次数 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004Connections
Numopenconnections | 当前连接数
_NumOpenConnections | 个 | 当前链接数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnPort4004QueueLen
Callqueuelength | RPC 处理队列长度
_CallQueueLength | 个 | 当前 RPC 处理队列长度 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnThreadTimeCurrent
threadcputime | CPU 时间
_CurrentThreadCpuTime | ms | CPU时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnThreadTimeCurrent
threadusertime | CPU 时间
_CurrentThreadUserTime | ms | 用户时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnStartTimeStarttime | 线程数量
_DaemonThreadCount | s | 进程启动时间 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnThreadCount
Peakthreadcount | 程数量_PeakThreadCount | 个 | 峰值线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnThreadCount
Daemonthreadcount | 线程数量_DaemonThreadCount | 个 | 后台线程数量 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRtWrit | 读写延迟_Write | MB/s | 磁盘写速率 | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnRtRead | 读写延迟_Read | 次/s | 读操作 QPS | id4hdfsdatanode、
host4hdfsdatanode |
HdfsDnDatapacketOps
Datapacketops | 包传输操作 QPS_DataPacketOps | 次/s | 包传输操作 QPS | id4hdfsdatanode、
host4hdfsdatanode |
HDFS-Journal Node
指标英文名 | 指标中文名 | 指标单位 | 指标含义 | 维度 |
HdfsJnJvmMemMemnon
heapusedm | JVM 内存_MemNonHeapUsedM | MB | JVM 当前已经使用的 NonHeapMemory 的大小 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmMemMemnon
heapcommittedm | JVM 内存_MemNonHeapCommittedM | MB | JVM 内存 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmMemMem
heapusedm | JVM 内存_MemHeapUsedM | MB | JVM 当前已经使用的 HeapMemory 的大小 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmMemMem
heapcommittedm | JVM 内存_MemHeapCommittedM | MB | JVM HeapMemory 提交大小 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmMemMem
heapmaxm | JVM 内存_MemHeapMaxM | MB | JVM 配置的 HeapMemory 的大小 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmMemMemmaxm | JVM 内存_MemMaxM | MB | JVM 运行时的可以使用的最大的内存的大小 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmJavaThreads
Threadsnew | JVM 线程数量_ThreadsNew | 个 | 处于新建状态的线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmJavaThreads
Threadsrunnable | JVM 线程数量_ThreadsRunnable | 个 | 处于可运行状态的线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmJavaThreads
Threadsblocked | JVM 线程数量_ThreadsBlocked | 个 | 处于阻塞状态的线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmJavaThreads
Threadswaiti | JVM 线程数量_ThreadsWaiting | 个 | 处于 WAITING 状态的线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmJavaThreads
Threadstimedwaiting | JVM 线程数量_ThreadsTimedWaiting | 个 | 处于 TIMED WAITING 状态的线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmJavaThreads
Threadsterminated | JVM 线程数量_ThreadsTerminated | 个 | 处于 Terminated 状态的线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmLogTotalLogfatal | JVM 日志数量_LogFatal | 个 | Fatal 日志数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmLogTotalLogerror | JVM 日志数量_LogError | 个 | Error 日志数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmLogTotalLogwarn | JVM 日志数量_LogWarn | 个 | Warn 日志数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnJvmLogTotalLoginfo | JVM 日志数量_LogInfo | 个 | Info 日志数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilMemoryS0 | 内存区域占比_S0 | % | Survivor 0区内存使用占比 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilMemoryS1 | 内存区域占比_S1 | % | Survivor 1区内存使用占比 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilMemoryE | 内存区域占比_E | % | Eden 区内存使用占比 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilMemoryO | 内存区域占比_O | % | Old 区内存使用占比 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilMemoryM | 内存区域占比_M | % | Metaspace 区内存使用占比 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilMemoryCcs | 内存区域占比_CCS | % | Compressed class space 区内存使用占比 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilGcCountFgc | GC 次数_FGC | 次 | Full GC 次数 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilGcCountYgc | GC 次数_YGC | 次 | Young GC 次数 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilGcTimeYgct | GC 时间_YGCT | s | Young GC 消耗时间 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilGcTimeFgct | GC 时间_FGCT | s | Full GC 消耗时间 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnGcUtilGcTimeGct | GC 时间_GC | s | 垃圾回收时间消耗 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005Rxtx
Receivedbytes | 数据流量_ReceivedBytes | Bytes/s | 接收数据速率 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005Rxtx
Receivedbytes | 数据流量_ReceivedBytes | Bytes/s | 发送数据速率 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005QpsRpc
queuetimenumops | QPS_RpcQueueTimeNumOps | 次/s | RPC 调用速率 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005RtRpc
queuetimeavgtime | 请求处理延迟_RpcQueueTimeAvgTime | ms | RPC 平均延迟时间 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005AuthRpc
authenticationfailures | 验证和授权_RpcAuthenticationFailures | 次/s | RPC 验证失败次数 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005AuthRpc
authorizationsuccesses | 验证和授权_RpcAuthorizationSuccesses | 次/s | RPC 授权成功次数 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005AuthRpc
authenticationsuccesses | 验证和授权_RpcAuthenticationSuccesses | 次/s | RPC 验证成功次数 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005AuthRpc
authorizationfailures | 验证和授权_RpcAuthorizationFailures | 次/s | RPC 授权失败次数 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005Connections
Numopenconnections | 当前连接数_NumOpenConnections | 个 | 当前链接数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnPort4005QueueLen
Callqueuelength | RPC 处理队列长度_CallQueueLength | 个 | 当前 RPC 处理队列长度 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnThreadTimeCurrent
threadcputime | CPU 时间_CurrentThreadCpuTime | ms | CPU时间 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnThreadTimeCurrent
threadusertime | CPU 时间_CurrentThreadUserTime | ms | 用户时间 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnStartTimeStarttime | 启动时间_StartTime | s | 进程启动时间 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnThreadCount
Threadcount | 线程数量_ThreadCount | 个 | 线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnThreadCount
Peakthreadcount | 线程数量_PeakThreadCount | 个 | 峰值线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HdfsJnThreadCountDaemon
threadcount | 线程数量_DaemonThreadCount | 个 | 后台线程数量 | host4hdfsjournalnode、id4hdfsjournalnode |
HDFS-ZKFC
指标英文名 | 指标中文名 | 指标单位 | 指标含义 | 维度 |
HdfsDfzkGcUtilMemoryS0 | 内存区域占比_S0 | % | Survivor 0区内存使用占比 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilMemoryS1 | 内存区域占比_S1 | % | Survivor 1区内存使用占比 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilMemoryE | 内存区域占比_E | % | Eden 区内存使用占比 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilMemoryO | 内存区域占比_O | % | Old 区内存使用占比 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilMemoryM | 内存区域占比_M | % | Metaspace 区内存使用占比 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilMemoryCcs | 内存区域占比_CCS | % | Compressed class space 区内存使用占比 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilGcCountFgc | GC次数_FGC | 次 | Full GC 次数 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilGcCountYgc | GC次数_YGC | 次 | Young GC 次数 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilGcTimeYgct | GC时间_YGCT | s | Young GC 消耗时间 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilGcTimeFgct | GC时间_FGCT | s | Full GC 消耗时间 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
HdfsDfzkGcUtilGcTimeGct | GC时间_GCT | s | 垃圾回收时间消耗 | host4hdfszkfailovercontroller、
id4hdfszkfailovercontroller |
说明：
各维度对应参数总览
参数名称 | 维度名称 | 维度解释 | 格式 |
Instances.N.Dimensions.0.Name | id4hdfsoverview | EMR 实例 ID 的维度名称 | 输入 String 类型维度名称：id4hdfsoverview |
Instances.N.Dimensions.0.Value | id4hdfsoverview | EMR 实例具体 ID | 输入 EMR 具体实例 ID，例如 ：emr-mm8bs222 |
Instances.N.Dimensions.1.Name | host4hdfsoverview | EMR 实例中节点 IP 的维度名称 | 输入String 类型维度名称：host4hdfsoverview |
Instances.N.Dimensions.1.Value | host4hdfsoverview | EMR 实例中具体节点 IP | 输入具体节点 IP ，例如：1.1.1.1 |
Instances.N.Dimensions.0.Name | id4hdfsnamenode | EMR 实例 ID 的维度名称 | 输入 String 类型维度名称：id4hdfsnamenode |
Instances.N.Dimensions.0.Value | id4hdfsnamenode | EMR 实例具体 ID | 输入 EMR 具体实例 ID，例如 ：emr-mm8bs222 |
Instances.N.Dimensions.1.Name | host4hdfsnamenode | EMR 实例中节点 IP 的维度名称 | 输入String 类型维度名称：host4hdfsnamenode |
Instances.N.Dimensions.1.Value | host4hdfsnamenode | EMR 实例中具体节点 IP | 输入具体节点 IP ，例如：1.1.1.1 |
Instances.N.Dimensions.0.Name | id4hdfsdatanode | EMR 实例 ID 的维度名称 | 输入 String 类型维度名称：id4hdfsdatanode |
Instances.N.Dimensions.0.Value | id4hdfsdatanode | EMR 实例具体 ID | 输入 EMR 具体实例 ID，例如 ：emr-mm8bs222 |
Instances.N.Dimensions.1.Name | host4hdfsdatanode | EMR 实例中节点 IP 的维度名称 | 输入String 类型维度名称：host4hdfsdatanode |
Instances.N.Dimensions.1.Value | host4hdfsdatanode | EMR 实例中具体节点 IP | 输入具体节点 IP ，例如：1.1.1.1 |
Instances.N.Dimensions.0.Name | id4hdfsjournalnode | EMR 实例 ID 的维度名称 | 输入 String 类型维度名称：id4hdfsjournalnode |
Instances.N.Dimensions.0.Value | id4hdfsjournalnode | EMR 实例具体 ID | 输入 EMR 具体实例 ID，例如 ：emr-mm8bs222 |
Instances.N.Dimensions.1.Name | host4hdfsjournalnode | EMR 实例中节点 IP 的维度名称 | 输入String 类型维度名称：host4hdfsjournalnode |
Instances.N.Dimensions.1.Value | host4hdfsjournalnode | EMR 实例中具体节点 IP | 输入具体节点 IP ，例如：1.1.1.1 |
Instances.N.Dimensions.0.Name | id4hdfszkfailovercontroller | EMR 实例 ID 的维度名称 | 输入 String 类型维度名称：id4hdfszkfailovercontroller |
Instances.N.Dimensions.0.Value | id4hdfszkfailovercontroller | EMR 实例具体 ID | 输入 EMR 具体实例 ID，例如 ：emr-mm8bs222 |
Instances.N.Dimensions.1.Name | host4hdfszkfailovercontroller | EMR 实例中节点 IP 的维度名称 | 输入String 类型维度名称：host4hdfszkfailovercontroller |
Instances.N.Dimensions.1.Value | host4hdfszkfailovercontroller | EMR 实例中具体节点 IP | 输入具体节点 IP ，例如：1.1.1.1 |
入参说明
弹性 MapReduce（HDFS）支持以下六种维度组合的查询方式，六种入参取值如下：
1. 查询 HDFS-OverviewAggregation 的指标监控数据，入参取值如下：
&Namespace=QCE/TXMR_HDFS
&Instances.N.Dimensions.0.Name=id4hdfsoverview
&Instances.N.Dimensions.0.Value=EMR 实例 ID
2. 查询 HDFS-Overview 的指标监控数据，入参取值如下：
&Namespace=QCE/TXMR_HDFS
&Instances.N.Dimensions.0.Name=id4hdfsoverview
&Instances.N.Dimensions.0.Value=EMR 实例 ID
&Instances.N.Dimensions.1.Name=host4hdfsoverview
&Instances.N.Dimensions.1.Value=EMR 实例中具体节点 IP
3. 查询 HDFS-NameNode 的指标监控数据，入参取值如下：
&Namespace=QCE/TXMR_HDFS
&Instances.N.Dimensions.0.Name=id4hdfsnamenode
&Instances.N.Dimensions.0.Value=EMR 实例 ID
&Instances.N.Dimensions.1.Name=host4hdfsnamenode
&Instances.N.Dimensions.1.Value=EMR实例中具体节点 IP
4. 查询 HDFS-DataNode 的指标监控数据，入参取值如下：
&Namespace=QCE/TXMR_HDFS
&Instances.N.Dimensions.0.Name=id4hdfsdatanode
&Instances.N.Dimensions.0.Value=EMR 实例 ID
&Instances.N.Dimensions.1.Name=host4hdfsdatanode
&Instances.N.Dimensions.1.Value=EMR实例中具体节点 IP
5. 查询 HDFS-Journal Node 的指标监控数据，入参取值如下：
&Namespace=QCE/TXMR_HDFS
&Instances.N.Dimensions.0.Name=id4hdfsjournalnode
&Instances.N.Dimensions.0.Value=EMR 实例具体 ID
&Instances.N.Dimensions.1.Name=host4hdfsjournalnode
&Instances.N.Dimensions.1.Value=EMR 实例中具体节点 IP
6. 查询 HDFS-ZKFC 的指标监控数据，入参取值如下：
&Namespace=QCE/TXMR_HDFS
&Instances.N.Dimensions.0.Name=id4hdfszkfailovercontroller
&Instances.N.Dimensions.0.Value=EMR 实例具体 ID
&Instances.N.Dimensions.1.Name=host4hdfszkfailovercontroller
&Instances.N.Dimensions.1.Value=EMR 实例中具体节点 IP
文档反馈