tencent cloud

数据湖计算

产品动态
产品简介
产品概述
产品优势
应用场景
购买指南
计费概述
退费说明
欠费说明
调整配置费用说明
快速入门
新用户开通全流程
DLC 数据导入指引
一分钟入门 DLC 数据分析
一分钟入门 DLC 权限管理
一分钟入门分区表
开启数据优化
跨源分析 EMR Hive 数据
标准引擎配置指引
配置数据访问策略
操作指南
控制台操作介绍
开发指南
运行环境
SparkJar 作业开发指南
PySpark 作业开发指南
查询性能优化指南
UDF 函数开发指南
系统约束
客户端访问
JDBC 访问
TDLC 命令行工具访问
第三方软件联动
Python 访问
实践教程
通过 Power BI 访问 DLC 数据操作指南
建表实践
使用 Apache Airflow 调度 DLC 引擎提交任务
StarRocks 直接查询 DLC 内部存储
Spark 计算成本优化实践
DATA + AI
使用 DLC 分析 CLS 日志
使用角色 SSO 访问 DLC
资源级鉴权指南
在 DLC 中实现 TCHouse-D 读写操作
DLC 原生表
SQL 语法
SuperSQL 语法
标准 Spark 语法概览
标准 Presto 语法概览
保留字
API 文档
History
Introduction
API Category
Making API Requests
Data Table APIs
Task APIs
Metadata APIs
Service Configuration APIs
Permission Management APIs
Database APIs
Data Source Connection APIs
Data Optimization APIs
Data Engine APIs
Resource Group for the Standard Engine APIs
Data Types
Error Codes
通用类参考
错误码
配额与限制
第三方软件连接DLC操作指南
常见问题
权限类常见问题
引擎类常见问题
功能类常见问题
Spark 作业类常见问题
DLC 政策
隐私协议
数据处理和安全协议
服务等级协议
联系我们

数据引擎监控

PDF
聚焦模式
字号
最后更新时间: 2024-07-31 17:31:25
数据湖计算 DLC 提供了基于腾讯云可观测平台服务的数据引擎的监控服务,保障您能实时了解数据引擎的运行情况,配置数据告警。告警配置方式可参见 监控告警配置

使用须知

使用数据湖计算 DLC 的监控服务前,您需要开通腾讯云可观测平台服务。如暂未开通该服务,可使用主账号开通该服务。 腾讯云可观测平台服务使用过程中可能产生相关资费,详细资费信息参见 计费概述

监控入口

入口一:数据湖计算 DLC 控制台

注意:
账号需有数据引擎的监控权限。
1. 登录 数据湖计算 DLC 控制台,选择服务地域。
2. 左侧菜单栏进入数据引擎页。
3. 查看方式支持:
方式1:选择引擎类型,进入匹配引擎监控列表。
方式2:选择引擎列表中目标引擎,单击监控查看目标引擎监控。


入口二:腾讯云可观测平台

1. 登录 腾讯云可观测平台,登录账号需具备相关权限。
2. 左侧菜单选择云产品监控,找到数据湖计算 DLC,并选择需要查看监控的类型。

3. 选择监控类型后进入监控页,选择对应地域即可查看该地域下的监控资源信息。

4. 单击引擎 ID 即可进入监控详情。

监控粒度配置

支持通过监控顶部配置监控数据时间范围、时间粒度、自动更新时间范围。

监控数据时间范围:精确到分钟,支持选择一段时间的数据。
时间粒度:监测点间隔时间,支持配置1分钟或5分钟。
自动更新数据:页面数据自动刷新方式配置,支持配置关闭、30s、5min、30min、1h。

监控数据对比

支持选择一段时间的数据进行监控对比。单击选择对比时间范围后即可在下方数据罗盘查看对比数据。


监控指标

监控类型
监控指标
CPU
所有 Driver 节点 CPU 最大使用率
所有 Executor 节点 CPU 最大使用率
所有 Driver 节点 CPU 平均使用率
所有 Executor 节点 CPU 平均使用率
所有集群 CPU 最大使用率
所有集群 CPU 平均使用率
内存
所有 Driver 节点内存最大使用率
所有 Executor 节点内存最大使用率
所有 Driver 节点内存平均使用率
所有 Executor 节点内存平均使用率
所有集群内存最大使用率
所有集群内存平均使用率
任务
取消任务个数
失败任务个数
初始化任务个数
任务平均初始化时长
任务最大初始化时长
排队任务个数
任务平均排队时长
任务最大排队时长
运行中任务个数
成功任务个数
网络
所有 Driver 节点网络最大入带宽
所有 Executor 节点网络最大入带宽
所有 Driver 节点网络平均入带宽
所有 Executor 节点网络平均入带宽
所有 Driver 节点网络最大出带宽
所有 Executor 节点网络最大出带宽
所有 Driver 节点网络平均出带宽
所有 Executor 节点网络平均出带宽
云盘
所有 Driver 节点云盘最大使用率
所有 Executor 节点云盘最大使用率
所有 Driver 节点云盘平均使用率
所有 Executor 节点云盘平均使用率
CU
作业引擎 CU 数
CU 使用率


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈