tencent cloud

数据湖计算

产品动态
产品简介
产品概述
产品优势
应用场景
购买指南
计费概述
退费说明
欠费说明
调整配置费用说明
快速入门
新用户开通全流程
DLC 数据导入指引
一分钟入门 DLC 数据分析
一分钟入门 DLC 权限管理
一分钟入门分区表
开启数据优化
跨源分析 EMR Hive 数据
标准引擎配置指引
配置数据访问策略
操作指南
控制台操作介绍
开发指南
运行环境
SparkJar 作业开发指南
PySpark 作业开发指南
查询性能优化指南
UDF 函数开发指南
系统约束
客户端访问
JDBC 访问
TDLC 命令行工具访问
第三方软件联动
Python 访问
实践教程
通过 Power BI 访问 DLC 数据操作指南
建表实践
使用 Apache Airflow 调度 DLC 引擎提交任务
StarRocks 直接查询 DLC 内部存储
Spark 计算成本优化实践
DATA + AI
使用 DLC 分析 CLS 日志
使用角色 SSO 访问 DLC
资源级鉴权指南
在 DLC 中实现 TCHouse-D 读写操作
DLC 原生表
SQL 语法
SuperSQL 语法
标准 Spark 语法概览
标准 Presto 语法概览
保留字
API 文档
History
Introduction
API Category
Making API Requests
Data Table APIs
Task APIs
Metadata APIs
Service Configuration APIs
Permission Management APIs
Database APIs
Data Source Connection APIs
Data Optimization APIs
Data Engine APIs
Resource Group for the Standard Engine APIs
Data Types
Error Codes
通用类参考
错误码
配额与限制
第三方软件连接DLC操作指南
常见问题
权限类常见问题
引擎类常见问题
功能类常见问题
Spark 作业类常见问题
DLC 政策
隐私协议
数据处理和安全协议
服务等级协议
联系我们

接入点网关引擎监控

PDF
聚焦模式
字号
最后更新时间: 2024-07-31 17:32:00
数据湖计算 DLC 提供了基于腾讯云可观测平台服务的接入点网关引擎的监控服务,保障您能实时了解网关情况。

使用须知

使用数据湖计算 DLC 的监控服务前,您需要开通腾讯云可观测平台服务(使用详情可参见 腾讯云可观测平台文档)。如暂未开通该服务,可使用主账号开通该服务。 腾讯云可观测平台服务使用过程中可能产生相关资费,详细资费信息参见 腾讯云可观测平台计费概述

监控入口

入口一:数据湖计算 DLC 控制台

1. 登录数据引擎 > 标准引擎 页面,择服务地域。
2. 选择标准引擎,在接入点处单击监控,即可进入监控数据展示界面。



监控数据展示界面如下:




配置入口:腾讯云可观测平台

1. 登录 腾讯云可观测平台控制台,登录账号需具备相关权限。
2. 左侧菜单选择云产品监控,进入告警管理的策略管理页面,选择数据湖计算选择对应的接入点网关引擎。




接入点网关引擎监控配置类型

新建告警策略

1. 数据湖计算 DLC 接入点网关支持告警能力,进入腾讯云可观测平台,单击告警管理,选择策略管理页
2. 单击新建策略,策略类型选择“数据湖计算”。接入点网关支持三种维度的告警,其中:
“网关”告警维度为:appid/gatewayid。
“网关(多维)”告警维度为:appid/gatewayid/instanceid。
“网关引擎(多维)”告警维度为:appid/gatewayid/engineid/processid。
名称
支持维度
优势及适用场景
网关(多维)
支持:CPU、内存、磁盘、网络细粒度告警。
例如:对接入点网关的 CPU 利用率进行告警配置,可以选择配置某个接入点网关下的一个、多个实例或者任意一个实例节点触发阈值就告警。
告警支持的维度更多,告警方式更加灵活。
基础指标推荐使用此方式。
网关
主要针对当前网关整体负载情况进行监控,对基础指标按照接入点网关节点进行聚合,同时支持服务级别的指标告警。
例如:execute_statement_num(执行 statement 数量),opened_operation_num(打开的 operation 数量), launch_engine_num(启动的引擎数量),engine_process_thread_num(engine 启动的线程数)。
支持 Dashboard。适用于单节点接入点网关或者需要对服务指标告警。
网关引擎(多维)
网关引擎指接入点网关对启动 DLC 引擎的进程进行监控告警。
例如: engine_process_thread_num(engine 启动的线程数),主要针对当前接入点网关启动的引擎的进程信息进行监控
支持细粒度告警,例如:常配置某个接入点网关 ID 下任意一个引擎的进程数达到阈值就告警。适用于对接入点网关启动的进程指标告警。




配置监控项示例

网关(多维)配置

示例1:配置某个接入点网关接入点id的任意一个实例的 CPU 使用率达到90%或者内存使用率达到80%告警,配置如下图所示:


示例2:要配置某个接入点网关id的其中一个或者多个实例的 CPU 使用率达到90%告警(这种配置方式只能对选中的实例进行告警,集群重建后需要重新配置),配置如下图所示:




网关配置

示例1:配置某个接入点网关 ID 中的执行的 statement 数量大于100告警,配置如下图所示:




网关引擎(多维)

示例1:配置某个接入点网关 ID 中启动的任意引擎进程中线程数量达到500告警,配置如下图所示:



示例2:配置某个接入点网关 ID,某个引擎中任意一个进程的线程数达到500告警,配置如下图所示:




帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈