tencent cloud

流计算 Oceanus

动态与公告
产品动态
产品简介
产品概述
产品优势
应用场景
购买指南
计费概述
计费模式
退费说明
调整配置费用说明
快速入门
从零开始上手
创建独享集群
创建 SQL 作业
创建 JAR 作业
创建 ETL 作业
创建 Python 作业
操作指南
作业管理
作业开发
作业监控
作业日志
事件与诊断
元数据管理
快照管理
作业调优
依赖管理
集群管理
权限管理
SQL 开发指南
开发指南概述
术语和数据类型
DDL 数据定义语句
DML 数据操作语句
MySQL CDC 多 Source 复用
上下游开发指南
SET 控制语句
运算符和内置函数
标识符与保留字
Python 开发指南
ETL 开发指南
概述
ETL 作业术语表
上下游开发指南
常见问题
联系我们

配置采集作业运行日志

PDF
聚焦模式
字号
最后更新时间: 2023-11-07 17:27:57
用户可以为 Oceanus 集群设置1个或多个 CLS 日志主题,供不同作业的运行日志灵活选用,并在作业的日志页面方便地查看和检索。与此同时,Oceanus 集群也可以使用 COS 存放作业运行日志,这种方式相较于 CLS 来说成本更低,但无法实时地查看和检索作业日志。

集群绑定CLS

在集群详情页面,可以设置集群绑定的 CLS 日志集和日志主题,并且可以绑定多个,最多绑定3个 CLS 日志主题。

创建日志集和日志主题

用户可以在 Oceanus 控制台新建专属的日志集和日志主题,创建的日志主题都会带有"Oceanus_"前缀;在选择日志集时,可以新建,也可以选择现有的日志集。 流计算 Oceanus 创建的日志主题有特殊的系统设置,不建议用于其他产品。

选择现有日志主题

用户在绑定 Oceanus 集群的日志主题时,可以选择现有的日志主题,但只能选择在 Oceanus 控制台新建的日志主题。

集群设置默认运行日志采集方式

为节省作业参数配置时间,可以为集群设置默认的作业采集方式,设置默认采集方式后,下一次新建作业会使用默认配置中的日志集和日志主题。

作业设置运行日志采集方式

当用户选择运行日志采集方式为 CLS 时,由于在 Oceanus 集群可以设置绑定多个 CLS 日志主题,在新建作业时,作业参数配置需要选择作业运行日志具体上报到哪一个日志主题,当然也可以设置默认采集方式。 当用户选择运行日志采集方式为 COS 时,作业日志会默认放到用户创建集群时绑定的 COS 中,日志在 COS 中存放的路径为 job-running-log/

作业设置运行日志级别

在作业参数页面,支持配置当前作业日志级别,目前可选的级别有:DEBUG , INFO , WARN , ERROR ; 作业配置日志级别之后,作业日志会按照配置的级别输出,如果不支持选择日志级别,可以 提交工单 申请升级。

批量修改作业日志级别

如果您需要批量修改多个作业的日志采集级别的话,可以在作业管理页面的批量选项下拉列表中点击批量修改日志级别按钮。然后选择日志级别(目前可选的级别有:DEBUG , INFO , WARN , ERROR)后点击确定按钮即可完成批量配置,作业日志会按照配置的级别输出,如果不支持选择日志级别,可以 提交工单 申请升级。






帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈