tencent cloud

日志服务

动态与公告
产品动态
公告
新手指引
产品简介
产品概述
产品优势
地域和访问域名
规格与限制
基本概念
购买指南
计费概述
产品定价
按量计费(后付费)
欠费说明
清理日志服务资源
成本优化
常见问题
快速入门
一分钟入门指南
入门指南
使用 Demo 日志快速体验 CLS
操作指南
资源管理
权限管理
日志采集
指标采集
日志存储
指标存储
检索分析(日志主题)
检索分析(指标主题)
仪表盘
数据处理
投递与消费
监控告警
云产品中心
DataSight 独立控制台
历史文档
实践教程
日志采集
检索分析
仪表盘
监控告警
投递和消费
成本优化
开发者指南
通过 iframe 内嵌 CLS(旧方案)
通过 Grafana 使用 CLS
API 文档
History
Introduction
API Category
Making API Requests
Topic Management APIs
Log Set Management APIs
Index APIs
Topic Partition APIs
Machine Group APIs
Collection Configuration APIs
Log APIs
Metric APIs
Alarm Policy APIs
Data Processing APIs
Kafka Protocol Consumption APIs
CKafka Shipping Task APIs
Kafka Data Subscription APIs
COS Shipping Task APIs
SCF Delivery Task APIs
Scheduled SQL Analysis APIs
COS Data Import Task APIs
Data Types
Error Codes
常见问题
健康监测问题解释
采集相关
检索分析相关
其他问题
服务等级协议
CLS 政策
隐私协议
数据处理和安全协议
联系我们
词汇表

数据处理

PDF
聚焦模式
字号
最后更新时间: 2024-12-17 17:56:11
数据处理规格限制如下表所示:
分类
限制项
说明
数据加工
数据加工任务数
1个日志主题可以创建50个数据加工任务。
目标主题个数
1个数据加工任务最多可以有1000个目标主题。
调试数据条数
默认加载100条源日志主题中的日志,用于您的数据加工语句调试。
处理能力
源日志主题的每个分区可处理 10 - 20MB(非压缩)/秒的数据。
加工任务时延
99.9%的数据将在1秒内在数据加工模块内处理完成。
加工任务启停对数据的影响
加工任务暂停后12小时内重启,从暂停时的数据开始加工。超出12小时重启,从最新数据开始加工。
跨地域/跨账号
暂不支持。
加工历史数据
暂不支持。
定时 SQL 分析
定时 SQL 任务数
1个日志主题可以和10个定时 SQL 任务相关(该日志主题可以是任务的源日志主题,或者目标日志主题,都计算在内)。
查询并发
单个日志主题支持15并发(并发包含 定时 SQL 、检索分析、仪表盘、告警)。
查询结果
查询结果为统计分析结果时,单次默认返回100条结果,使用 SQL LIMIT 语法,单次可最大返回100万条结果。
查询结果返回数据包最大49MB,使用 API 时可启用 gzip 压缩。
查询超时时间
单次查询超时时间为55秒。
SQL 时间窗口
1分钟 - 7天。
调度周期
1分钟 - 24小时。
自定义时间戳
最小自定义时间戳的间隔为15秒,例如15:00:00,15:00:15,15:00:30。
延迟执行 SQL
默认60秒,最大为120秒。99.9%的日志索引需要5秒左右生成,极端情况60秒,因此配置延迟执行,确保该查询可以成功获取索引数据。
跨地域/跨账号
暂不支持。


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈